- 博客(27)
- 资源 (47)
- 收藏
- 关注
RSS订阅转载 一位老电子工程师十年的职场感悟
一位老电子工程师十年的职场感悟[1]好好规划自己的路，不要跟着感觉走！根据个人的理想决策安排，绝大部分人并不指望成为什么院士或教授，而是希望活得滋润一些，爽一些。那么，就需要慎重安排自己的轨迹。从哪个行业入手，逐渐对该行业深入了解，不要频繁跳槽，特别是不要为了一点工资而转移阵地，从长远看，这点钱根本不算什么，当你对一个行业有那么几年的体会，以后钱根本不是问题。频繁地动荡不是上策
2013-06-28 12:53:22
1421
2
转载 当你走不下去的时候
转载：http://blog.csdn.net/muge0913/article/details/7249215正如“打工皇帝”唐骏说：“我觉得有两种人不要跟别人争利益和价值回报。第一种人就是刚刚进入企业的人，头5年千万不要说你能不能多给我一点儿工资，最重要的是能在企业里学到什么，对发展是不是有利……” 人总是从平坦中获得的教益少，从磨难中获得的教益
2013-06-28 12:46:18
1247
1
转载 hbase参数配置优化
因官方Book Performance Tuning部分章节没有按配置项进行索引，不能达到快速查阅的效果。所以我以配置项驱动，重新整理了原文，并补充一些自己的理解，如有错误，欢迎指正。配置优化zookeeper.session.timeout默认值：3分钟（180000ms）说明：RegionServer与Zookeeper间的连接超时时间。当超时时间到后，ReigonSe
2013-06-25 13:04:01
13499
转载 hbase shell基础和常用命令详解
HBase是一个分布式的、面向列的开源数据库,源于google的一篇论文《bigtable：一个结构化数据的分布式存储系统》。HBase是Google Bigtable的开源实现，它利用Hadoop HDFS作为其文件存储系统，利用Hadoop MapReduce来处理HBase中的海量数据，利用Zookeeper作为协同服务。1. 简介HBase是一个分布式的、面向列的开源数据库
2013-06-25 13:02:06
712
原创 ZooKeeper 安装配置笔记
CDH版hadoop 可以参照如上配置,保证能够正常启动，hdfs 报告正常。hbase版本的选择也是CDH版 ：hbase-0.90.6-cdh3u6.tar.gz。ZooKeeper 版本的选择也是CDH版 ：zookeeper-3.3.5-cdh3u6.tar.gz安装步骤：1.cp ZooKeeper tar包到安装目录下，解压，所有节点的目录结构一致，这是hadoop集群
2013-06-25 12:55:25
1937
转载 HBase HMaster启动和停止
HMaster(0.90.3) Startup:main方法: new HMasterCommandLine(HMaster.class).doMain(args); //args为startHMasterCommandLine: 用于启动/停止HMaster.doMain: 运行Tool类的run方法. 继承关系：HMasterComman
2013-06-23 14:37:33
3982
转载 HBase 官方文档（0.90.4）
http://www.yankay.com/wp-content/hbase/book.htmlhttp://www.just4e.com/hbase.htmlCopyright ? 2010 Apache Software Foundation, 盛大游戏-数据仓库团队-颜开(译)Revision HistoryRevision 0.90.4 配置，数据模型使用入门A
2013-06-23 13:57:28
5088
转载 HBase 系统架构
HBase是Apache Hadoop的数据库，能够对大型数据提供随机、实时的读写访问。HBase的目标是存储并处理大型的数据。HBase是一个开源的，分布式的，多版本的，面向列的存储模型。它存储的是松散型数据。HBase特性：1 高可靠性2 高效性3 面向列4 可伸缩5 可在廉价PC Server搭建大规模结构化存储集群HBase是Goog
2013-06-23 09:08:25
1093
原创 编译CDH3 eclipse插件
编译CDH eclipse插件我下载的CDH 版hadoop hadoop-0.20.2-cdh3u6.tar.gz由于Cloudera CDH默认没有提供eclipse插件，需要自己编译，而且它的插件和Apache hadoop插件不兼容。所以得在网上找有没有人编译好的对应插件版本 如下：http://download.csdn.net/detail/aichaoguy/554
2013-06-21 12:51:37
2618
3
原创 HBase分布式集群环境搭建
前言：由于之前使用apache hadoop总是出一些问题。所以我重新安装hadoop，选择的是CDH版hadoop ：hadoop-0.20.2-cdh3u6.tar.gz，结果也能正常启动，记录在这篇文章内：http://blog.csdn.net/huoyunshen88/article/details/8955430CDH版hadoop 可以参照如上配置,保证能够正常启动，
2013-06-21 11:44:43
10429
转载 HBase-0.90.4集群安装配置
HBase是Hadoop数据库，能够实现随机、实时读写你的Big Data，它是Google的Bigtable的开源实现，可以参考Bigtable的论文Bigtable: A Distributed Storage System for Structured。HBase的存储模型可以如下三个词来概括：distributed, versioned, column-oriented。HBase并非
2013-06-21 11:31:39
1444
原创 学习hadoop常去的网站
学习hadoop常去网址；hadoop邮件列表信息查询http://www.search-hadoop.com简介：hadoop邮件列表都是hadoop用户和开发者的提问和讨论的邮件列表，里面大量问题，和解决方案，可以帮助自己解决工作中遇到的大量问题。hadoop in china http://www.hadooper.cn/dct/page/65750
2013-06-20 17:59:42
3599
1
转载 hadoop CDH3版和apache 0.20版本的对比
目前hadoop有2个开源版本，一个是Apache的版本，另一个是Cloudera在Apache的基础上进行优化的版本，也称为CDH3版。两个版本的对比情况如下： CDH3版本Apache版本描述Hadoop Common●●The common utilities that sup
2013-06-20 16:39:41
2307
转载 hadoop常用命令
http://blog.sina.com.cn/s/blog_940224600100z7kt.htmlhttp://blog.chinaunix.net/uid-10915175-id-3258669.htmlFS Shell调用文件系统(FS)Shell命令应使用 bin/hadoop fs 的形式。 所有的的FS shell命令使用URI路径作为
2013-06-19 17:49:49
825
转载 hbase完全分布式环境搭建
http://blog.csdn.net/smh821025/article/details/8967860，讲的比较全面HBase是一个分布式的、面向列的开源数据库，该技术来源于Chang et al所撰写的Google论文“Bigtable：一个结构化数据的分布式存储系统”。就像Bigtable利用了Google文件系统（File System）所提供的分布式数据存储一样，HBase在
2013-06-19 08:26:46
925
转载 Hadoop添加删除节点
添加节点1.修改host 和普通的datanode一样。添加namenode的ip 2.修改namenode的配置文件conf/slaves 添加新增节点的ip或host 3.在新节点的机器上，启动服务 [root@slave-004 hadoop]# ./bin/hadoop-daemon.sh start datanode[root@
2013-06-17 12:45:42
995
转载 CDH4 高可用集群指南
一、Hadoop的高可用性 1.概论本指南提供了一个HDFS的高可用性（HA）功能的概述，以及如何配置和管理HDFS高可用性(HA)集群。本文档假定读者具有对HDFS集群的组件和节点类型具有一定理解。有关详情，请参阅Apache的HDFS的架构指南。http://hadoop.apache.org/common/docs/current/hdfs_design.html 2
2013-06-14 15:25:58
2599
转载 dfsadmin -report结果分析
最近在搭建hadoop集群实验中，启动集群时常报错：jobtracker.info could only be replicated to 0 nodes, instead of 1查了好多资料，用了好多方式尝试解决，通过下面的命令总有找到问题所在了。原因：Configured Capacity也就是datanode 没用分配容量 [root@dev9106 bin]# ./ha
2013-06-13 21:45:16
5583
转载 jobtracker.info could only be replicated to 0 nodes, instead of 1
http://f.dataguru.cn/thread-138042-1-1.htmlhttp://stackoverflow.com/questions/15585630/file-jobtracker-info-could-only-be-replicated-to-0-nodes-instead-of-1http://www.iteye.com/topic/1120575
2013-06-13 20:31:54
2613
转载 Linux:cannot restore segment prot after reloc:Permission denied
在编译完ZendOptimizer后，重启php-fpm 后，出现下列提示："cannot restore segment prot after reloc: Permission denied "哪应该是SELinux的问题，可以考虑把它关闭。郁闷的是.我把SELinux关闭后还是不行.于是到google上search.发现这个很有用.编辑/etc/selinux/con
2013-06-13 15:05:16
776
转载 Hadoop 常见问题集锦
1.datanode节点TaskTracker任务启动，但是DataNode任务未启动这一般是由于对hadoop进行升级后导致的，需要删除hadoop.tmp.dir所对应的文件夹，然后再对namenode进行重新格式化，删除之前先将数据导出，要不然数据就没了2./lib/ld-linux.so.2: bad ELF interpreter: 没有那个文件或目录 缺少 gl
2013-06-11 22:31:58
2275
转载 Hadoop 常见问题总结
http://cloud.riaos.com/?p=8001390http://shirley-ren.iteye.com/blog/1174622出现问题以后先查看日志，以下是常见的错误情况1 地址占用org.apache.hadoop.hdfs.server.namenode.NameNode: Address already in use
2013-06-11 22:11:22
9547
1
转载 源码级强力分析hadoop的RPC机制
http://www.uml.org.cn/sjjm/201303211.asp这些天一直奔波于长沙和武汉之间，忙着腾讯的笔试、面试，以至于对hadoop RPC（Remote Procedure Call Protocol ，远程过程调用协议，它是一种通过网络从远程计算机程序上请求服务，而不需要了解底层网络技术的协议。可以参考：http://baike.baidu.com/view/32
2013-06-11 21:25:25
916
原创 hadoop启动过程中遇到的问题
http://mail-archives.apache.org/mod_mbox/hadoop-hdfs-user/201207.mbox/%3C50097B6C.8060704@cs.uni-kassel.de%3Ehttp://blog.csdn.net/huoyunshen88/article/details/90897972013-06-08 15:04:15,62
2013-06-08 18:23:24
5527
转载 hadoop常用命令
启动Hadoop进入HADOOP_HOME目录。执行sh bin/start-all.sh关闭Hadoop进入HADOOP_HOME目录。执行sh bin/stop-all.sh 1、查看指定目录下内容hadoop dfs –ls [文件目录]eg: hadoop dfs –ls /user/wangkai.pt2、打开某个已存在文件
2013-06-08 14:31:48
7275
1
原创 linux下hadoop eclipse配置
比较忙，没有时间学习这个，今天下决心要在linux上搞好，vm虚拟机集群环境已经搭建好了，并能正常启动，中间遇到过一些问题，这里就不说了。这次配置dfs主要产生的问题主要是端口配置错误，没有和环境中的一致，搞反了，其次hadoop是看不到目录结构的，非传统目录。通过eclipse插件可以查看。1、把eclipse-java-helios-SR2-linux-gtk.tar.gz解压到某个目
2013-06-07 17:37:23
1428
1
原创 java通过ftp方式读取文件，并解析入库
对于自己是个总结，下次使用的时候直接copy，要注意的地方是ftp访问文件的方式，访问的是ftp用户的home目录，而不是从绝对路径访问。private final static String DELETEUSER = "delete from customermanager_user where cmanagerno in ";private final static Strin
2013-06-06 09:24:52
20774
2
Artificial_Intelligence_A_Modern_Approach_3rd_Edition
2017-08-17
持续集成资料
2016-01-27
数据库中间件mycat
2016-01-27
UmlGraph经过处理修改源码的jar包
2014-06-26
tomcat集群-Apache2.2.4+And+mod_jk.so+tomcat配置文件
2013-04-02
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人