hadoop学习日志
文章平均质量分 57
yousky027
这个作者很懒,什么都没留下…
展开
-
ubuntu单机hadoop配置
1, ubuntu修改root密码: alt+f2,在弹出的运行窗口中输入:gnome-terminal,回车。如果新装的系统还没有设置root密码可以在这个界面输入:sudo passwd root,回车后按提示输入两次root的密码(注意,输入时是不会提示*号的,直接输入即可)。 2, 关闭防火墙 $sudu ufw disable 3. Ubuntu 下安装 Open...原创 2013-09-06 16:13:26 · 114 阅读 · 0 评论 -
ubuntu集群hadoop配置
1.修改所有机器/etc/hosts 192.168.1.153 liuying002 .. 2.在本地机器上生成密码对 [root@sg201 .ssh]# ssh-keygen -t rsa Generating public/private rsa key pair. Enter file in which to save the key (/root/.ssh/id_...原创 2013-09-06 16:20:38 · 79 阅读 · 0 评论 -
ubuntu下搭建php、java开发环境
1. 在Ubuntu中安装apache2 安装指令:sudo apt-get install apache2 端口是80. 默认应用部署目录/var/www/ 在目录下建立目录 安装结束后: 产生的启动和停止文件是:/etc/init.d/apache2 启动:sudo apache2ctl -k start 停止:sudo apache2ctl -k stop 重新启动...原创 2013-09-06 16:31:05 · 146 阅读 · 0 评论 -
ubuntu下hadoop开发java编译错误
eclipse下hadoop开发 java project eclipse设置run configuration 1.java Application 2.右键new一个新的application 3.main-project:picjava main class:选择当前java文件 4.program argument:/usr/local/***.** hdfs:/...原创 2013-09-06 16:32:41 · 198 阅读 · 0 评论 -
关于HBase过滤器[转]
过滤数据 到现在为止你了解到HBase拥有灵活的逻辑模式和简单的物理模型,它们允许应用系统的计算工作更接近硬盘和网络,并在这个层次进行优化。设计有效的模式是使用HBase的一个方面,你已经掌握了一堆概念用来做到这点。你可以设计行键以使访问的数据在硬盘上也存放在一起,所以读写操作时可以节省硬盘寻道时间。在读取数据时,你经常需要基于某种标准进行操作,你可以进一步优化数据访问。过滤器就是在这种情况下使...原创 2013-10-27 13:47:09 · 110 阅读 · 0 评论 -
hive安装及常用命令
hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供完整的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。 其优点是学习成本低,可以通过类SQL语句快速实现简单的MapReduce统计,不必开发专门的MapReduce应用,十分适合数据仓库的统计分析。 hive安装: 1.tar -xzvf hive* 2.hdfs h...原创 2013-10-27 16:20:27 · 130 阅读 · 0 评论