第三次easyhadoop聚会

最新推荐文章于 2017-02-28 09:05:36 发布
最新推荐文章于 2017-02-28 09:05:36 发布
阅读量2.1k 收藏 1
点赞数 1
分类专栏： hadoop 文章标签： hadoop 数据挖掘 数据仓库 阿里巴巴 hbase 生物
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/azhao_dn/article/details/7572952
版权
第三次easyhadoop聚会 20120519 [hadoop相关应用与数据挖掘]

时间: 2012年5月19日星期六 下午13:00-16:30
网站: www.easyhadoop.com EasyHadoop 交流群:93086930

1. Hadoop在亿赞普的应用(亿赞普 肖燕京)
2. Hive与HBase整合经验谈(趣游 史东杰)
3. Scribe日志收集系统简介(暴风 向磊)
4. Mahout机器学习与推荐系统简介(暴风 荣英杰)
5. 阿里云ODPS：云端数据仓库服务 (阿里巴巴 王乐珩 阿里云公司，云计算业务线产品经理。此前就职于中科院计算所生物信息课题组)

联系电话 : 18601271509 向磊

地点：北京师范大学教7楼，302教室
azhao_dn
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 4
    评论
专栏目录
EasyHadoop 第六次技术分享(Hadoop应用(海量小文件存储),Hadoop高可用和信息安全)
竹叶青 的专栏
09-19 8719
初春播下的种子,在春夏阳光雨露的滋润下快速成长,转眼也快到了十月金秋收获的季节。而现在正是秋初酝酿成长之季。 Hadoop 从互联网领域蓬勃发展,广大搜索,电商,视频,门户,游戏公司都纷纷开始实施Hadoop技术解决方案。同时Hadoop大数据解决方案已经扩展到通信,安全,工业,乃至生物医药等领域，成为公认的大数据分析处理领域规范标准。         EasyHadoop 开源社区从二月的第
谈Hadoop平民化(infoq访谈)
weixin_34248118的博客
11-15 207
原文地址作者 水羽哲 发布于 2012年11月14日随着Hadoop的推出，大数据处理实现了技术上的落地。但是对于一般的公司和开发者而言，Hadoop依旧是一个陌生或者难以使用的技术。这次的阿里云开发者大会上，向磊凭借EasyHadoop将Hadoop平民化而获得了最佳创意奖，InfoQ对他进行了采访。InfoQ： 首先请您做下自我介绍并介绍本次的参赛作品EasyHadoop?向磊：大家好，我是向...
EasyHadoop北京技术沙龙20121124
11-25
EasyHadoop社区今天在中科院软件所举行沙龙，现场有超200人参与。包括美国凯特智能决策有限公司亚太事务主任涂子沛、中国科学院软件研究所总体部战略先导专项研究组负责人 王凯、蓝讯Hadoop高级工程师刘刚、阿里云郭瑞杰、天云趋势研发总监孙振南等参与了分享。
第四次easyhadoop聚会
竹叶青 的专栏
06-27 1671
第四次easyhadoop聚会 20120701 [hadoop相关应用与数据挖掘] 时间: 2012年7月1日星期日 下午14:00-17:00 网站: www.easyhadoop.com EasyHadoop 交流群:93086930 主题：   1）hadoop集群运维杂记（蓝讯  张月）   2）hive使用和优化（暴风 赵修湘）   3）phphiveadmin 安
视频：easyhadoop聚会hive和phpHiveAdmin部分
weixin_34392435的博客
04-15 49
2012-04-14，在北航主南203，第二次easyhadoop开发者聚会核心主题:Hadoop高可用和性能调优和Hadoop相关软件发布. 网站:www.easyhadoop.com EasyHadoop 交流群:930869301.Hadoop 国内外应用,带EasyHadoop v2.0 介绍 [暴风-xiaojun]2.Hadoop系统监控和Hive负载均衡,带p...
大数据公益大学第一次聚会
weixin_30609287的博客
10-26 84
10月19日，在人大明德法学院听了大数据公益大学的技术聚会，共三个报告听了两个，第三个报告是关于大数据展示的，听了几分钟感觉主题是做表格和报表，兴趣不大就提前走了。这是我第一次进人大，从西门进去走几步就可以看到法学院的几栋大楼，都是红色的，在明媚的阳光和湛蓝天空的映衬下，显得很是气派。 聚会的第一个报告是easyhadoop的开发者向磊讲解他开发的Xa...
云计算学习总结
~ Caesar's wish书屋 ~
02-28 1162
这里写下我在过去半年中对云计算的认识，与大家分享！ 基础 谈云计算的商业模式、系统架构时，用SaaS、PaaS、IaaS这些概念； 谈云计算的落地、技术实现时，用hadoop生态系统的开源组件。 在Hadoop的生态系统中，DFS和MapReduce无疑是最为基础的，了解它们的原理与机制成为了进入云计算编程领域的敲门砖。DPaaS也仅仅对DFS和MapReduce部
Hadoop高可用集群（HA+JournalNode+zookeeper）
光于前裕于后的博客
03-20 1万+
谁能给我十台机器玩一玩啊！！！ 一、一些名词介绍 HA(High Available), 高可用性集群，是保证业务连续性的有效解决方案，一般有两个或两个以上的节点，且分为活动节点及备用节点。 ZKFC（ZooKeeper FailoverController）ZooKeeper故障切换控制器 二、为什么需要HA和Federation 1. 单点故障 在Hadoop 2.
基于hadoop和hbase的youtube简单模拟3
liufangzhe793528089的专栏
07-26 1433
有点累了,下一步再详细讲部署和程序的细节问题,先看看部署后的效果吧! csdn的图片上传不了,请进入我的相册看看吧,以下是每张截图对应信息: 启动myeclipse: 1 挂载hdfs: 2 启动tomcat后访问: 3 论文搜索界面: 4 论文展现: 5 图片搜索: 6 图片列表: 7 图片展现: 8 视频搜索: 9 视
easyhadoop
08-20
3. **自动化安装与配置**: EasyHadoop简化了Hadoop和HBase的安装过程，通过一键式脚本自动下载、编译、配置相关组件，减少了人为错误的可能性，提升了部署效率。 4. **Web管理界面**: 提供了一个用户友好的图形界面...
Easyhadoop学习笔记
01-06
**三、EasyHadoop关键概念** - **Central**：EasyHadoop的Web管理界面，通常部署在单一服务器上。 - **Agent/NodeAgent**：在每台服务器上运行的操作代理，负责执行Central的指令。 **四、EasyHadoop的使用和开发*...
EasyHadoop实战手册.doc
09-06
EasyHadoop 是一个简化 Hadoop 集群部署和管理的工具，旨在让开发者和管理员更轻松地在本地或云端构建、配置和管理 Hadoop 生态系统。通过 EasyHadoop，用户可以快速设置 Hadoop 环境，包括 HDFS、MapReduce、YARN ...
phpHiveAdmin开发两个月记录
weixin_33973609的博客
03-24 77
从2012-01-29开始提交到github开始算，现在phpHiveAdmin已经开发了接近两个月。很多是业余时间在写，上班也会写写，但主要工作还是维护hadoop集群，hive集群，跟各部门的数据需求进行对接和偶尔编写一些map/reduce脚本，其实map/reduce脚本写的已经少了，大部分都是我的同事在写。帮我分担了不少工作压力，很感谢他们，也很感谢我的上级，全力支持我做这么一个公司项目...
hadoop mapred(hive)执行目录 文件权限问题
热门推荐
竹叶青 的专栏
10-31 2万+
在配置其他linux用户使用hive 的cli客户端时，发现该用户没有对/tmp目录的写权限，于是将/tmp目录下权限设置为777：bin  /hadoop fs -chmod -R 777 /tmp，然而第二天来时发现hadoop的文件rush任务失败，报错的日志信息如下：Job Submission failed with exception 'java.io.IOException(The
hadoop集群balance工具详解
竹叶青 的专栏
07-12 2万+
在线上的hadoop集群运维过程中，hadoop 的balance工具通常用于平衡hadoop集群中各datanode中的文件块分布，以避免出现部分datanode磁盘占用率高的问题（这问题也很有可能导致该节点CPU使用率较其他服务器高）。      1） hadoop balance工具的用法： To start: bin/start-balancer.sh [-threshold ] Ex
hbase权威指南： store file合并（compaction）
竹叶青 的专栏
04-29 2万+
hbase为了防止小文件（被刷到磁盘的menstore）过多，以保证保证查询效率，hbase需要在必要的时候将这些小的store file合并成相对较大的store file，这个过程就称之为compaction。在hbase中，主要存在两种类型的compaction：minor  compaction和major compaction。           major compaction 的
修改linux的最大文件句柄数限制
竹叶青 的专栏
01-04 2万+
修改linux的最大文件句柄数限制的方法：       1）ulimit -n 65535              在当前session有效，用户退出或者系统重新后恢复默认值       2）修改profile文件：在profile文件中添加：ulimit -n 65535             只对当个用户有效       3）修改文件：/etc/security/limi
Hadoop2 MR-JobHistory服务介绍
竹叶青 的专栏
05-15 1万+
1）MR-JobHistory服务目标 主要是向用户提供历史的mapred Job 查询 2）MR-JobHistory服务架构 详细解释： a）在运行MR Job时，MR 的 ApplicationMaster会根据mapred-site.xml配置文件中的配置，将MR Job的job history信息保存到指定的hdfs路径（首先保存到临时目录，然后mv到最终目录）
EasyHadoop开发聚会：快速数据可视化框架Friday
"数据的快速可视化是EasyHadoop第二次开发者聚会的主题，重点在于如何通过有效的框架和工具提高数据呈现的速度，满足用户对快速理解和利用数据的需求。内容涵盖了用户与需求的理解、快速思路的构建、框架设计以及...
评论 4
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值