- 博客(6)
- 资源 (2)
- 收藏
- 关注
原创 hadoop_4 分布式配置
--------------系统准备-------------------- 测试firefox,ifconfig等功能,确保系统是ok的 sudo su root gedit /etc/hosts 修改内容如下: 192.168.52.134 master 192.168.52.135 slave1 192.168.52.136 slave2 hostname mas...
2013-03-31 21:19:33 55
原创 hadoop_3
[b]云计算[/b] 概念 广义上的云计算包括所有对外提供服务系统。 类似webservice,SOA等概念 狭义上的是指分布式计算和分布式存储。这里说的都是狭义上的云计算 云计算 vs 网格计算 网格计算将作业分散到集群的各台机器上,这些机器访问共享的文件系统。(就是分布式计算) 云计算 如果需要处理的数据量过大(上百G的数据), IO会成为主要瓶颈,这时...
2013-03-29 15:13:46 77
原创 hadoop_2
/usr/lib/hadoop-0.20-mapreduce sqoop list-tables --connect jdbc:mysql://localhost/movielens --username training --password training sqoop import --connect jdbc:mysql://localhost/movielens --tabl...
2013-03-22 15:55:22 57
原创 mongoDB
-------mongoDB 和oracle的区别------------- mongoDB并不是关系型数据库,而是像一种对象型数据库,用Json格式来存放对象 没有oracle很多表之间的关联, 基本上一个对象内的所有属性都在一条记录中, 对象中的集合是用数组的形式来表现,所以会有很强调对数组的操作。 mongoDB的分片,分布式数据库 -------CMD title小技巧-...
2013-03-10 20:28:52 443
原创 hadoop 1
hadoop能解决哪些问题 1, 海量数据需要及时分析和处理 --新浪微波有人发了一条反_动的帖子,公_安_部命令需要在5分钟内找到该人。 在上百个G的 日志文件/ETS中查找,一般的方式无法做到【java n线程乱跑?】。 2, 海量数据需要深入分析和挖掘 --添加一个人,会自动弹出你可能会认识的人,他们之间都是通过日志来得到的。 3, 数据需要长期保存 ---- ...
2013-03-05 20:58:29 74
原创 hudson
HUDSON 是一个持续集成的工具 定时更新代码, 编译打包, 运行单元测试, 邮件通知功能。 这个和uCMDB的adapter集成类似。 用windows的task schedule, ant 更新代码和打包, 邮件通知。 就是少了个UI界面...
2013-03-01 13:21:41 52
Flex+Blazeds与Java_Web_Project整合
2012-03-13
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人