![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
不再简简单单
这个作者很懒,什么都没留下…
展开
-
Hadoop起源 、hadoop介绍、hadoop包含的模块
Hadoop起源Google的3篇论文 GFS -> HDFS 文件系统,用来存储数据的 Mapreduce -> Mapreduce ,用于分析数据 bigTable ->Hbase 表,数据库,用来存储数据的Hadoop最原始的功能数据存储:HDFS数据分析:ma...原创 2019-07-01 21:39:19 · 1558 阅读 · 0 评论 -
hadoop的安装部署、 common模块 、HDFS模块、Yarn模块 、MapReduce模块
JDK安装https://blog.csdn.net/simple_start/article/details/94218246hadoop的安装部署安装方式:伪分布式,让进程跑在一台机器上,只是他们的端口不一样文档:http://hadoop.apache.org/docs/r2.7.6/hadoop-project-dist/hadoop-common/SingleC...原创 2019-07-01 22:44:10 · 756 阅读 · 0 评论 -
MapReduce编程
JDK安装https://blog.csdn.net/simple_start/article/details/94218246hadoop的安装部署、 common模块 、HDFS模块、Yarn模块 、MapReduce模块安装https://blog.csdn.net/simple_start/article/details/94412372MapRed...原创 2019-07-02 22:34:56 · 390 阅读 · 0 评论 -
hadoop项目UV,统计每个城市UV数
hadoop项目 MapReduce编程 配置方法https://blog.csdn.net/simple_start/article/details/94484818统计每个城市UV数每个城市有多少人(用户)访问思路Input输入:读取HDFS上数据输出:key value行偏移量 行内容,Map输入:ke...原创 2019-07-03 23:29:44 · 605 阅读 · 0 评论 -
Hadoop学习第一天 ,Linux环境搭建
环境搭建配置虚拟机确保虚拟机的网段59,修改vMnet8适配器网段地址192.168.59.0虚拟机配置约束规定普通用户:huadian/huadian主机名:bigdata-hpsk01.huadian.com基本操作创建用户名 useradd huadian passwd huadian修改主机名 vi /etc/...原创 2019-06-30 21:02:19 · 119 阅读 · 0 评论