Hadoop
文章平均质量分 61
Hadoop
原克技术
这个作者很懒,什么都没留下…
展开
-
Hadoop的安装
1、下载Hadoop地址:https://hadoop.apache.org/releases.html2、下载完成后上传到/usr/local/src3、解压tar -zxvf hadoop-3.3.1-aarch64.tar.gz4、移动到/usr/localmv hadoop-3.3.1 ../5、配置系统环境变量#执行命令 vim /etc/profile#添加配置#hadoopHADOOP_HOME=/usr/local/hadoop-3.3.1PATH=$原创 2021-12-12 16:54:02 · 1468 阅读 · 0 评论 -
海量数据处理-大数据离线批处理技术篇
一、HadoopHadoop的组成:分布式计算框架MapReduceHDFSYARN框架Common工具HDFS是一个分布式文件系统,具有低成本、高可靠性、高吞吐量。MapReduce由两个阶段组成:Map阶段Reduce阶段map函数以key/value对作为输入参数,产生另外一系列key/value对作为中间输出写入本地磁盘,MapReduce框架会自动将这些中间数据按照key值进行聚集,且key值相同的数据被统一交给reduce()函数处理。reduce()函数以ke原创 2021-12-12 10:40:12 · 1367 阅读 · 0 评论 -
各个浏览器用的jsonp参数名
百度使用的jsonp参数名是cb,360的为callback原创 2020-11-04 09:06:24 · 214 阅读 · 0 评论