Hadoop
graphql
这个作者很懒,什么都没留下…
展开
-
centos 7配置Hadoop环境
我第一步先把系统自带的Java环境给彻底卸载了,然后自己从官网下的jdk8, 然后解压到 /opt/module下,然后配置/etc/profile, 末尾添加 export JAVA_HOME=/opt/module/jdk1.8.0_201 export PATH=$PATH:$JAVA_HOME/bin 推出vim, source /etc/profile 一下,这样把jdk配好了。...原创 2019-03-14 03:00:54 · 671 阅读 · 0 评论 -
hadoop 计算圆周率
[root@localhost ~]# hadoop jar /opt/module/hadoop-3.1.2/share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.2.jar pi 4 1000 回车得到 Number of Maps = 4 Samples per Map = 1000 Wrote input for Map #0 Wr...原创 2019-03-14 23:00:20 · 1555 阅读 · 0 评论 -
hadoop之WordCount
[root@localhost hadoop-3.1.2]# hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.2.jar wordcount wcinput/ wcoutput 执行结果: 看输出文件里 每个word多少次。。。原创 2019-03-14 23:27:33 · 118 阅读 · 0 评论 -
Hadoop URL 读取数据
import org.apache.hadoop.fs.FsUrlStreamHandlerFactory; import org.apache.hadoop.io.IOUtils; import java.io.InputStream; import java.net.URL; public class URLCat { static{ URL.setURLStr...原创 2019-05-31 08:22:30 · 242 阅读 · 0 评论