Hadoop
graphql
这个作者很懒,什么都没留下…
展开
-
centos 7配置Hadoop环境
我第一步先把系统自带的Java环境给彻底卸载了,然后自己从官网下的jdk8, 然后解压到 /opt/module下,然后配置/etc/profile,末尾添加export JAVA_HOME=/opt/module/jdk1.8.0_201export PATH=$PATH:$JAVA_HOME/bin推出vim, source /etc/profile 一下,这样把jdk配好了。...原创 2019-03-14 03:00:54 · 683 阅读 · 0 评论 -
hadoop 计算圆周率
[root@localhost ~]# hadoop jar /opt/module/hadoop-3.1.2/share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.2.jar pi 4 1000回车得到Number of Maps = 4Samples per Map = 1000Wrote input for Map #0Wr...原创 2019-03-14 23:00:20 · 1584 阅读 · 0 评论 -
hadoop之WordCount
[root@localhost hadoop-3.1.2]# hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.2.jar wordcount wcinput/ wcoutput执行结果:看输出文件里 每个word多少次。。。原创 2019-03-14 23:27:33 · 129 阅读 · 0 评论 -
Hadoop URL 读取数据
import org.apache.hadoop.fs.FsUrlStreamHandlerFactory;import org.apache.hadoop.io.IOUtils;import java.io.InputStream;import java.net.URL;public class URLCat { static{ URL.setURLStr...原创 2019-05-31 08:22:30 · 253 阅读 · 0 评论