![](https://img-blog.csdnimg.cn/20201014180756738.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
随笔
文章平均质量分 56
歪夕
这个作者很懒,什么都没留下…
展开
-
Hadoop filesystem连接失败问题解决
每次重启wsl的时候,hadoop的fs都连不上了!!!$ hadoop fs -ls /-ls: java.net.UnknownHostException: masterUsage: hadoop fs [generic options] [-appendToFile <localsrc> ... <dst>] [-cat [-ignoreCrc] <src> ...] [-checksum <src>原创 2021-12-09 18:47:40 · 3008 阅读 · 0 评论 -
MapReduce实例 - WordCount
用IntelliJ IDEA 2021开发。Hadoop版本3.0.0。1. 导入Hadoop相关依赖包导入方法:Project Structure -> Project Settings -> Modules -> Dependencies -> "+"{HADOOP_HOME}/share/hadoop/common/hadoop-common-3.0.0.jar{HADOOP_HOME}/share/hadoop/common/haoop-nfs-3.0.0.jar原创 2021-11-30 14:15:23 · 1354 阅读 · 0 评论 -
Ubuntu下Hadoop伪分布式配置
文章目录1. 安装JAVA环境2. 创建Hadoop用户3.安装配置SSH4. 安装Hadoop4.1 core-site.xml4.2 hdfs-site.xml4.3 mapred-site.xml4.4 yarn-site.xml5.启动hadoop6. Reference1. 安装JAVA环境sudo apt-get install openjdk-8-jre openjdk-8-jdk安装路径是:/usr/lib/jvm/java-1.8.0-openjdk-amd64配置一下JAVA_原创 2021-11-29 23:40:41 · 584 阅读 · 1 评论 -
Linux下 Tensorflow-GPU配置
nvidia-smi版本对应:https://www.tensorflow.org/install/source#common_installation_problemspython版本:3.5-3.7cuda版本10.1conda install cudatoolkit=10.1cudnn版本不小于7.6,我的是7.6.5conda install cudnn=7.6.5tensorflow版本我的是2.3.0,用了豆瓣源下载pip install tensorflow-gpu==.原创 2021-11-27 17:28:56 · 687 阅读 · 0 评论