- 博客(7)
- 收藏
- 关注
RSS订阅转载 Hadoop安装中的一些问题
1、hdfs namenode -format 时出现如下报错18/08/01 11:04:01 WARN namenode.NameNode: Encountered exception during format: java.io.IOException: Cannot create directory/home/zkpk/hadoopdata/dfs/name/current a...
2019-05-26 23:47:12
444
原创 maven+eclipse配置详解步骤
1.安装配置JDK①官网下载Java开发工具安装包jdk-8u201-windows-x64.exe：https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html②运行安装包，第一次选择JDK安装路径，第二次选择JRE安装路径，开始安装。③配置JDK的环境变量，Path添加JDK的\b...
2019-05-26 23:46:41
252
转载 HBase安装过程中遇到的问题
1、HRegionServer启动不正常在namenode上执行jps,则可看到hbase启动是否正常，进程如下：[root@bigdata120 ~]# jps26341 HMaster26642 Jps7524 NameNode7974 NodeManager7521 DataNode7974 NodeManager7703 SecondaryNameNode7870 Re...
2019-05-26 23:46:18
1478
原创 HiveQl语句应用实例：WordCount
具体步骤如下：1. 在linux本地创建数据源文件： touch hive.txt vi hive.txt 并随意给上一些内容2.将hive.txt数据源文件上传到hdfs的input文件夹中hdfs dfs -put hive.txt /input //上传文件hdfs dfs -ls /input //查看3.进入hive shell命令hive...
2019-05-26 23:45:15
618
原创 Spark：我的第一个Spark应用程序：WordCount
1、启动hadoop和spark集群：start-all.sh //启动hadoop集群start-habse.sh//启动hbase集群./start-all.sh //启动spark集群(在spark安装目录先的sbin文件夹下执行)2、新建一个计频文件文件spark_scala.txt并随意给上一些字符：touch spark_scala.txtvi spark_s...
2019-05-26 23:44:41
436
原创 运行wordcount自带实例（详述）
先确定你的hadoop集群已经启动（这很重要）进入hadoop的mapreduce目录下：cd /opt/module/hadoop/share/hadoop/mapreduce这个就是一会儿要运行的wordcount文件：在当前目录下新建一个文件夹test：mkdir test新建一个计数文件file.txt：touch file.txt打开file.txt并随意给些字符：v...
2019-05-26 23:44:19
6295
2
转载 Redis和mongodb常用命令
Redis1、启动redisservice redisd start2、停止redisservice redisd stop3、查看目前系统使用端口情况：ss -tanl4、测试连接redis 连接0号库（尽量在根目录下~输入）redis-cli（使用redis直接1、4即可）1 查询redis数据库里面有所用key127.0.0.1:6379> keys *增删...
2019-05-26 23:44:01
189
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人