- 博客(7)
- 收藏
- 关注
转载 Hadoop安装中的一些问题
1、hdfs namenode -format 时出现如下报错18/08/01 11:04:01 WARN namenode.NameNode: Encountered exception during format: java.io.IOException: Cannot create directory/home/zkpk/hadoopdata/dfs/name/current a...
2019-05-26 23:47:12 458
原创 maven+eclipse配置详解步骤
1.安装配置JDK①官网下载Java开发工具安装包jdk-8u201-windows-x64.exe:https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html②运行安装包,第一次选择JDK安装路径,第二次选择JRE安装路径,开始安装。③配置JDK的环境变量,Path添加JDK的\b...
2019-05-26 23:46:41 256
转载 HBase安装过程中遇到的问题
1、HRegionServer启动不正常在namenode上执行jps,则可看到hbase启动是否正常,进程如下:[root@bigdata120 ~]# jps26341 HMaster26642 Jps7524 NameNode7974 NodeManager7521 DataNode7974 NodeManager7703 SecondaryNameNode7870 Re...
2019-05-26 23:46:18 1488
原创 HiveQl语句应用实例:WordCount
具体步骤如下:1. 在linux本地创建数据源文件: touch hive.txt vi hive.txt 并随意给上一些内容2.将hive.txt数据源文件上传到hdfs的input文件夹中hdfs dfs -put hive.txt /input //上传文件hdfs dfs -ls /input //查看3.进入hive shell命令hive...
2019-05-26 23:45:15 646
原创 Spark:我的第一个Spark应用程序:WordCount
1、启动hadoop和spark集群:start-all.sh //启动hadoop集群start-habse.sh//启动hbase集群./start-all.sh //启动spark集群(在spark安装目录先的sbin文件夹下执行)2、新建一个计频文件文件spark_scala.txt并随意给上一些字符:touch spark_scala.txtvi spark_s...
2019-05-26 23:44:41 441
原创 运行wordcount自带实例(详述)
先确定你的hadoop集群已经启动(这很重要)进入hadoop的mapreduce目录下:cd /opt/module/hadoop/share/hadoop/mapreduce这个就是一会儿要运行的wordcount文件:在当前目录下新建一个文件夹test:mkdir test新建一个计数文件file.txt:touch file.txt打开file.txt并随意给些字符:v...
2019-05-26 23:44:19 6312 2
转载 Redis和mongodb常用命令
Redis1、启动redisservice redisd start2、停止redisservice redisd stop3、查看目前系统使用端口情况:ss -tanl4、测试连接redis 连接0号库(尽量在根目录下~输入)redis-cli(使用redis直接1、4即可)1 查询redis数据库里面有所用key127.0.0.1:6379> keys *增删...
2019-05-26 23:44:01 193
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人