大数据
KerwinChou_CN
这个作者很懒,什么都没留下…
展开
-
Hadoop2.8 HDFS上测试目录创建,上传,下载,查看文件
HDFS操作文件操作1.创建目录2. 上传本地文件到HDFS3. 查看HDFS文件4. 从HDFS上下载文件到本地文件操作1.创建目录任何目录${HADOOP_HOME}/bin/hdfs dfs -mkdir /demo或者跳转到hadoop的安装目录的bin目录下后边仅对此情况演示hdfs dfs -mkdir /demo2. 上传本地文件到HDFShdfs dfs...原创 2019-03-01 17:10:38 · 1285 阅读 · 0 评论 -
Hadoop2.8第一个案例 运行wordcount
运行wordcount1. 查看hadoop中MapReduce路径2. 创建word.txt,生成数据文件3. 查看文件4. 创建HDFS目录5. 将数据文件word.txt上传到HDFS /work/data/input 目录下6. 以文本形式读出文件7. 运行wordcount例子8. 查看结果1. 查看hadoop中MapReduce路径[root@master mapreduce]#...原创 2019-03-01 20:20:41 · 478 阅读 · 0 评论 -
hadoop安装hive
CentOS7下默认没有安装MySQL,有MariaDB数据库MariaDB数据库是MySQL的一个分支,主要是开源社区在维护,采用GPL授权许可,开发此分支的原因之一是:甲骨文收购了MySQL后,有将MySQL闭源风险。MariaDB目的是完全兼容MySQL,包括API和命令行。1. 卸载MariaDB# 查看系统上的MariaDB[root@master hive3.1]# rpm -...原创 2019-03-05 16:07:43 · 176 阅读 · 0 评论 -
Spark集群安装
博主已经安装好了三台CentOS机器,且做好了静态IP,也搭建好了Hadoop集群及jdk环境,以此为背景。如果对以上不懂的,请查看博主之前的博客。Spark集群安装1. 创建目录,下载安装包1. 创建spark目录2. 下载spark安装包到spark目录下2. 配置Spark1. 配置spark-env.sh文件2. 配置slaves文件3. 拷贝配置好的Spark到其他节点上4. 启动s...原创 2019-03-02 16:26:03 · 208 阅读 · 0 评论 -
数据库操作练习
CREATE TABLE students(sno VARCHAR(3) NOT NULL,sname VARCHAR(4) NOT NULL,ssex VARCHAR(2) NOT NULL,sbirthday DATETIME,class VARCHAR(5));CREATE TABLE courses(cno VARCHAR(5) NOT NULL,cname VARCHAR...原创 2019-08-08 10:05:17 · 344 阅读 · 0 评论