![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop学习
Behersve
这个作者很懒,什么都没留下…
展开
-
CentOS 6.5 minimal版本MySQL权限问题
报错:Caused by: javax.jdo.JDOFatalDataStoreException: Unable to open a test connection to the given database. JDBC url = jdbc:mysql://192.168.58.141:3306/hive?createDatabaseIfNotExist=true, username = r...原创 2019-07-18 10:27:41 · 198 阅读 · 0 评论 -
CentOS 6.5 minimal版本离线本地安装MySQL问题
①CentOS 6.5minimal版本没有安装perl,首先使用yum 安装Perl命令:sudo yum install perl②安装MySQL-server-5.1.73-1.glibc23.x86_64.rpm 和MySQL-client-5.1.73-1.glibc23.x86_64.rpm文件下载: https://pan.baidu.com/s/1nXW...原创 2019-07-18 10:24:21 · 182 阅读 · 0 评论 -
CentOS 7 版本安装JDK问题
①查看系统自带jdk:rpm -qa | grep java②使用删除命令:rpm -e --nodeps **********例如:rpm -e --nodeps java-1.8.0-openjdk-1.8.0.102-4.b14.el7.x86_64 rpm -e --nodeps java-1.8.0-openjdk-headless-1.8.0.102-4.b...原创 2019-07-18 10:10:58 · 184 阅读 · 0 评论 -
CentOS 6.5 minimal版本开启SSH服务
①使用yum安装必要服务:yum install openssh-server②输入重启命令:systemctl restart sshd③加入开机自启:systemctl enable sshd原创 2019-07-18 10:07:40 · 527 阅读 · 0 评论 -
CentOS 6.5 minimal版本安装问题
第一个CentOS安装后网络问题①vi /etc/sysconfig/network-scripts/ifcfg-eth0修改两个配置文件:(1)ONBOOT=yes(2)NM_CONTPROLLED=no②重启network:service network restart③查看IP,ifconfig...原创 2019-07-18 10:01:31 · 304 阅读 · 0 评论 -
搭建hadoop完全分布式
①我安装的是centos6.5,jdk使用的是jdk1.8.0_211在/usr/local/ 路径下建立java文件夹,将解压过的jdk1.8.0_211移动到java文件夹里面②配置java环境变量vi /etc/profile在最后一行添加export JAVA_HOME=/usr/local/java/jdk1.8.0_211export PATH=.:$JAVA...原创 2019-07-17 19:19:04 · 177 阅读 · 0 评论 -
通过flume将IDEA控制台信息上传到hdfs中
① IDEA中resources的创建和resources的文件参考:https://blog.csdn.net/YiXiao1997/article/details/96479211②在main文件夹下创建java文件:代码如下package pers.zzp.Demo;import java.text.SimpleDateFormat;import java.util.Date...原创 2019-07-19 14:33:09 · 208 阅读 · 0 评论 -
使用IDEA通过flume上传本地文件到Hdfs
①如果IDEA创建maven文件时没有resources,需要新建一个resources在main文件夹中如果没有:File -> Project Structure -> Modules ->click your module -> Sources(Tab) -> 选择你的resource folder,点Resources②在resources中添加l...原创 2019-07-19 14:20:07 · 1058 阅读 · 1 评论 -
hadoop下直接写hive代码
命令:hive -e "select *from Test"原创 2019-07-18 10:41:53 · 224 阅读 · 0 评论 -
shell脚本写hive代码
①创建文件:vi hivesql.sh②写入文件:#!/bin/bashdatetime=$(date '+%Y%m%d%H')source /etc/profilehive -e 'select *from demo.movie limit 10'③调用这个脚本:sh hivesql.sh原创 2019-07-18 10:36:57 · 2610 阅读 · 0 评论 -
HDFS Shell基本命令
转载自:http://hadoop.apache.org/docs/r1.0.4/cn/hdfs_shell.html转载 2019-07-18 09:48:00 · 627 阅读 · 0 评论