RETURN100ERRORS的博客

1、建表 CREATE TABLE tableName( ......) ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' LINES TERMINATED BY '\n' 2、从本地 / hdfs 导入数据 # local load data local inpath '本地文件路径' into table tableName # hdfs local data inpath 'hdfs路径(不需要携带hdfs://ip:9000,直接文件地址即可)' in

1、创建RDD textFile = sc.textFile('logs.txt') 2、统计频率 textFile.countByValue()

**前提:**确保JDK环境已经配置好 步骤： 1、 下载并配置环境，本文默认安装目录 /opt/apps 配置安装目录并下载hadoop # 创建apps目录 mkdir /opt/apps # 进入该路径 cd /opt/apps # 下载hadoop压缩包 wget http://archive.apache.org/dist/hadoop/core/hadoop-2.9.2/hadoop-2.9.2.tar.gz 解压并配置环境变量 # 解压hadoop压缩包 tar -zxvf hadoop-2