存储引擎
专注存储引擎
是女汉子不是女汉子
这个作者很懒,什么都没留下…
展开
-
HDFS作为中间存储引擎:Linux批量导入csv文件到hive
1.合并csv文件 cat *.csv > full.csv 若需要删除表名: #删除该文件夹下所有csv文件的第一行 sed -i "1d" *.csv #删除该文件夹下的所有txt文件第一行 sed -i "1d" *.txt #删除前三行 sed -i "1,3d" *.csv 方法一: 2.将合并文件上传到hdfs hdfs fs -put 文件路径 hdf...原创 2019-12-06 15:14:25 · 832 阅读 · 0 评论 -
HDFS常用命令
HDFS常用命令 在 hdfs 文件系统上创建一个 input 文件夹 bin/hdfs dfs -mkdir -p /user/anna/input 将测试文件内容上传到文件系统上 bin/hdfs dfs -put wc.input /user/anna/input 查看上传的文件是否正确 bin/hdfs dfs -cat /use...原创 2019-12-06 14:45:44 · 184 阅读 · 1 评论