hadoop
怎么全部重名了
坚持就是胜利
展开
-
hadoopHDFS常见几个命令
随机返回指定行数的样本数据hadoop fs -cat /test/gonganbu/scene_analysis_suggestion/* | shuf -n 5返回前几行的样本数据hadoop fs -cat /test/gonganbu/scene_analysis_suggestion/* | head -100返回最后几行的样本数据hadoop fs -cat /test/go...原创 2019-07-18 17:11:36 · 101 阅读 · 0 评论 -
spark通过jdbc连接hive
连接hive的方法有很多,这里说说通过jdbc连接hive首先要把hive下的conf下的hive-site.xml文件复制到编译器中object readAndWriteHive { //从hive中读取数据表,去重并写到一个新表中 def main(args: Array[String]): Unit = { //加载配置文件 val load = ConfigFa...原创 2019-07-18 17:33:14 · 2537 阅读 · 1 评论