hadoop
来日可期a
这个作者很懒,什么都没留下…
展开
-
git 常用命令总结
在工作的时候经常有一些git命令很模糊,今天就总结一下常用的git命令git status 查看工作空间的状态git branch 查看分支情况git branch new_branch 创建一个新的分支new_branchgit checkout xxx 切换到xxx分支git pull 从线上拉取代码git merge master 将master分支代码保持一致g...原创 2020-02-26 17:00:54 · 202 阅读 · 0 评论 -
hdfs通过垃圾箱恢复被删除的文件
假如在操作过程中,误删hdfs文件,不要紧,hdfs提供了垃圾箱恢复文件的功能。hdfs --cluster zjyprc-hadoop dfs -rm -r hdfs://zjyprc-hadoop/user/s_xdata/kuduhive_warehouse/ods_chain_active/date=20191123将date=20191123文件夹误删,恢复流程如下:1.执行上述...原创 2019-11-29 12:58:38 · 956 阅读 · 0 评论 -
List转JSONArray和JSONArray转List
1.List转JSONArrayList<T> list = new ArrayList<T>();JSONArray array= JSONArray.parseArray(JSON.toJSONString(list));2.JSONArray转ListJSONArray array = new JSONArray();List<EventColAtt...原创 2019-08-19 20:59:33 · 155134 阅读 · 11 评论 -
linux中合并多个文件到一个文件中
linux合并多个文件data目录下有四个文件,想要将四个文件合并到以个文件中,代码如下:cat * > download文件本身有顺序,顾此时download文件中的内容也是有序的如果想按特殊的顺序,可以执行以下代码,顺序自己定义:cat 000000_3 000000_2 000000_1 000000_0 >download结果如下:合并成功!!!...原创 2019-09-22 19:04:26 · 14432 阅读 · 0 评论 -
scala解決包冲突的方法
在完成项目时,需要将scala打包。打包过程中,出现了以下问题:显示C:\Users\lenovo.ivy2\cache\org.apache.spark\spark-streaming-kafka_2.10\jars\spark-streaming-kafka_2.10-1.6.2.jar:org/apache/spark/unused/UnusedStubClass.class与C:\U...原创 2019-09-28 16:55:23 · 515 阅读 · 0 评论