大数据
自由游戏开发者
主要工作网络安全领域、大数据技术、AI算法、区块链技术、Java技术精进、业余爱好游戏开发全栈
展开
-
elasticdump对windows与linux操作记录
1 增加操作 在liunx或windows中增加索引页面操作: http://127.0.0.1:9200/_plugin/head/ 在liunx或windows中增加索引命令操作: 2 删除操作 删除索引test curl -XDELETE http://localhost:9201/test 删除所有的索引、 curl...原创 2018-08-31 10:55:31 · 4049 阅读 · 0 评论 -
调用yarn集群报错解决办法:bad substitution
为什么会报这个错? 从报错日志中可以看出,获取hdp.version获取不到,有好多解决方案,我都试过,但我感觉最简单办法就是 去ambari上改一下版本配置就ok了! 1 查询版本 hdp-select |grep hadoop-hdfs-datanode 2 进行修改版本 路径:MapReduce2->configs->Advanced->Advanced...原创 2019-01-08 15:12:06 · 876 阅读 · 0 评论 -
yarn执行报错No suitable driver
1 我这里报错是没有找到相应的数据库驱动jar包,不管你是将jar包放在hadoop中spark里还是本地 2 将jar包上传上去即可解决,进入hdfs目录中查看自己jar包存放的路径 3 将jar包上传到相应目录:hdfs dfs -put /opt/ojdbc6-11.2.0.1.0.jar /apps/spark/jars 这个具体目录要根据你自己spark配置相应依赖目录了来...原创 2019-01-09 14:07:12 · 226 阅读 · 0 评论