- 博客(4)
- 资源 (6)
- 收藏
- 关注
原创 spark提交任务java.nio.channels.ClosedChannelException
1.提交任务./spark-submit --master "yarn" --driver-memory 1g --executor-memory 1g --class KeyCount /root/IdeaProjects/SparkApp/out/artifacts/SparkApp_jar/SparkApp.jar报错如下:17/08/25 14:47:03 ERROR cl
2017-08-25 15:57:44 27261 1
原创 Spark java.lang.NoSuchMethodError: scala.Predef$.refArrayOps
1.问题2. spark运行的scala版本是有限制提示 with scala 2.10 support下载对应版本的scala,然后重新编译jar包
2017-08-22 16:52:45 2440
原创 python requests指定出口ip
爬虫需要,一个机器多个口,一个口多个ip,为轮询这些ipdemo#coding=utf-8import requests,sys,socketfrom requests_toolbelt.adapters import sourcereload(sys)sys.setdefaultencoding('utf-8')responses =
2017-08-11 17:16:29 4590
原创 ROS Mikrotik PCC配置记录
两条为例:ip firewall mangle add action=mark-connection chain=prerouting comment=pcc1 dst-address-type=!local new-connection-mark=pcc1 per-connection-classifier=both-addresses:2/0 src-address=192.168
2017-08-11 11:46:18 2394
spark高级数据分析 附带源代码
2018-06-19
IIS建站工具
2014-01-15
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人