- 博客(6)
- 收藏
- 关注
RSS订阅原创 java.lang.NoSuchMethodError解决通用思路
java.lang.NoSuchMethodError解决通用思路 本人在idea中写spark程序报找不到方法，令人抓狂，这里记下来，顺便为同样遇到此问题的朋友提供一个思路。 一，记住所有找不到方法的异常都是因为重复版本问题。程序使用了错误的版本的class所以会出现找不到方法。 二，此时建议仔细检查项目所有jar来源。 平台jar包， 项目jar包 包括sdk/...
2018-01-31 22:47:30
2422
1
原创 制作jar源码包
手动制作jar源码包 本来绝大部分开源jar包都有附带的源码包，但是有的有时候maven就是下载不下来,网上也找不到，那么作者就在这里分享一个手动制作源码包的过程。 这里以hadoop-common-2.8.0-sources.jar为例 首先要获取源码，在github上面或者官网上面下载，找到org这个目录，其他的自行类比。 hadoop-common-2.8.0-sou...
2017-10-21 09:37:31
326
原创 storm本地开发环境搭建
Windows环境下搭建storm本地开发环境 所需软件zookeeper,storm,eclipse 在windows上搭建开发调试环境，因为storm依赖zookeeper，所以在windows上也需要运行zookeeper，单机的就好。 第一步：安装zookeeper 下载压缩包zookeeper-3.5.3-beta.tar.gz 解压到比如D:\Progra...
2017-10-17 09:12:36
570
1
原创 Spark整合Kafka小项目
SparkStreaming与kafka整合小项目实践含所有代码带详细注释 总流程：自制日志生成器生成含数据日志，使用kafkaAppender直接发送到kafka，SparkStreaming从kafka消费日志，并流式处理将结果发送到kafka另一个topic，Java后台从kafka消费日志分析结果，实现秒级大数据实时分析展示。 版本 kafka_2.11-0.11.0....
2017-09-29 22:22:37
431
原创 python学习笔记之爬取网页乱码
encodings = requests.utils.get_encodings_from_content(page.text) //获取page内容编码 page.encoding="utf-8" //用utf-8解码网页内容 f = open("D:\\python\\a.txt","a+",encoding="utf-8") //设置读写文件所用编解码格式 ...
2017-07-07 10:48:09
149
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人