![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Java
文章平均质量分 78
凉城的夜
苔花如米小,也学牡丹开。
Github:https://github.com/Liangchengdeye
展开
-
DataX安装部署-Reader插件二次开发
DataXDataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括 MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、DRDS 等各种异构数据源之间高效的数据同步功能。DataX详细介绍请参考:DataX-IntroductionDataX是什...原创 2018-11-14 18:23:06 · 6804 阅读 · 1 评论 -
基于phantomjs与robot对网页截屏
在爬虫开发过程中,或者其他方面有时候会有这种需求,截取网页图片,作为一种快照信息进行存储,在最近开发过程中也刚好碰到了这种需求,需要将爬虫过程中的网页进行快照信息保存,因此查看了一部分文档,现提供以下两种方式进行快照截图。Python版本python需要安装selenium,通过pip方式便可安装,期中下面有三种方式:1. 调用Chrome或者FireFox浏览器方式,这种都需要打开本...原创 2018-12-03 14:25:26 · 733 阅读 · 0 评论