- 博客(2)
- 收藏
- 关注
原创 如何在数据采集程序中判断JPG文件下载完整了?
原文作者:西安鲲之鹏原文链接:点击打开链接由于网络问题在采集JPG图片的时候可能会出现不完整的情况,如下图示例:如何避免这种情况呢?首先我们要能判断出一个JPG文件是否完整,然后对于不完整的进行重新下载,直至下载到完整的为止。如何判断JPG图片的完整性?1)方法一:采用PIL库(Python代码如下)。优点:适用常见各种格式图片。缺点:对于某些情况判
2015-09-28 16:02:39 1093
原创 大众点评网全国数据2015年08月份更新(1480万条)
原文作者:西安鲲之鹏原文链接:点击打开链接数据说明:大众点评全网数据(324个国内城市,所有分类),本次共采集商户数据超过1480万条(14,860,209条)。2015年8月底更新。有图有真相:更新说明:■ 采用新的遍历方式,总数据条数有明显增加(和5月份版本相比增加数据条数180万)。■ 增加对“锡林郭勒”和”阿拉善”两城市的采集。■ 新
2015-09-28 14:57:39 995 1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人