tytuwer的博客

这是基于python爬虫技术编程写的外贸企业爬虫系统，实现全球海关、关单、外贸数据的爬取。框架采用python多线程技术+request+代理IP池,实现了每天几十亿家采购商供应商外贸和关单数据实时采集和更新。

这个软件是通过scrapy爬虫框架结合代理IP池再加上request模拟请求技术以及验证码识别技术，可以做到日更新采集全国新工商信息。采集的数据自动存储在mysql数据库表里，可下载全量1.8亿多企业工商基本信息和36维度的详细信息.支持sql和excel导出数据包格式。

这是基于python爬虫技术编程写的中国关单数据爬虫系统，实现全球海关、关单、外贸数据的爬取。框架采用python多线程技术+request+代理IP池,实现了每天几十亿家采购商供应商外贸和关单数据实时采集和更新。

这个软件是通过scrapy爬虫框架结合代理IP池再加上request模拟请求技术以及验证码识别技术，可以做到日更新采集全国新工商信息。采集的数据自动存储在mysql数据库表里，可下载全量1.8亿多企业工商基本信息和36维度的详细信息.支持sql和excel导出数据包格式。

拓客软件是目前国内财务行业使用最普遍的一款软件，这款软件是基于python3.7所研发。爬虫技术爬取了湖南省公开的企业工商信息，更新速度与的工商信息接口同步，能做到日更新新企业。并且可以不限量不限次数的下载需要的企业公开信息，所以对湖南省的做财税行业的使用者来拓展手中的用户有很大的帮助。并且时效性相对于市面上的其他软件比如天眼企查、探迹等工具信息的更新速率快上一年左右。