python
水木蓝绿
这个作者很懒,什么都没留下…
展开
-
Python3网络爬虫:腾讯新闻App的广告数据抓取
废话就不说了,咱们直接上代码def startGetData(self): index = 0 while index < 3: index = index + 1 self.url = "http://r.inews.qq.com/getQQNewsUnreadList?idfa=18454932-A441-4720-8973-7762...原创 2018-11-21 14:01:56 · 8077 阅读 · 3 评论 -
python获取目录下所有的文件并修改文件名(随机8位字符窜名字)
class ChangeName(object): def getRandom(self): seed = "abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ" sa = [] for i in range(8): sa.append(random.choic...原创 2018-11-01 18:09:47 · 701 阅读 · 0 评论 -
python合并两个文件夹
# 作用: 7 # 合并并两个目录/文件夹。 8 # 将目录A合并到目录B,同级目录下, 9 # 将A中有,B中没有的目录完全复制到B中; 10 # 将A中没有,B中有的目录不做改动; 11 # 将A中做了修改的文件,在B的同级目录下创建一个副本。(注意不是覆盖) 12 # 13 # 适应场景: 14 # 一般A是从B复制过来的文件夹,做了修改后,想...原创 2018-07-27 09:30:02 · 5083 阅读 · 0 评论 -
Python3网络爬虫:今日头条新闻App的广告数据抓取
咱们就不说废话了,直接上完整的源码def startGetData(self): ret = random.randint(2, 10) index = 0 url = "" while index < ret: if index == 0: url = "http://lf.snssdk.com/api/news/fe...原创 2018-07-13 09:39:36 · 8786 阅读 · 3 评论 -
Python3网络爬虫:网易新闻App的广告数据抓取
咱们就不说废话了,直接上完整的源码def startGetData(self): self.url = "https://nex.163.com/q" body = self.getBody() self.parse_url(self.url, body)这个是启动函数def getBody(self): body = """{ "adunit": {...原创 2018-07-12 09:42:01 · 2138 阅读 · 0 评论 -
python3.6使用代理访问服务器
免费代理服务器地址:http://www.xicidaili.com/ Python3.6使用代理ip:proxy_handler =request.ProxyHandler({'http': 'http://115.58.130.70:8118/'})opener = request.build_opener(proxy_handler)req = request.Request('http:/...原创 2018-05-14 17:58:44 · 1392 阅读 · 0 评论 -
初学python第一个网络爬虫
1. 打开python开发工具PyCharm:选择Create New Project创建一个项目进入后可以修改项目名称,这里取名为test1为例:,然后点击下方的Create,创建test1项目:创建项目后回出现如下界面,鼠标放在test1上面右键选择New—>Python File-->创建一个python文件,这里取名test,然后双击进入test文件编写代码:原创 2018-01-30 15:00:44 · 392 阅读 · 0 评论 -
Python下载,安装和配置环境变量
一.安装环境:win7 64位,python2.7.141. 下载:写于2018年1月30号,下载最新版python 2.7.14 64位的,下载链接为:https://www.python.org下载。2. 安装:2.1.双击python-2.7.14.amd64.msi文件,然后按照默认的选择下一步安装即可,新手最好不要改变安装路径,默认安装C:\Pyt原创 2018-01-30 14:28:15 · 667 阅读 · 0 评论 -
python3今日头条App电商数据抓取
最近有几个同学让我们帮忙抓取今日头条app的数据,有的同学需要头条app 的广告数据,有的同学需要电商资讯的数据,之前已经在博客中发布过头条app的广告数据,这里我就来用电商的数据来给大家讲解。1.想要抓到app的数据,就需要先抓到相应的接口,这里给大家推荐使用Charles工具来抓接口。具体怎么抓取接口的方法这里就不介绍了,大家可以去百度,我这里直接给出接口。http://is.snss...原创 2018-12-17 11:12:34 · 3612 阅读 · 1 评论