使用Appium 登录手机QQ

#coding=utf-8 import time from appium import webdriver desired_caps = {} desired_caps['platformName'] = '系统名称' desired_caps['platformVersion'] = '系...

2018-12-16 16:51:13

阅读数:23

评论数:0

使用Appium批量抓取抖音无水印视频

#coding = utf-8 import os import time import re import aiohttp import asyncio import requests import subprocess from appium import webdriver from bs...

2018-12-16 16:33:59

阅读数:36

评论数:0

调用Everything SDK进行快速搜索文件

from ctypes import windll from ctypes import create_unicode_buffer from ctypes import byref from win32api import ShellExecute def search_files(fil...

2018-12-09 22:27:13

阅读数:26

评论数:0

爬取抖音Top20视频,并自动播放

from time import sleep from glob import iglob from requests import get from natsort import natsorted from win32api import ShellExecute from moviepy....

2018-12-08 23:02:52

阅读数:64

评论数:0

Python3下载专题一:下载网易云音乐

一:打开网易云音乐,在搜索框内输入歌曲名称,如"海阔天空" 二:选择第一个,并打开,这时的url = “https://music.163.com/#/song?id=400162138” 记住id:400162138 三:网易提供的外部下载链接:“htt...

2018-11-12 22:35:41

阅读数:22

评论数:0

C++调用Python模块

一:环境VS2015,Python3.7,Windows 64位操作系统 二:环境配置自行百度 三:新建VS控制台工程,并在工程目录下创建PyModule.py文件 四:编写PyModule.py文件,代码如下: def retNum(): return 12345 def r...

2018-11-12 20:31:00

阅读数:14

评论数:0

抖音小视频全集下载

抖音的视频下载又难了一步,分享页面看不到用户的UID了,这可咋整。。。。。 还有去水印的视频,一搜全都需要第三方网站,毫无技术含量,有没有一种可以不借助第三方网站的办法呢? 稍微分析下,原来一切都如此简单,根本就不需要第三方的视频解析网站。 如下图是我刚刚下载的某用户的全部视频,都是无水印的...

2018-10-31 22:49:26

阅读数:101

评论数:0

Python3 Scrapy框架学习五:使用crawl模板爬取豆瓣Top250,并存入MySql、MongoDB

1.新建项目及使用crawl模板 2.页面解析 rules = (Rule(LinkExtractor(allow=r'subject/\d+/',restrict_css = '.hd > a[class = ""]'), ca...

2018-10-21 17:18:11

阅读数:59

评论数:0

Python3爬取猫眼电影榜并将数据存入MySql

直接上代码: #coding=utf-8 import re import time import pymysql import requests from requests.exceptions import RequestException from bs4 import Beautif...

2018-10-19 16:05:52

阅读数:88

评论数:0

Python3 使用pymysql库操作mysql

1.先安装好mysql及pymysql库。 pip install pymysql 2.连接mysql. In [1]: import pymysql In [2]: db = pymysql.connect(host = 'localhost',user = 'root',pass...

2018-10-19 15:36:55

阅读数:41

评论数:0

Python3 黑板客爬虫闯关第三关

黑板客爬虫闯关第二关成功后的页面: http://www.heibanke.com/accounts/login/?next=/lesson/crawler_ex02/ 需要注册,注册后登陆: 来到这个站点: http://www.heibanke.com/lesson/crawler_e...

2018-10-12 00:05:55

阅读数:62

评论数:0

Python3 黑板客爬虫闯关第二关

#coding=utf-8 import requests from requests.exceptions import RequestException from bs4 import BeautifulSoup def getHtml(url,i): data = {&q...

2018-10-11 21:36:41

阅读数:35

评论数:0

Python3 黑板客爬虫闯关第一关

#coding=utf-8 import re import requests from requests.exceptions import RequestException from bs4 import BeautifulSoup def getHtml(url): try: ...

2018-10-11 21:26:16

阅读数:34

评论数:0

Python3 爬取51job的数据存入MongoDB并分析

1.打开51job首页,输入Python,地址选择深圳,得到搜索页面: https://search.51job.com/list/040000,000000,0000,00,9,99,Python,2,1.html?lang=c&stype=&p...

2018-10-07 15:54:13

阅读数:95

评论数:0

Python3 操作MongoDB数据库

以上一篇的数据为例子。 In [1]: import pymongo #引入pymongo模块 In [2]: client = pymongo.MongoClient(host = 'localhost',port = 27017) #进行连接 In [3]: db = cli...

2018-10-07 09:19:03

阅读数:164

评论数:0

Python3 Scrapy框架学习四:爬取的数据存入MongoDB

1. 新建一个scrapy项目: 2.使用PyCharm打开该项目 3.在settings.py文件中添加如下代码: #模拟浏览器,应对反爬 USER_AGENT = 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (...

2018-10-07 08:03:31

阅读数:61

评论数:0

Python3 Scrapy框架学习三:爬取煎蛋网加密妹子图片(全爬)

以下操作基于Windows平台。 打开CMD命令提示框: 新建一个项目如下: 打开项目里的setting文件,添加如下代码 IMAGES_STORE = './XXOO' #在当前目录下新建一个XXOO文件夹 MAX_PAGE = 40 #定义爬取的总得页数 打开项目里的midd...

2018-10-04 13:43:15

阅读数:91

评论数:0

Python3 Scrapy框架学习二:爬取豆瓣电影Top250

打开项目里的items.py文件,定义如下变量, import scrapy from scrapy import Item,Field class DoubanItem(scrapy.Item): # define the fields for your item here li...

2018-10-04 08:15:43

阅读数:60

评论数:0

Python3 Scrapy框架学习一:爬取猫眼Top100榜

以下操作基于Windows平台。 打开CMD命令提示框: 输入 如下命令: 打开项目里的items.py文件,定义如下变量,用于存储。 class MaoyanItem(scrapy.Item): # define the fields for your item here ...

2018-10-03 10:26:11

阅读数:74

评论数:0

Python3 爬取Ajax加载的网页信息

url:http://www.kfc.com.cn/kfccda/storelist/index.aspx #coding=utf-8 import re import time import requests from requests.exceptions import RequestEx...

2018-10-02 09:33:04

阅读数:77

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭