爬虫
Dr.Disrespect
这个作者很懒,什么都没留下…
展开
-
(问卷星)自动填写问卷星脚本python、selenium
运用selenium完成自动化填写问卷星脚本原创 2022-06-07 20:25:05 · 8740 阅读 · 15 评论 -
Python+selenium 抓取美团单页接口数据里的用户评论和用户名称以及打分数据
一、原理selenium的原理很简单,就是模拟人对浏览器的操作,人是怎么操作的,在编写代码时就以这个为逻辑来进行编写。编写起来很是简单,并且也能够很容易纠错。缺点是,速度比较慢,抓取起来耗时,并且经常容易弹出验证码,还未找出好办法解决二、代码部分代码部分没有加try…except语句,有需要的可以自己添加from selenium import webdriverfrom selenium.webdriver.chrome.options import Optionsimport reimp原创 2020-06-19 18:07:41 · 1801 阅读 · 2 评论 -
python+appium+夜神模拟器刷快手极速版金币套现,帮你赚够早餐钱
环境准备一、准备python环境二、配置好appium库三、准备好工具:1、Android SDK 2、Appium Server 3、JDK 4、夜神模拟器原理模拟人的手指去点击手机,打开应用并滑动观看from appium import webdriverfrom appium.webdriver.extensions.android.nativekey import AndroidKeyimport timeimport randoms = random.randint(3,10原创 2020-05-24 23:38:14 · 6304 阅读 · 1 评论 -
python简单爬取峨眉电影网的电影信息
本文仅供交流学习,菜鸟刚学习爬虫,大佬勿喷,转载须告知import requestsfrom bs4 import BeautifulSoupimport redef getHtml(url): try: r = requests.get(url,timeout = 30) r.status_code r.raise_for_st...原创 2020-04-03 01:24:52 · 306 阅读 · 0 评论 -
python爬虫使用scrapy框架爬取股票数据
使用scrapy爬取东方财富网spiders部分# -*- coding: utf-8 -*-import scrapyimport refrom BaiduStocks.items import BaidustocksItemclass StocksSpider(scrapy.Spider): name = 'stocks' start_urls = ['http:...原创 2020-04-02 18:16:02 · 983 阅读 · 9 评论 -
爬取淘宝商品价格和商品名称
爬取淘宝本代码源于中国大学mooc上的北京理工大学嵩天老师的课程,本人对其代码进行了修改仅供学习交流,菜鸟新手,各位大佬勿喷,有不对的地方多多指出。import requestsimport reheaders = { 'authority': 's.taobao.com', 'cache-control': 'max-age=0', 'upgrade-insecu...原创 2020-03-23 23:57:00 · 1701 阅读 · 2 评论 -
用python爬取东方财富股票
** ## 用python爬取东方财富股票 **本代码源于中国大学mooc上的北京理工大学嵩天老师的课程,本人对其代码进行了修改仅供学习交流,菜鸟新手,各位大佬勿喷,有不对的地方多多指出。import requestsfrom bs4 import BeautifulSoupimport tracebackimport redef getHTMLText(url): try:...原创 2020-03-23 23:53:36 · 2384 阅读 · 2 评论