- 博客(12)
- 资源 (1)
- 收藏
- 关注
转载 for循环将字典添加到列表中出现覆盖前面数据的问题
for循环将字典添加到列表中出现覆盖前面数据的问题转自:https://www.cnblogs.com/ellisonzhang/p/10241553.html字典key相同,会导致列表引用的字典为最后一次生成的字典可在FOR循环内生成空字典,避免覆盖...
2019-05-09 21:55:01
922
原创 python3.4 安装scrapy
安装scrapy需要安装twistedpython3.4版本下载地址http://fstab.net/pypi/simple/twisted/
2019-03-21 09:07:21
399
原创 python3.4安装pyspider
pip3 install pyspider报错:pycurl有问题首先安装wheelpip3 install wheel访问https://pypi.org/project/pycurl/7.43.0/#files下载相应版本pip3 install 存放目录\pycurl-7.43.0-cp34-none-win32.whlpip3 install pyspider测试成功...
2019-03-20 18:45:35
308
原创 手机跳屏处理
手机跳屏处理参考地址:http://tieba.baidu.com/p/5321575930红米老机折腾设置‘’声音和振动‘’里开启触摸时振动,明确跳屏为HOME键及菜单键异常导致处理方法:可通过屏蔽二键达到解决跳屏目的1、下载红米开发版卡刷包,具体刷机教程参考小米官网http://www.miui.com/thread-16626603-1-1.html2、小米商店下载ES打开R...
2019-03-15 10:12:43
608
转载 MTP相关配置,USB连接手机
https://wenku.baidu.com/view/a4b1a5ea51e79b896902263f.htmlhttps://blog.csdn.net/chenlycly/article/details/80869055在设备管理器,打开打问号的MTP属性,在详细信息页获取VID及PID在C盘Windows文件夹下的Inf文件夹下(完整路径:c:\windows\inf\wpdmt...
2019-03-15 09:47:54
1281
原创 sqlite学习笔记
1、UNIQUE constraint failed: user.userid违反唯一性约定,意味表中已有相同的键值2、rowcount使用Cursor对象执行insert,update,delete语句时,执行结果由rowcount返回影响的行数,就可以拿到执行结果。...
2019-03-13 10:54:48
142
原创 python3 练手:爬取爱问知识人,运用sqlite3保存数据
python3 练手:爬取爱问知识人参考地址:https://cuiqingcai.com/1972.html获取页面:https://iask.sina.com.cn/c/74.html分析:获取每个问题的标题及答案地址,访问答案页面获取问题具体内容,答案内容,作答者,作答时间,构造成字典形式保存进数据库主程序:def main(): datadict = get_html(url...
2019-03-12 23:31:19
245
转载 (转载)用pymysql代替MySQLdb
原文地址:https://www.cnblogs.com/anpengapple/p/7127580.html连接数据库:conn = pymysql.connect(host=host, user=user, passwd=password, db=db)创建游标:cur = conn.cursor()执行SQL:cur.execute(“INSERT INTO table VALU...
2019-03-10 15:16:22
556
转载 (转载)Python正则表达式中的re.S的作用
原文地址https://www.cnblogs.com/huchong/p/8290340.html如果不使用re.S参数,则只在每一行内进行匹配,如果一行没有,就换下一行重新开始,不会跨行。而使用re.S参数以后,正则表达式会将这个字符串作为一个整体,将“\n”当做一个普通的字符加入到这个字符串中,在整体中进行匹配。...
2019-03-10 15:07:20
231
原创 python3 练手:爬百度贴吧
python3 练手:爬百度贴吧参考原文地址:https://cuiqingcai.com/993.html贴吧:https://tieba.baidu.com/p/3138733512?see_lz=1&pn=1&red_tag=0231085142目标:获取文章标题,总页数,帖子内容,保存到文本文件。实现:# !/usr/bin/env python# -*- e...
2019-03-09 22:26:49
194
转载 python3练手:爬糗事百科
python3 练手:爬糗事百科参考原文地址:静觅 » Python爬虫实战一之爬取糗事百科段子https://cuiqingcai.com/990.html糗事百科地址:https://www.qiushibaike.com/hot/page/1/每页显示25则糗事,糗事内容在…内目标:爬取糗事内容并在每按一次回车时显示一则糗事,当按下"q"键时结束
2019-03-08 22:29:54
238
原创 初学爬虫小结
初学爬虫小结requests.get 带参数headers 可实现简单反爬soup.find_all 找全部跟参数有关节点生成列表getText() 获取节点文本soup.find(‘span’,attrs = {‘class’,‘next’}).find(‘a’) 获取a标签next_page[‘href’] 获取‘href’属性codecs.ope...
2019-03-06 18:51:22
316
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人