Python
rightfight
这个作者很懒,什么都没留下…
展开
-
Django安装爬坑
环境介绍需要的文件python 3.6.5Django 2.0.5python安装Python官网自行安装相应版本 操作步骤 https://jingyan.baidu.com/article/3ea51489bebde652e61bbad3.htmlDjango安装1.对pip进行更新python -m pip install --upgrad...原创 2018-05-19 19:37:08 · 181 阅读 · 0 评论 -
Scrapy(一)日志的设置
日志设置错误级别CRITICAL - 严重错误ERROR - 一般错误WARNING - 警告信息INFO - 一般信息DEBUG - 调试信息目录文件Hello/scrapy.cfgHello/ __init__.py items.py pipelines.py settings.py spiders/ ...原创 2018-07-24 11:44:03 · 1657 阅读 · 0 评论 -
Scrapy(二)获取script标签里面的数据内容
1.数据例子演示 不是按0开始数就是从1开始数 view-source:http://www.hdb.com/party/a0lz2.html 第六个2.开始撸代码(python3.6) 只是部分主要代码import requestsfrom bs4 import BeautifulSoupimport js2xmlfrom lxml impor...原创 2018-08-03 10:59:00 · 16433 阅读 · 0 评论 -
Scrapy(三)获取控制台的错误和错误位置
上图需要导入的包import tracebackimport sys解决办法用try: yield scrapy.Request(url, self.parse) time.sleep(10)except Exception as e: # 错误位置 elocal = traceback.extract_tb(sys.exc_inf...原创 2018-08-03 12:10:48 · 574 阅读 · 0 评论