qq_43137001的博客

文章目录1. 代码访问网址基本使用常用属性2. 解析HTML文件BeautifulSoup举例使用常用方法Lxml基本使用xpath常用方法Xpath语法xpath实例3. 存储存为csv存为Excel存储图片存储视频爬虫基本过程可以分为以下三部：代码访问网址解析返回的HTML保存想要的数据1. 代码访问网址python使用Requests库访问网络，爬虫是通过代码模拟人为操作浏览器，所以还得加上请求头header，一般请求头参数就是‘user-agent’，特殊的可能需要auth、cook

在jupyter notebook中使用python文件中的parser.parse_args()语句报错报错信息如下：将args = parser.parse_args() 改为args = parser.parse_args(args=[]) 可成功运行

1、time模块 localtime 方法import timetimestamp = 1586534657918 #13位时间戳,后三位为毫秒a = time.strftime("%Y/%m/%d %H:%M:%S",time.localtime(timestamp/1000))print(type(a),a) #<class 'str'> 2020/04/11 00:04:17#time.strftime(格式字符串, struct_time对象)#time.loca

实验中需要进行时间相加操作避免手动工作，但是用时间相加的时候出现错误测试代码如下：import pandas as pdpd.to_datetime("2020-05-22 00:07:00")+pd.to_datetime("00:05:00")报错信息如下：---------------------------------------------------------------------------TypeError T