python学习笔记
文章平均质量分 51
weixin_42229626
这个作者很懒,什么都没留下…
展开
-
xpath 多层地址中间部分模糊定位
在使用 XPATH 爬取京东商品信息的是否,发现部分京东自营商品的定位地址和其他商品在层数上回不一样比如说特别的//*[@id="J_goodsList"]/ul/li[14]/div/div/div[2]/div[1]/div[3]/a一般的//*[@id="J_goodsList"]/ul/li[8]/div/div[3]/a可以发现中间在li后面多了3层div开始的思路是 用通配符. *写成//*[@id="J_goodsList"]/ul/li[@xxx=""]/*/div[原创 2021-09-03 10:51:28 · 699 阅读 · 0 评论 -
关于Python NumPy 库中 arr.transpose 方法的心得记录
利用python进行数据分析中第二版第四章有关于 NumPy库的介绍, 有关于 arr.transpose 方法的心得记录如下: arr = np.arange(16).reshape(2,2,4)结果就是array([[[ 0, 1, 2, 3], [ 4, 5, 6, 7]], [[ 8, 9, 10, 11], ...原创 2018-08-15 11:29:41 · 2083 阅读 · 2 评论 -
python 小说爬虫+ui+多线程
爬虫主要是bs4 beautifulsoup库 和 urllib 库 ui 是 pyqt5库如果是希望通过ui反馈实施爬取进度,必须用多线程,否则ui会假死先说爬虫 主要是通过biqukan这个网站爬取逻辑是: 1.先获得小说章节列表,形成一个只有key,没有value的字典.以及一个各章节网址的列表 2.通过每个章节循环获得章节内容,更新到字典中去 3.把字典输出到txt....原创 2018-08-23 17:16:52 · 1261 阅读 · 0 评论