![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
爬虫
文章平均质量分 83
白可爱同学
这个作者很懒,什么都没留下…
展开
-
爬取1688网站
最近在学习爬虫,写了一个爬取淘宝1688数据的爬虫,使用selenium与BeautifulSoup,现在简单记录一下# -*- coding: utf-8 -*-from selenium import webdriverfrom selenium.webdriver.support import waitfrom selenium.webdriver.support import ex...原创 2019-11-03 10:33:49 · 1640 阅读 · 2 评论 -
python爬虫将对象序列化时出现maximum recursion depth exceeded while getting the str of an object
今天在做一个python爬虫时需要将获取的内容封装在一个个对象中,再将其存到redis里面,但是在做序列化时出现maximum recursion depth exceeded while getting the str of an object错误,从网上看说是递归层数设置太少,但是从新设置之后发现还是显示递归层数过多,百思不得其解,看到报错内容是获取字符串是递归层数太多,突然想到,自己的类的字...原创 2019-10-20 14:51:38 · 1681 阅读 · 0 评论 -
python实现常见排序算法
一、冒泡排序冒泡排序可以说是我们学习排序算法时最先学习的一种算法,冒泡排序的算法核心思想就是依次遍历需要排序的列表,比较相邻两元素的大小,将较大的元素放到后一位,较小的元素放到前一位,这样通过一次遍历,集合中最大的元素就位于列表的最后位置,一个包含n个元素的列表通过遍历n-1次,就可以获得排序后的列表,例如:一个列表中包含的元素为: 4 5 3 1 21,首先遍历列表,用index表示遍历的...原创 2019-10-12 22:57:40 · 176 阅读 · 0 评论 -
python爬虫入门(一)
python爬虫入门(一)由于学习的需要,最近学习了爬虫知识,学习之余把最近学习的知识进行整理方便以后查看,顺便和其他小伙伴一起交流学习爬虫的心得。1. 什么是爬虫如果把互联网比喻成一张蜘蛛网的话,那么各种硬件设施(服务器,pc机等)就是附着在这张蜘蛛网上的一只只蜘蛛,同时各种网络资源存放在不同的硬件设施中,而爬虫就是沿着这张蜘蛛网,到每一个硬件设施中找到自己需要的资源,将这些资源爬取到自己...原创 2019-10-11 17:34:35 · 289 阅读 · 0 评论