![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Python
LoongTech
我爱学习 学习爱我
展开
-
Win7下安装Python和Python IDLE
win7系统下安装Python和Python的集成开发工具IDLE原创 2017-07-15 20:51:41 · 2169 阅读 · 1 评论 -
MongoDB的安装和使用
1.环境配置及安装【1】MongoDB在Ubuntu下的安装请参照:https://www.cnblogs.com/shileima/p/7823434.html只需要一句命令即可:sudo apt-get install mongodb【2】MongoDB相关文件在Ubuntu中的位置:运行locate mongo或者whereis mongo命令查看系统默认把mongo装到了哪里,这里...原创 2018-11-03 18:46:10 · 138 阅读 · 0 评论 -
Ubuntu下安装MySQL并操作
一、Mysql安装ubuntu上安装mysql非常简单只需要几条命令就可以完成。 1. sudo apt-get install mysql-server 2. sudo apt-get isntall mysql-client 3. sudo apt-get install libmysqlclient-dev安装过程中会提示设置密码什么的,注意设置了不要忘了,安装完...原创 2018-11-06 23:28:15 · 397 阅读 · 0 评论 -
Scrapy+MongoDB爬虫路线笔记(1)-环境配置
1.参考资料【1】Scrapy1.5版本的官方文档:阅读官方文档是最简单、最直接、最准确的方法,可以绕过一些过时博客的坑。【2】Ubuntu16.04系统下Python版本切换的博客:亲测该文档的教程可以将2.7版本升级到3.5【3】独立Python运行环境设置virtualenv,参考简单明了的廖雪峰博客,也可以参考它的官方文档,内容比较全。virtualenv是创建孤立的Python...原创 2018-11-02 17:54:38 · 230 阅读 · 0 评论 -
Ubuntu下Python环境配置
1.直接从Python2升级到Python3#安装python3.5sudo apt-get install python3#先备份原来的链接#(在对系统执行删除之前进行备份是个好的习惯)sudo cp /usr/bin/python /usr/bin/python_bak#删除原来默认指向python2.7版本的链接sudo rm /usr/bin/python#重新指定新的链接...原创 2018-11-13 11:43:01 · 1296 阅读 · 1 评论 -
Ubuntu下Jupyter Notebook安装
Jupyter Notebook是一个Web应用程序,允许您创建和共享包含实时代码,方程,可视化和说明文本的文档。环境:Ubuntu16.04 64位1.安装步骤1.安装pip(1)更新和升级包sudo apt-get updatesudo apt-get upgrade(2)安装pipsudo apt-get install python-pip2.安装Jupyter(1...原创 2018-11-13 12:42:33 · 323 阅读 · 0 评论 -
【Python爬虫】设置爬虫间隔 模拟用户行为
设置方法很多网站的反爬虫机制都设置了访问间隔时间,一个IP如果短时间内超过了指定的次数就会进入“冷却CD”,所以除了轮换IP和user_agent可以设置访问的时间间间隔长一点,比如没抓取一个页面休眠一个随机时间:import timeimport randomtime.sleep(random.random()*3)对于一个crawler来说,这是一个比较可靠的做法。 因为本来爬虫...原创 2018-11-22 20:44:10 · 19413 阅读 · 0 评论 -
【python爬虫】图片的爬取与保存
一. 写在前面前端页面的展示通常是是在html文件当中嵌入图片url,爬取图片其实就分为以下几个部分:S1. 解析html页面获取图片urlS2. 通过图片url将图片保存至本地下面分别进行讲解。二. HTML页面解析HTML的解析主要是使用美味汤BeautifulSoup,关于美味汤的教程可以参考北京理工大学 嵩天老师在中国大学MOOC上的Python爬虫课程。以下是不是视频课程的...原创 2018-11-22 21:41:09 · 3500 阅读 · 0 评论