小猪的Python学习之旅
记录小猪学习Python过程中的点点滴滴:
1.基本语法
2.爬虫
3.数据分析
4.Flask,Django 搭建网站
5.深度学习等...
coder-pig
世界不会因为你的疲惫,而停下它的脚步;时间一天天过去,我们终会因我们的努力或堕落变得丰富或苍白
展开
-
小猪的Python学习之旅 —— 1.基础知识储备
小猪的Python学习之旅 —— 1.基础知识储备引言:(文章比较长,建议看目录按需学习~)      以前刚学编程的时候就对Python略有耳闻,不过学校只有C,C++,Java,C#。 和PHP有句“PHP是最好的语言” 这种家喻户晓的骚话一样,Python也有 “人生苦短,我用原创 2017-12-08 11:44:38 · 188126 阅读 · 4 评论 -
小猪的Python学习之旅 —— 2.爬虫初涉
小猪的Python学习之旅 —— 2.爬虫初涉标签: Python引言本节开始学习Python爬虫,先是介绍两个玩到烂的两个库urllib和BeautifulSoup, 然后写了两个很简单的小爬虫来体验下爬虫的魅力,建议直接把代码复制粘贴一波 体验下,觉得有点意思再一点点学习~学什么东西兴趣很重要!1.urllib模块详解用于操作URL的模块(库,py3...原创 2017-12-13 20:32:41 · 183800 阅读 · 3 评论 -
小猪的Python学习之旅 —— 3.正则表达式
小猪的Python学习之旅 —— 3.正则表达式标签: Pythonre模块Python中通过re模块使用正则表达式,该模块提供的几个常用方法:1.匹配re.match(pattern, string, flags=0)参数:匹配的正则表达式,要匹配的字符串,标志位(匹配方法)尝试从字符串的开头进行匹配,匹配成功会返回一个匹配的对象, 类型是:<cl...原创 2017-12-27 18:54:50 · 179216 阅读 · 0 评论 -
小猪的Python学习之旅 —— 4.Scrapy爬虫框架初体验
小猪的Python学习之旅 —— 4.Scrapy爬虫框架初体验标签: Python1.官方文档与简介官方文档:https://docs.scrapy.org/en/latest/简介: Scrapy,谐音西瓜皮,Python开发的一个快速、高层次的屏幕抓取和 web抓取框架,用于抓取web站点并从页面中提取结构化的数据。 Scrapy用途广泛,可以用于...原创 2017-12-29 17:10:11 · 181254 阅读 · 2 评论 -
小猪的Python学习之旅 —— 5.使用Selenium抓取JavaScript动态生成数据的网页
小猪的Python学习之旅 —— 5.使用Selenium抓取JavaScript动态生成数据的网页标签: Python引言之前抓的妹子图都是直接抓Html就可以的,就是Chrome的浏览器F12的 Elements页面结构和Network抓包返回一样的结果。后面在抓取一些 网站(比如煎蛋,还有那种小网站的时候)就发现了,Network那里抓包 获取的数据没有,而Elem...原创 2018-01-09 17:48:20 · 189232 阅读 · 4 评论 -
小猪的Python学习之旅 —— 6.捋一捋Python线程概念
小猪的Python学习之旅 —— 6.捋一捋Python线程概念标签: Python引言从刚开始学习Python爬虫的时候,就一直惦记着多线程这个东西, 想想每次下载图片都是单线程,一个下完继续下一个,多呆啊!没占满的带宽(10M带宽),1%的CPU占用率(笔者的是i7 6700K),要不要 那么浪费,所以,不搞点多线程,多进程,协程这样的东西提高下资源利用 率,...原创 2018-01-23 23:31:06 · 178364 阅读 · 2 评论 -
小猪的Python学习之旅 —— 7.Python并发之threading模块(1)
小猪的Python学习之旅 —— 7.Python并发之threading模块(1)标签:Python引言:从本节开始的连续几节我们都会围绕着Python并发进行学习, 本节学习的是 threading 这个线程相关模块,附上官方文档: https://docs.python.org/3/library/threading.html 跟官方文档走最稳健,网上的文章都是某一时期...原创 2018-01-26 19:56:42 · 175159 阅读 · 0 评论 -
小猪的Python学习之旅 —— 10.三分钟上手Requests库
小猪的Python学习之旅 —— 10.三分钟上手Requests库标签:Python一句话概括本文:本节讲解Requests库的常见使用,以及一个实战项目: 扒取某一篇微信文章里所有的图片,视频,音频 尤其在扒取视频和音频的时候思考非常好玩~配图:给凉了的大A站上香:引言:刚学爬虫没多久的时候就知道requests这个HTTP库了,不过 因为自己觉得学习...原创 2018-02-04 16:52:16 · 32262 阅读 · 1 评论 -
小猪的Python学习之旅 —— 11.Python并发之threading模块(2)
小猪的Python学习之旅 —— 11.Python并发之threading模块(2)标签:Python一句话概括本文:本节继续把Python里threading线程模块剩下的Condition,Semaphore, Event,Timer和Barrier讲解完毕,文档是枯燥无味的,希望通过简单 有趣的例子,可以帮你快速掌握这几个东东的用法~啃文档是比较乏味的,先来个小姐姐...原创 2018-02-07 21:19:01 · 31478 阅读 · 0 评论 -
小猪的Python学习之旅 —— 12.Python并发之queue模块
一句话概括本文:本节对queue.py模块进行了详细的讲解,写了一个实战例子: 多线程抓取半次元Cos频道的所有今日热门图片,最后分析了 一波模块的源码,了解他的实现套路。大蕾姆镇楼:引言:本来是准备写multiprocessing进程模块的,然后呢,白天的时候随手 想写一个爬半次元COS频道小姐姐的脚本,接着呢,就遇到了一个令人 非常困扰的问题:国内免费的高匿...原创 2018-02-10 09:47:06 · 31895 阅读 · 0 评论 -
小猪的Python学习之旅 —— 13.文字识别库pytesseract初体验
小猪的Python学习之旅 —— 13.文字识别库pytesseract初体验标签:Python引言度过了短暂的春节假期,又要开始继续搬砖了,因为还处于节后 综合征,各种散漫,不想看任何代码相关的东西,根本挤不出学习热情… 恰逢前几天,公司的UI妹子安利了一个卖萌的新番:小木乃伊到我家就是图中的这四只小东西,敲可爱的说,分别叫:小伊(木乃伊),可尼(小鬼,牛),啊勇...原创 2018-03-01 20:34:44 · 15276 阅读 · 1 评论 -
小猪的Python学习之旅 —— 14.项目实战:抓取豆瓣音乐Top 250数据存到Excel中
小猪的Python学习之旅 —— 14.项目实战:抓取豆瓣音乐Top 250数据存到Excel中标签:Python一句话概括本文:利用Excel存储爬到的抓取豆瓣音乐Top 250数据信息,还有读Excel。引言:失踪人口回归,最近比较迷茫,不知道是回头深究Android,还是继续 学Python,Android是旧爱,Python是新欢;Android应用层折腾来 ...原创 2018-03-08 21:03:00 · 10443 阅读 · 0 评论 -
小猪的Python学习之旅 —— 15.浅尝Python数据分析
小猪的Python学习之旅 —— 15.浅尝Python数据分析:分析2018政府工作报告中的高频词标签:Python一句话概括本文:爬取2018政府工作报告,通过jieba库进行分词后做词频统计, 最后使用 wordcloud 库制作naive词云,非常有意思~引言:昨晚写完上一篇把爬取到的数据写入到Excel后,在回家的路上我就盘算着 折腾点有趣的东西玩玩——简...原创 2018-03-09 18:29:49 · 10983 阅读 · 1 评论 -
小猪的Python学习之旅 —— 16.采集拉勾网数据分析Android就业行情
小猪的Python学习之旅 —— 16.再尝Python数据分析:采集拉勾网数据分析Android就业行情标签:Python一句话概括本文:爬取拉钩Android职位相关数据,利用numpy,pandas和matplotlib对招人公司 情况和招聘要求进行数据分析。引言:在写完上一篇《浅尝Python数据分析:分析2018政府工作报告中的高频词》, 一直都处于一种...原创 2018-03-23 18:36:24 · 8701 阅读 · 2 评论 -
小猪的Python学习之旅 —— 17.Python数据分析:我主良缘交友了解下
小猪的Python学习之旅 —— 17.Python数据分析:我主良缘交友了解下标签:Python一句话概括本文:爬取我主良缘交友所有的妹子信息,利用Jupyter Notebook对五个方面: 身高,学历,年龄,城市和交友宣言进行分析,并把分析结果通过pyecharts 进行数据可视化。引言:本节应该是Python数据分析入门的最后一节了,数据分析的水可是深...原创 2018-03-28 16:26:27 · 10153 阅读 · 0 评论