weixin_45722061的博客

由于最近想做一个爬虫，把爬回来的数据放到数据库中。可是我不懂，MySQL。但由于未来工作很可能都是在Linux上做开发。所以，从前天起我就先掉进了Linux的坑。虚拟机上的centos7先是没有图形界面，原来我用了最小安装。然后重新装了个有图形界面的，结果上不了网。走了一圈百度，折腾了一天还是没解决。到了晚上实在没办法了，有个做运维的群友帮我远程协助解决了。本以为今天可以开开心心写代码了，结果...

前期准备打开拉勾首页，按F12进入页面调试模式，关注network标签。我们要获取的是网站中所有HR岗位的相关信息，可以发现，所有数据都是通过json来传递的。拉勾网实现翻页点击下一页，观察页面变化，可以发现每点击一个页面，就多了一个"position... .json"的请求，仔细观察，可以发现是post数据中pn(即PageNumber)发生了变化。Python入门到...

一、前言上一篇演示了如何使用requests模块向网站发送http请求，获取到网页的HTML数据。这篇来演示如何使用BeautifulSoup模块来从HTML文本中提取我们想要的数据。update on 2016-12-28：之前忘记给BeautifulSoup的官网了，今天补上，顺便再补点BeautifulSoup的用法。update on 2017-08-16：很多网友留言说Uns...

一、前言在上一篇博文中，我们的爬虫面临着一个问题，在爬取Unsplash网站的时候，由于网站是下拉刷新，并没有分页。所以不能够通过页码获取页面的url来分别发送网络请求。我也尝试了其他方式，比如下拉的时候监控http请求，看看请求是否有规律可以模拟。后来发现请求并没有规律，也就是不能够模拟http请求来获取新的数据（也可能是我水平有限，哪位童鞋找到了规律一定要告诉我哦）。那么就只有模拟下拉操作...

今天继续分享 Python 相关的面试题，你准备好了嘛！网络编程篇1. 简述 OSI 七层协议是网络传输协议，人为的把网络传输的不同阶段划分成不同的层次。七层划分为：应用层、表示层、会话层、传输层、网络层、数据链路层、物理层。五层划分为：应用层、传输层、网络层、数据链路层、物理层。物理层：网线，电缆等物理设备 数据链路层：Mac 地址 网络层：IP 地址 传输层：TCP，U...

学习任何一门语言都是从入门(1年左右)，通过不间断练习达到熟练水准(3到5年)，少数人最终能精通语言，成为执牛耳者，他们是金字塔的最顶层。虽然万事开头难，但好的开始是成功的一半，今天这篇文章就来谈谈如何开始入门 Python。只要方向对了，就不怕路远。设定目标当你决定入门 Python 时，需要一个清晰且短期内可实现的目标，比如通过学习找一份初级程序员工作，目标明确后，你需要了解企业对初级...

学Python和学其他的语言其实是相同的，我给新同事讲课的时候就说学编程和练武功其实是很相似，入门大致这样几步: 找本靠谱的书, 找个靠谱的师傅， 找一个地方开始练习。 学语言也是的：选一本通俗易懂的书，找一个好的视频资料，然后自己装一个IDE工具开始边学变写。下面我具体来讲讲:1.找一本靠谱的书，难度一定要是入门级别，千万不能太复杂，不要一下子陷进去，会打乱节奏...

本章节我们将向大家介绍如何在本地搭建Python开发环境。Python可应用于多平台包括 Linux 和 Mac OS X。你可以通过终端窗口输入 "python" 命令来查看本地是否已经安装Python以及Python的安装版本。Unix (Solaris, Linux, FreeBSD, AIX, HP/UX, SunOS, IRIX, 等等。)Win 9x/NT/2000...