python爬虫

python爬虫

Python是一门编程语言，是以汇编语言为基础的计算机程序设计语言。
Python可以用来编写一些常见的爬虫脚本，比如查询网站的 URL、返回用户查询页面的内容等。Python有很多版本。python1.1版本就已经包含了爬虫常用基本工具，如： JavaScript、 HTML、 CSS等；还可以通过命令行输入代码和 JavaScript进行爬取网页；但不能用 Python直接编写爬虫脚本，因为 Python并没有内置脚本；同时它对配置和环境要求较高，而且在编写之后需要手动去配置或重新安装才能运行；python3支持自动脚本功能和动态代理机制，但如果是自己手动配置也会花费很多时间；Python是一个非常高效的工具，可以在不浪费时间的情况下就可以快速完成你想要的工作。
这篇文章主要是写了一些基本的 python知识，但是不是那么系统和全面。爬虫中使用到一些基本的库，包括： requests库、 webpack库、 keystore库、 mybatis库等等。python爬虫可以说是目前市面上最火的一门技术了，从各个方面都有介绍，而且是目前最简单，最容易上手的。但是大家不要认为只要掌握了 python爬虫就可以轻松解决问题，还是需要注意很多细节。比如什么时间爬取数据啊：如果你没有时间可以去下载网站的源代码来查看。比如你可以去了解一下网站的一些基础知识：了解基本原理之后我们再来看一下爬虫的具体实现：爬虫有很多种实现方式，但是主要还是分为两种： python语言和 web编程语言。

一、简单介绍