![](https://img-blog.csdnimg.cn/20201014180756919.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
爬虫系列教程
冻梨不是梨
公众号:壹家大数据
展开
-
python 爬虫入门解析
在正式的介绍网络爬虫技术之前,首先按照我自己的学习经历,来说下网络爬虫是什么,需要哪些技术。(一)什么是网络爬虫爬虫,按照其字面意思来看,就是一只会爬的虫子。那什么是网络爬虫爬虫呢?没错,就是一支在网络上爬的虫子。只不过这是在网络上爬的虫子,比较特殊,在爬的时候,他还在拾取网络上的数据。(二)学习网络爬虫需要哪些技能呢?既然你已经知道什么是网络爬虫了,那么你肯定在想,我怎么样才能制...原创 2018-10-29 23:01:22 · 437 阅读 · 0 评论 -
python 爬虫系列-信息在哪里?
本文主要介绍网页中的信息在哪里,怎么定位信息 当打开一个网页的时候,通常会看到各种各样的信息,比如淘宝,会看到各种商品的信息,比如商品的名称,价格等。但是这些信息是包含在哪里,爬虫又该怎么获取呢?这个时候就要用到网页的源代码。接下来以猫眼电影为例,一起来看下怎么查看网页的源代码,并查看这些信息是怎么保存的。 打开猫眼电影,找到其榜单如下:...原创 2018-12-02 23:03:07 · 435 阅读 · 0 评论 -
python爬虫系列——requests库
前言: 前一篇文章中,我们学习了怎么查看保存在网页中的信息,但要怎么把这些信息从网上抓取下来呢?接下来我们就来解决这个问题。让我们一起走进requests。 一 requests 简介 Requests是用python语言基于urllib编写的,采用的是Apache2 Licensed开源协议的HTTP库,Requests它会比urllib...原创 2018-12-03 23:43:07 · 586 阅读 · 0 评论 -
python爬虫实战-抓取同花顺股票信息
前言: 在之前介绍requests的基础上,现在开始进行实战。 目标网站:http://q.10jqka.com.cn//index/index/board/all/field/zdf/order/desc/page/一 涉及到的技术点: (1)requests: 用于网页请求...原创 2018-12-09 22:25:59 · 30739 阅读 · 37 评论 -
python 获取天气信息
目录前言一 各种天气API比较二 高德天气API使用说明三 实践四 拓展欢迎扫描左侧二维码,关注公共号,获取更多信息。前言每次看到各种应用上面显示各种天气预报,是不是很好奇,明明有些公司或者机构没有检测天气,他们是怎么预报天气的呢?接下里就给你一一解答。其实,想要使用获取天气的信息,非常简单。从网上找一个天气API, 然后按照这个API 的使用说明操作,就可以获...原创 2019-04-14 00:24:42 · 1880 阅读 · 0 评论