雾狼的游戏屋

解析的局部的文本内容都会在标签之间或者标签对应的属性中进行存储，列如图片在标签中，列表数据在标签中xpath是最常用最便捷高效的一种解析方式，不仅python中可以用，c语言，java中也可以用，具有通用性。xpath解析原理:1.实例化一个etree的对象，且需要将被解析的页面源码数据加载到该对象中。2.调用etree对象中的xpath方法结合着xpath表达式实现标签的定位和内容的捕获。#导入lxml的etree模块#实例化etree对象#xpath查找 标签定位。

解析的局部的文本内容都会在标签之间或者标签对应的属性中进行存储，列如图片在标签中，列表数据在标签中bs4数据解析的原理;1.实例化一个BeautifulSoup对象，并且将页面源码数据加载到该对象中2.通过调用BeautifulSoup对象中相关的属性或者方法进行标签定位和数据提取。

聚焦爬虫；数据解析方式分类：正则表达式；bs4模块；xpath模块；F12查看网页标签的html格式；正则表达式详细表示方法；正则匹配； import re； list=re.findall(pattern,string,flags)；创建文件夹；爬取和保存页面所有图片格式；

requests模块: python中原生的一 款基于网络请求的模块，功能非常强大，简单便捷，效率极高。作用:模拟浏览器发请求。URL参数UA伪装F12抓包工具的爬取Ajax局部页面的请求json数据格式的保存。

爬虫一般指网络爬虫。 网络爬虫，编写程序（一般为python），自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。）。反爬机制反反爬策略；robots . txt协议；常用请求头信息：User-Agent:请求载体的身份标识，Connection:请求完毕后，是断开连接还是保持连接；常用响应头信息：Content-Type:服务器响应回客户端的数据类型；http协议和https协议；加密方式：对称秘钥加密，非对称秘钥加密，证书秘钥加密（http

如果无法创建python文件说明你的盘没有管理员权限，建议将所有的安装项目文件都不要放在C盘，C盘跟你电脑运行速度息息相关，建议都放在D盘或者E盘，下面显示更改盘权限方法。如果没有上面情况，你创建好项目之后，在左上角文件设置里面，有个项目编译器，里面选择本地编译器并勾选全局编译器就行。右键属性-安全-users-高级-users-编辑-全选-应用。【2】编辑运行配置，路径是自己新建的py文件，点击应用。（4）将你安装好的python.exe文件地址放进去。第一行左边是解释器路径，右边是py文件路径。