获取爬取网页上的文本元素内容
1、打开任意一个网页(这里选的百度),搜索任意内容,爬取到python中(在前面的参数传递中就爬取到了数据)
2、在python中年打开终端 pip 安装lxml
知识点:LXML库是Python中一个强大的XML处理库,支持HTML和XML的解析,支持XPath解析方式
LXML库的主要优点是易于使用,在解析大型文档时速度非常快,归档的也非常好,并且提供了简单的转换方法来将数据转换为Python数据类型,从而使文件操作更容易
- 新建一个python项目,导入lxml的etree包 代码如下:
- 截取网页中获取到的需要的文本内容 例:
- 使用etree解析网页,查询li下的所有元素,在控制台打印出来
- 查询其中的其他内容元素参考以下内容: