Python读取本地文件并解析网页元素

最新推荐文章于 2024-05-12 15:30:20 发布
最新推荐文章于 2024-05-12 15:30:20 发布
阅读量1.1w 收藏 8
点赞数
分类专栏： Python 文章标签： python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/kajweb/article/details/54745114
版权 
from bs4 import BeautifulSoup

path = './web/new_index.html'

with open(path, 'r') as f:
    Soup = BeautifulSoup(f.read(), 'lxml')
    titles = Soup.select('ul > li > div.article-info > h3 > a')

for title in titles:
    print(title.text)


输出：
Sardinia's top 10 beaches
How to get tanned
How to be an Aussie beach bum
Summer's cheat sheet




#其中
titles = Soup.select('ul > li > div.article-info > h3 > a')
#等效
titles = Soup.select('h3 a')






















print(title.text)
#等效
print(title.get_text())
print(title.string)























也可以使用以下代码



import bs4

path = './web/new_index.html'

with open(path, 'r') as f:
    Soup = bs4.BeautifulSoup(f.read(), 'lxml')

    titles = Soup.select('h3 a')
for title in titles:
    print(title.string)



























Html原文：




<html>
<head>
    <link rel="stylesheet" type="text/css" href="new_blah.css">
</head>
<body>
    <div class="header">
        <img src="images/blah.png">
        <ul class="nav">
            <li><a href="#">Home</a></li>
            <li><a href="#">Site</a></li>
            <li><a href="#">Other</a></li>
        </ul>
    </div>
    <div class="main-content">
        <h2>Article</h2>
        <ul class="articles">
            <li>
                <img src="images/0001.jpg" width="100" height="91">
                <div class="article-info">
                    <h3><a href="www.sample.com">Sardinia's top 10 beaches</a></h3>
                    <p class="meta-info">
                        <span class="meta-cate">fun</span>
                        <span class="meta-cate">Wow</span>
                    </p>
                    <p class="description">white sands and turquoise waters</p>
                </div>
                <div class="rate">
                    <span class="rate-score">4.5</span>
                </div>
            </li>
            <li>
                <img src="images/0002.jpg" width="100" height="91">
                <div class="article-info">
                    <h3><a href="www.sample.com">How to get tanned</a></h3>
                    <p class="meta-info">
                        <span class="meta-cate">butt</span><span class="meta-cate">NSFW</span>
                    </p>
                    <p class="description">hot bikini girls on beach</p>
                </div>
                <div class="rate">
                    <img src="images/Fire.png" width="18" height="18">
                    <span class="rate-score">5.0</span>
                </div>
            </li>
            <li>
                <img src="images/0003.jpg" width="100" height="91">
                <div class="article-info">
                    <h3><a href="www.sample.com">How to be an Aussie beach bum</a></h3>
                    <p class="meta-info">
                        <span class="meta-cate">sea</span>
                    </p>
                    <p class="description">To make the most of your visit</p>
                </div>
                <div class="rate">
                    <span class="rate-score">3.5</span>
                </div>
            </li>
            <li>
                <img src="images/0004.jpg" width="100" height="91">
                <div class="article-info">
                    <h3><a href="www.sample.com">Summer's cheat sheet</a></h3>
                    <p class="meta-info">
                        <span class="meta-cate">bay</span>
                        <span class="meta-cate">boat</span>
                        <span class="meta-cate">beach</span>
                    </p>
                    <p class="description">choosing a beach in Cape Cod</p>
                </div>
                <div class="rate">
                    <span class="rate-score">3.0</span>
                </div>
            </li>
        </ul>
    </div>
    <div class="footer">
        <p>&copy; Mugglecoding</p>
    </div>
</body>
</html>









                

        

        

    




    

      

        

            

              
                
                  林毅洋
                
              
            

            

                关注
              
            

        

        

          
    
            
  • 
              
                
                
                
                
                      0
                
              
              
    点赞
    
            
    • 
            
  • 
              
                
                
                
              
              
    踩
    
            
    • 
            
  • 
              
                
                
                
                
                    8
                
              
              
    
                
    
                  
                    收藏
                  
                
    
              
    
              
    
                
    
                  觉得还不错?
                  
                    一键收藏
                  
                 
                
    
              
    
            
    • 
          
  • 
            
    
              
              
            
    
              
              
              
                    0
              
            
            
    评论
    
          
    • 
          
  • 
          
    • 
          
  • 
            
              
            
              
    
            
              
                
            
    
          
    • 
        

      

      

            

                专栏目录
          










                



	

		

			

				
					
Python读取本地文件并解析网页元素的方法

				
			

			

				

					09-20
				

			

		

		

			
				
今天小编就为大家分享一篇Python读取本地文件并解析网页元素的方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧

			
		

	



                

              
                



	

		

			

				
					
抓取网页上的任意元素

				
			

			

				

					12-08
				

			

		

		

			
				
通过元素Id，抓取网页上的任意元素，也可以用于打印

			
		

	



                


  
              

                


	

		

			

				
					
Python有哪些优势和用途？学Python就业方向有哪些？_python做哪些东西比较有优势(1)

					
最新发布

				
			

			

				

					I8929545452_VD的博客
				

				

					05-12
					
					995
					
				

			

		

		

			
				
为了帮助大家更好的学习Python，小编给大家准备了一份Python学习资料，里面的内容都是适合零基础小白的笔记和资料，不懂编程也能听懂、看懂，需要获取方式：扫描下方即可获取。

			
		

	





	

		

			

				
					
爬虫（一）—解析本地网页

				
			

			

				

					践理
				

				

					05-21
					
					2406
					
				

			

		

		

			
				
认识网页结构




形象介绍网页内容： 
html相当于规划房子里每个屋子的功能。
css相当于给每个屋子里进行装修 
JavaScript则是给每个屋子里配置电器


在网页中的一段代码



&amp;amp;amp;amp;amp;amp;amp;amp;lt;div class='a'&amp;amp;amp;amp;amp;amp;amp;amp;gt;
    &amp;amp;amp;amp;amp;amp;amp;amp;lt;p&amp;amp;amp;a

			
		

	



		

			
		



	

		

			

				
					
python解析本地网页中的元素

				
			

			

				

					zhikanjiani的博客
				

				

					08-30
					
					1917
					
				

			

		

		

			
				
本次学习使用到的文件：
链接：https://pan.baidu.com/s/1Kp0yZ-zHFJ0WmM1UZCRMOA
提取码：uhev
需求：学会筛选处所有评分大于3的文章展现标题和对应的分类
第一步：使用BeautifulSoup解析网页

Soup = BeautifulSoup(html,‘lxml’)

如何理解：soup --> 汤，html --> 汤料，‘lxml...

			
		

	





	

		

			

				
					
python建本地web服务器

				
			

			

				

					Ryan
				

				

					09-17
					
					1136
					
				

			

		

		

			
				
Python 2,一个人可以使用



 python -m SimpleHTTPServe

用Python 3,一个人可以使用

 python -m http.server

但任何其他web服务器将工作。

			
		

	





	

		

			

				
					
使用Python读取本地文件的4种方式

				
			

			

				

					Python热爱者的博客
				

				

					11-18
					
					1万+
					
				

			

		

		

			
				
Python读取文件的4种方式，包括read()、read(字节数)、readlines()、readline()方式。
1.read()方式,一次读取所有，返回str
file0 = open("a.txt", "r")
content = file0.read()
print(type(content))  # <class 'str'>
print(content)
file0.close()

2.read(字节数)方式,一次读几个字节
file1 = open("a.txt", "r"

			
		

	





	

		

			

				
					
读取本地json文件,解析json(实例讲解)

				
			

			

				

					09-21
				

			

		

		

			
				
在本文中，我们将深入探讨如何在Python中读取本地JSON文件并进行解析。JSON（JavaScript Object Notation）是一种轻量级的数据交换格式，易于人阅读和编写，同时也方便机器解析和生成。它常用于存储和传输数据，尤其...

			
		

	





	

		

			

				
					
Python简单读取json文件功能示例

				
			

			

				

					09-21
				

			

		

		

			
				
本示例将详细讲解如何使用Python来简单读取JSON文件，并提供相关的操作技巧。  首先，让我们了解JSON的基本结构。JSON数据通常由键值对组成，这些键值对用冒号分隔，而不同的键值对之间则用逗号分隔。整个数据结构被...

			
		

	





	

		

			

				
					
基于python实现获取网页图片过程解析

				
			

			

				

					09-16
				

			

		

		

			
				
在Python编程中，获取网页图片是一项常见的任务，尤其对于数据抓取、网页分析等领域。本篇文章将详细解析如何使用Python实现这一过程。首先，我们需要安装一个名为`BeautifulSoup`的第三方库，它可以帮助我们解析...

			
		

	





	

		

			

				
					
Python打开文件并进行处理，txt、excel、pdf、word！

				
			

			

				

					阿欢的博客
				

				

					10-04
					
					1万+
					
				

			

		

		

			
				
在办公处理中，我们常常要打开一些文件，面临大量的数据时，传统的人工方法耗时耗力。在python中，有一系列包装好的库，让我们能够很方便的操作各种类型的文件。当然，python的内置函数也能够很好的打开一些文件。本文主要探讨python打开各类文件的方式。

			
		

	





	

		

			

				
					
python中,如何打开文件( ),python中打开文件的方法

				
			

			

				

					阿发狗伪原创
				

				

					08-09
					
					1580
					
				

			

		

		

			
				
两者都能够打开文件，对文件进行操作，也具有相似的用法和参数，但是，这两种文件打开方式有本质的区别，file为文件类，用file()来打开文件，相当于这是在构造文件类，而用open()打开文件，是用python的内建函数来操作，我们一般使用open()打开文件进行操作，而用file当做一个类型，比如type(f) is file。a， 之追加写模式【不可读；方式一：将硬盘存放的该文件的内容全部加载到内存，在内存中是可以修改的，修改完毕后，再由内存覆盖到硬盘(word，vim，nodpad++等编辑器)

			
		

	





	

		

			

				
					
python读取本地网页_Python读取本地文件并解析网页元素的方法

				
			

			

				

					weixin_42502736的博客
				

				

					02-21
					
					1027
					
				

			

		

		

			
				
如下所示：from bs4 import BeautifulSouppath = './web/new_index.html'with open(path, 'r') as f:Soup = BeautifulSoup(f.read(), 'lxml')titles = Soup.select('ul > li > div.article-info > h3 > a')fo...

			
		

	





	

		

			

				
					
python 怎么打开文件

				
			

			

				

					weixin_35755640的博客
				

				

					12-20
					
					3565
					
				

			

		

		

			
				
在 Python 中打开文件可以使用内置的 open 函数。
例如，你可以使用如下代码来打开一个文本文件并读取其内容：
with open('filename.txt', 'r') as f:
    content = f.read()

在这里，'r' 表示以只读模式打开文件。如果你希望以写入模式打开文件，可以使用 'w' 或 'a' 参数。
使用 with 关键字可以确保文件在使用完后被关闭...

			
		

	





	

		

			

				
					
如何用python爬取网页数据,python爬取网页详细教程

					
热门推荐

				
			

			

				

					aifans_bert的博客
				

				

					02-06
					
					2万+
					
				

			

		

		

			
				
大家好，本文将围绕python怎么爬取网站所有网页展开说明，如何用python爬取网页数据是一个很多人都想弄明白的事情，想搞清楚python如何爬取网页数据需要先了解以下几个事情。

			
		

	





	

		

			

				
					
python解析本地HTML文件

				
			

			

				

					python学习者的博客
				

				

					09-23
					
					1万+
					
				

			

		

		

			
				
Python使用爬虫技术时，每运行一次，本地都会访问一次主机。为避免完成程序前调试时多次访问主机增加主机负荷，我们可以在编写程序前将网页源代码存在本地，调试时访问本地文件即可。现在我来分享一下爬取资料的调试过程。
一、将网页源代码存在本地
1、打开需要爬取的网页，鼠标右键查看源代码

2、复制源代码，将代码保存至本地项目文件目录下，文件后缀改为.html

二、在Python中打开本地html文件
打开并读取本地文件可使用BeautifulSoup方法直接打开
 soup=BeautifulSoup(ope

			
		

	





	

		

			

				
					
Python读取本地html文件，获取其中表格内容

				
			

			

				

					Dong的博客
				

				

					12-01
					
					1万+
					
				

			

		

		

			
				
python读取本地html文件并进行简单的处理来获取文字

			
		

	





	

		

			

				
					
【316】python.requests 读取网页信息

				
			

			

				

					weixin_34248705的博客
				

				

					05-30
					
					121
					
				

			

		

		

			
				
参考：Python:在网页中查找字符串的一般方法--in
参考：python怎么安装requests
参考：Requests 快速上手

 
操作步骤如下：

添加环境变量，将 python 所在文件夹添加至系统变量
下载 requests 模块（python怎么安装requests）　　pip install requests
重启 python 即可


调用方法如下：...

			
		

	





	

		

			

				
					
python读取本地文件-python解析本地HTML文件

				
			

			

				

					06-06
				

			

		

		

			
				
要读取本地文件，您可以使用Python内置的open()函数。例如，要打开一个名为“index.html”的HTML文件，您可以使用以下代码：  ``` with open('index.html', 'r') as file:  content = file.read() ```  这将打开文件...

			
		

	



              



  
“相关推荐”对你有帮助么？

  

      
    
          
  • 
              
    
                  
                  
              
    
              
    非常没帮助
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    没帮助
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    一般
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    有帮助
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    非常有帮助
    
          
    • 
      

      

      

          
          提交
      

      

  




          




        



    





    



      

      

        
      

      





	

		评论	
	

	
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值