python 爬虫抓取网页数据导出excel_Python实现抓取网页生成Excel文件的方法示例

本文演示了如何使用Python的PyQuery库抓取网页数据,并将其导出到CSV文件,然后转换为Excel文件。主要步骤包括设置编码、循环抓取多页数据、解析HTML并写入文件,最后在Notepad++中转换编码并用Excel打开。
摘要由CSDN通过智能技术生成

本文实例讲述了Python实现抓取网页生成Excel文件的方法。分享给大家供大家参考,具体如下:

Python抓网页,主要用到了PyQuery,这个跟jQuery用法一样,超级给力

示例代码如下:

#-*- encoding:utf-8 -*-

import sys

import locale

import string

import traceback

import datetime

import urllib2

from pyquery import PyQuery as pq

# 确定运行环境的encoding

reload(sys);

sys.setdefaultencoding('utf8');

f = open('gongsi.csv', 'w');

for i in range(1,24):

d = pq(url="http://www.yourwebname.com/?Code=HANGYELINGYU&myFlag=allShow&SiteID=122&PageIndex=%d"%(i));

itemsa=d('dl dt a') #取title元素

itemsb=d('dl dd') #取title元素

for j in range(0,len(itemsa)):

f.write("%s,\"%s\"\n"%(itemsa[j].get('title'),itemsb[j*2].text));

#end for

#end for

f.close();

接下来就是用Notepad++打开gongsi.csv,然后转成ANSI编码格式,保存。再用Excel软件打开这个csv文件,另存为Excel文件

希望本文所述对大家Python程序设计有所帮助。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值