scrapy 存储excel文件

最新推荐文章于 2024-07-23 17:03:32 发布

转载最新推荐文章于 2024-07-23 17:03:32 发布 · 313 阅读

2 ·

CC 4.0 BY-SA版权

原文链接：http://www.cnblogs.com/Haleyhaley/p/9195093.html

文章标签：

#python

本文介绍了一个简单的Python爬虫数据处理管道，该管道利用openpyxl库将爬取的数据写入Excel文件。具体实现包括创建Excel工作簿、设置表头及保存文件等步骤。

from openpyxl import Workbook

class FangyuanPipeline(object):
    def __init__(self):
        self.wb = Workbook()
        self.ws = self.wb.active
        self.ws.append(['姓名', '电话'])
    def process_item(self, item, spider):  # 工序具体内容
        line = [item['name'], item['phone']]  # 把数据中每一项整理出来
        self.ws.append(line)  # 将数据以行的形式添加到xlsx中
        self.wb.save('info.xlsx')
        return item