在爬取当当网书籍信息的时候,我想把数据写入文件和数据库啊,但是那些数据都能显示在命令行中但是无法写入文件和数据库中,后来发现是在settings.py中没有将Pipeline打开,即如下图所示:
这里把ITEM_PIPELINES这个字典的注释去掉之后才可以运行pipelines.py这个文件,之后就可以利用pipelines.py中的函数写入数据库和文件了
利用scrapy框架爬去得到数据但是无法写入文件的问题
最新推荐文章于 2024-05-17 01:05:09 发布
在爬取当当网书籍信息的时候,我想把数据写入文件和数据库啊,但是那些数据都能显示在命令行中但是无法写入文件和数据库中,后来发现是在settings.py中没有将Pipeline打开,即如下图所示:
这里把ITEM_PIPELINES这个字典的注释去掉之后才可以运行pipelines.py这个文件,之后就可以利用pipelines.py中的函数写入数据库和文件了