double07 发表于 2021-4-4 12:55

scrapy 用pandas怎样把数据写入excel

本帖最后由 double07 于 2021-4-4 12:56 编辑

scrapy抓取数据为字典类型：


scrapy解析代码


在pipelines中怎样用pandas把数据输出到excel?

额微粒波地 发表于 2021-4-4 12:58

scrapy -o 文件名.csv 好像是可以直接导出结果

double07 发表于 2021-4-4 13:14

额微粒波地 发表于 2021-4-4 12:58
scrapy -o 文件名.csv 好像是可以直接导出结果

可以的，但想用pandas实现

咸鱼灭 发表于 2021-4-4 19:52

可以用defaultdict字典来实现

double07 发表于 2021-4-4 22:00

咸鱼灭 发表于 2021-4-4 19:52
可以用defaultdict字典来实现

可以具体点？:loveliness:

gentlespider 发表于 2021-4-7 16:19

没用过他的现成组件。常规思路就是在pipeline中把数据提取到列表中然后写入。
页: [1]
查看完整版本: scrapy 用pandas怎样把数据写入excel


免责声明：
吾爱破解所发布的一切破解补丁、注册机和注册信息及软件的解密分析文章仅限用于学习和研究目的；不得将上述内容用于商业或者非法用途，否则，一切后果请用户自负。本站信息来自网络，版权争议与本站无关。您必须在下载后的24个小时之内，从您的电脑中彻底删除上述内容。如果您喜欢该程序，请支持正版软件，购买注册，得到更好的正版服务。如有侵权请邮件与我们联系处理。

Mail To:Service@52pojie.cn