网站 › 『编程语言讨论求助区』 › 爬虫：检测到有异常请求从你的 IP 发出？

double07 发表于 2021-3-16 10:46

爬虫：检测到有异常请求从你的 IP 发出？

用pycharm爬取豆瓣数据，遇到“'检测到有异常请求从你的 IP 发出，请问如何解决？

featmellwo 发表于 2021-3-16 10:53

如果开始正常后续提示这个，大概率是ip被ban了，使用代{过}{滤}理ip即可。
如果开始就提示这个，检测请求头，以及cookie等参数，

jjjzw 发表于 2021-3-16 10:57

应该是爬取数据过多被反爬了，可以试试ip代{过}{滤}理池

夜澜雨 发表于 2021-3-16 10:57

弄个代{过}{滤}理池，或者过几天降低速度爬

double07 发表于 2021-3-16 11:01

用代{过}{滤}理服务器解决，但baipiao的代{过}{滤}理服务器只能用几分钟{:1_925:}

命夜嚣色 发表于 2021-3-16 11:28

重启路由器，刷新ip

姜子牙 发表于 2021-3-16 11:32

问题原因; 因为你的爬虫代码比较初级, 触发了douban的反爬虫机制,
解决方法: 1伪装 ip 降低爬取速度
               2调整爬取数据的时间间隔

sxwa059587 发表于 2021-3-16 13:01

调整爬取数据的时间间隔

First丶云心 发表于 2021-3-16 13:16

ForGot_227 发表于 2021-3-17 16:36

double07 发表于 2021-3-16 11:01
用代{过}{滤}理服务器解决，但baipiao的代{过}{滤}理服务器只能用几分钟

频率高了吧。多几个 sleep吧。

查看完整版本: 爬虫：检测到有异常请求从你的 IP 发出？