爬虫：检测到有异常请求从你的 IP 发出？

double07 · 发表于 2021-3-16 10:46

用pycharm爬取豆瓣数据，遇到“'检测到有异常请求从你的 IP 发出，请问如何解决？

featmellwo · 发表于 2021-3-16 10:53

如果开始正常后续提示这个，大概率是ip被ban了，使用代{过}{滤}理ip即可。
如果开始就提示这个，检测请求头，以及cookie等参数，

jjjzw · 发表于 2021-3-16 10:57

应该是爬取数据过多被反爬了，可以试试ip代{过}{滤}理池

夜澜雨 · 发表于 2021-3-16 10:57

弄个代{过}{滤}理池，或者过几天降低速度爬

double07 · 发表于 2021-3-16 11:01

用代{过}{滤}理服务器解决，但baipiao的代{过}{滤}理服务器只能用几分钟

命夜嚣色 · 发表于 2021-3-16 11:28

重启路由器，刷新ip

姜子牙 · 发表于 2021-3-16 11:32

问题原因; 因为你的爬虫代码比较初级, 触发了douban的反爬虫机制,
解决方法: 1伪装 ip 降低爬取速度
2调整爬取数据的时间间隔

sxwa059587 · 发表于 2021-3-16 13:01

调整爬取数据的时间间隔

First丶云心 · 发表于 2021-3-16 13:16

提示: 作者被禁止或删除内容自动屏蔽

ForGot_227 · 发表于 2021-3-17 16:36

double07 发表于 2021-3-16 11:01
用代{过}{滤}理服务器解决，但baipiao的代{过}{滤}理服务器只能用几分钟

频率高了吧。多几个 sleep吧。

帐号		自动登录	找回密码
密码			注册[Register]

[求助] 爬虫：检测到有异常请求从你的 IP 发出？

First丶云心 First丶云心当前离线好友阅读权限 0 听众最后登录 1970-1-1 头像被屏蔽	First丶云心发表于 2021-3-16 13:16 提示: 作者被禁止或删除内容自动屏蔽

	回复支持举报