关于google的反爬虫

The_end90 2014-10-30 09:47:03
有哪位大神知道google的反爬虫策略是怎样的?写了个小爬虫,在本地测试时,运行6个多小时都没有被封IP,丢到服务器上去运行就被封IP。求助。。。。。
...全文
938 1 打赏 收藏 转发到动态 举报
AI 作业
写回复
用AI写文章
1 条回复
切换为时间正序
请发表友善的回复…
发表回复
y_x_yin_xiu 2014-11-03
  • 打赏
  • 举报
回复
具体的反扒规则不清楚,这种情况应该是服务器上的速度比较快,在一定的时间内对google的访问频率太高导致的。 可以降低访问频率试试

6,720

社区成员

发帖
与我相关
我的任务
社区描述
专题开发/技术/项目 Google技术社区
社区管理员
  • Google技术社区
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧