2,760
社区成员
发帖
与我相关
我的任务
分享搜索引擎是怎么防止恶意搜索抓取页面的，大家探讨下
有人说 是通过 ip 或者 一定时间的访问量 是不是还有什么其他
比如搜狗
我用浏览器直接 搜索 可以
但是用 php或者其他脚本语言 去抓取 就会出现 让你输入验证码的页面
怎么破
...全文
请发表友善的回复…
发表回复
h420943302 2013-01-24
- 打赏
- 举报
我用php去抓 就会被屏蔽掉
而用 外部 浏览器去访问 就正常
php怎么模拟为外部浏览器
h420943302 2013-01-24
- 打赏
- 举报
我是问怎么破。。。
henry_fuzr 2013-01-24
- 打赏
- 举报
1.php或者其他脚本语言 去抓取 就会出现 让你输入验证码的页面 这不行的，浏览器请求都可以模拟的。
2.还是要限ip，不过限ip也可以通过动态代理来规避。
3.一般都不会防抓吧 互联网精神讲的就是一种开放精神。
4.非得要防抓的东西一般做权限控制
