社区
Delphi
帖子详情
模拟浏览器
wz2000
2000-08-24 01:17:00
我开发了一个网上机器人自动搜索指定网站的文件。对绝大多数网站都行之有效。但在测试中发现有些网站有抗的功能。现象有2:
1。一旦不使用浏览器直接访问某些文件返回ERROR
2。有的即便使用浏览器,由于不是从SERVER端发出文件请求,所以也返回ERROR
问如何模拟浏览器,让SERVER端不能判断是ROBOT在访问
...全文
179
4
打赏
收藏
模拟浏览器
我开发了一个网上机器人自动搜索指定网站的文件。对绝大多数网站都行之有效。但在测试中发现有些网站有抗的功能。现象有2: 1。一旦不使用浏览器直接访问某些文件返回ERROR 2。有的即便使用浏览器,由于不是从SERVER端发出文件请求,所以也返回ERROR 问如何模拟浏览器,让SERVER端不能判断是ROBOT在访问
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
4 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
skt642
2001-05-31
打赏
举报
回复
37772关注!
Sayhigh
2000-08-25
打赏
举报
回复
模拟Brower的报头足以骗过网站,报头有很多资料介绍,
gey
2000-08-25
打赏
举报
回复
注
JGTM2000
2000-08-24
打赏
举报
回复
服务器只懂得HTTP协议,你要搞明白浏览器发出的HTTP请求和你自己模拟发出的有什么不一样。简单的方法,2分钟编一个socket server然后用她来察看浏览器实际发出的请求,找出差异。
selenium及依赖jar包(java)
selenium及所有依赖jar包(java),selenium,java,
模拟
浏览器
,
模拟
登录
google
浏览器
插件 postman的使用
google
浏览器
插件 postman的使用,可以
模拟
get post提交,很好的调试工具。
150讲轻松学习Python网络爬虫
比如app开发,web开发,学习爬虫能让你加强对技术的认知,能够开发出更加安全的软件和网站 【课程设计】 一个完整的爬虫程序,无论大小,总体来说可以分成三个步骤,分别是: 网络请求:
模拟
浏览器
的行为从网上抓取...
python爬虫之selenium
模拟
浏览器
之前在异步加载(AJAX)网页爬虫的时候提到过,爬取这种ajax技术的网页有两种办法:一种就是通过
浏览器
审查元素找到包含所需信息网页的真实地址,另一种就是通过selenium
模拟
浏览器
的方法[1]。当时爬的是豆瓣,比较...
php爬虫
模拟
浏览器
,PHP
模拟
浏览器
访问,抓取非本地文件的几种方法「爬虫」
在做一些天气预报或者RSS订阅的程序时,往往需要抓取非本地文件,一般情况下都是利用php
模拟
浏览器
的访问,通过http请求访问url地址, 然后得到html源代码或者xml数据,得到数据我们不能直接输出,往往需要对内容...
Delphi
5,388
社区成员
262,730
社区内容
发帖
与我相关
我的任务
Delphi
Delphi 开发及应用
复制链接
扫一扫
分享
社区描述
Delphi 开发及应用
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章