请问一般获取一个网页内容需要多长时间？

angel0829 2008-05-08 01:45:50

我把TSE的代码移植成了windows版的，但是效率实在不敢恭维，获取新浪首页17秒，一个小网站的普通页面要100多秒，我想这不是网速的问题吧。所以想问问大家一般获取一个页面的正常时间大概是多少？我512K的宽带。

...全文

56 3 打赏收藏转发到动态举报

写回复

3 条回复

切换为时间正序

请发表友善的回复…

发表回复

angel0829 2008-05-08

打赏
举报

回复

你有获取一个网页的源代码吗？

最简单的一个例子，能提供吗？我这里的效率实在头疼，不知道怎么回事。

shadowlin 2008-05-08

打赏
举报

回复

一个页面?包括图片什么的么?
如果就是文字信息的话,算上解析html的时间也就1-5秒吧...

在实际爬取网页时，通常需要根据具体的网站进行调整，以便让服务器认为我们是一个正常的浏览器请求。需要注意的是，不同的网站可能需要不同的请求头，因此在编写爬虫时，需要根据具体的情况进行调整。在使用 Python ...

说明：由于很多文件无法获取到完整内容，再者具体文件内容在Filter里面进行了控制，而Fileter的内容依赖于IRequestHandler所以，外部只能操作Handler得到数据。所以需要在，Filter和Hanlder类中，使用事件来传递...

位域(或)操作符分隔多个值，cURL让服务器选择一个支持最好的值。 CURLAUTH_ANY 等价于 CURLAUTH_BASIC | CURLAUTH_DIGEST | CURLAUTH_GSSNEGOTIATE | CURLAUTH_NTLM . CURLAUTH_ANYSAFE 等价于 CURLAUTH_...

一、获取网络时间，需要的时间会比较长，个别电脑上可能会出现不兼容现象代码实现： def get_web_server_time(self, host_URL, year_str='-', time_str=':'): ''' 获取网络时间，需要的时间会比较长，个别...

python获取网页响应时间 python里可以获取网页响应时间的方法这个方法需要用到requests包获取到的时间单位为微秒想要获取其他时间单位，可以自己按规则转换以下代码是获取到了毫秒 #! /usr/bin/python # ...

搜索引擎技术

2,760

社区成员

2,052

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章