如何高效判断URL是否存在??

2006-09-01 02:51:23 981 阅读 AI 写同款 · GEO 优化AI 选题数据监测一键分发 ›

14.性能压测工具使用-sysbench SYSBENCH 是一个开源的多线程性能测试工具，广泛用于评估系统、数据库和硬件的性能。它支持多种测试模式，如 CPU、内存、磁盘 I/O 和数据库基准测试。凭借其灵活性和易用性，SYSBENCH 能帮助用户快速识别性能瓶颈，优化系统效率，是系统管理员和开发者的理想选择。本篇博客主要介绍怎么使用 SYSBENCH 进行 DM 达梦数据库的编译测试，相应的 SYSBENCH 官方版本包需要联系达梦数据库人员进行获取。阅读详情

我现在有几万个网址，想检测这些网址是否有效？
用了函数:fsockopen()和fopen()函数都感觉效果不好，太慢了。
请教还有什么更好的方法检测这些网址？？？

...全文

数据库sysbench测试工具基础使用 Sysbench是一款开源的、模块化的、跨平台的多线程性能测试工具，支持数据库、CPU、内存、线程、IO等方面的性能测试，尤其适用于MySQL、Oracle和PostgreSQL等数据库的OLTP基准测试。阅读详情

ay17118

基础编程 21,889 成员 140,329 内容

+ 关注 + 加入社区

切换为时间正序

helloyou0 2006-09-01

打赏
举报

无效url速度慢是正常的

ay17118 2006-09-01

打赏
举报

fopen也用过了，效率也不怎么好。

boom123 2006-09-01

打赏
举报

这个不能绝对准确的
用fopen试试效率怎么样，就看能不能打开，不读
sock是对网站的，能ping上不一定有该网页

ay17118 2006-09-01

打赏
举报

可以说详细点吗？

iasky 2006-09-01

打赏
举报

fsockopen把，看header的code

2xx
3xx
4xx
5xx

ay17118 2006-09-01

打赏
举报

多谢大家的建议，现在我有几万条网址记录都放在MYSQL里面，我想检测出来那些URL是坏连接，并且在数据库中作上符号。所以，最好能用自己的程序来实现。这些程序以后还会常用到的。
我现在用$fp = @fsockopen($url, 80, &$errno, &$errstr, 5); 可以进行批量检测，但检测到有效URL估计要0.7秒，无效URL估计要5到10秒，我感觉太慢了。
请教哪位高手有更好的更高效的方法进行检测URL？谢了！！

cdm11cn 2006-09-01

打赏
举报

有专门检查链接的软件,去下载个吧

xuzuning 2006-09-01

打赏
举报

1、ping是可以被关闭的，随便在哪一级路由上设置一下，ping就失效了
2、ping的是网站。网站存在，并不代表页面存在

ay17118 2006-09-01

打赏
举报

我下面的程序，我测试了一下，感觉速度并不是很快！

<?php
for($i=1;$i<100;$i=$i+1)
{
$domain="www.163.com";
$pingcmd = "ping ".$domain;
$str=(exec($pingcmd));
echo $str;
if(substr($str, 0, 5) != 'Pingi')
{
echo "No such domain<br>";
}
else
{
echo "The domain is available.</br>";
}
}
?>

an9ryfr09 2006-09-01

打赏
举报

利用网络命令ping，看返回的结果来判断。
这样得来的结果肯定不准确。有时你ping不通并不一定就代表人家不存在，现在大多数站点都被Firewall弄的ping不通。而且网络状况不好，会丢包的。

zeroleonhart 2006-09-01

打赏
举报

$pingcmd = "ping ".$domain;
$str=(exec($pingcmd));
if(substr($str, 0, 5) != 'Pingi')
{
echo "No such domain";
}
else
{
echo "The domain is available.";
}

NOT TESTED. IT IS JUST AN IDEA.

ay17118 2006-09-01

打赏
举报

检测一个网址要五六秒，几万个网址就得一两天才检测得完，是慢了点。那位朋友有更好的办法，指点一下我们了！

caotian2000 2006-09-01

打赏
举报

zeroleonhart(Strong Point:Algorithm)

上次你说用FOPEN后来我测试，发现有时候要五六秒甚至更长，有没有更好办法？

ay17118 2006-09-01

打赏
举报

Command: ping??? 能不能说得详细点是怎么实现的？多谢了！！

zeroleonhart 2006-09-01

打赏
举报

Command: ping

如何高效判断URL是否存在??

相关推荐