急!如何抓取一个网站中的数据库的内容并同时存入本地数据库?

coolzq 2006-06-27 03:46:15
假设有一个a网站,发布了一个数据库,通过其网页检索出数据,显示在页面中,我如何通过这个页面的地址(这个地址可以直接访问同样的数据,不需要用户登录权限验证之类的),用我的程序直接把所需要的数据抓下来?
如果指定的内容中有连接,程序要自己链下去,抓取指定的内容,请高手指教,挺急的。
有.net方法最好
...全文
167 2 打赏 收藏 转发到动态 举报
写回复
用AI写文章
2 条回复
切换为时间正序
请发表友善的回复…
发表回复
winner2050 2006-06-27
  • 打赏
  • 举报
回复
public string GetHttp(string sUrl)//取得网页源代码
{
WebClient client1 = new WebClient();
client1.Credentials = CredentialCache.DefaultCredentials;
byte[] buffer1 = client1.DownloadData(sUrl);
string text1 = Encoding.Default.GetString(buffer1);
client1.Dispose();

return text1;
}
seaonce 2006-06-27
  • 打赏
  • 举报
回复
WebRequest req = WebRequest.Create("网址");

WebResponse result = req.GetResponse();
Stream ReceiveStream = result.GetResponseStream();

Byte[] read = new Byte[512];
int bytes = ReceiveStream.Read(read, 0, 512);



while (bytes > 0)
{


Encoding encode = System.Text.Encoding.GetEncoding("gb2312");
bytes = ReceiveStream.Read(read, 0, 512);
searchbody=searchbody+encode.GetString(read,0,bytes);


}

62,025

社区成员

发帖
与我相关
我的任务
社区描述
.NET技术交流专区
javascript云原生 企业社区
社区管理员
  • ASP.NET
  • .Net开发者社区
  • R小R
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告

.NET 社区是一个围绕开源 .NET 的开放、热情、创新、包容的技术社区。社区致力于为广大 .NET 爱好者提供一个良好的知识共享、协同互助的 .NET 技术交流环境。我们尊重不同意见,支持健康理性的辩论和互动,反对歧视和攻击。

希望和大家一起共同营造一个活跃、友好的社区氛围。

试试用AI创作助手写篇文章吧