C#如何获取动态网页上的数据

wike119 2015-03-07 04:37:10

用HttpWebRequest，WebClient或者WebResponse都只能获取到网页的框架数据，得不到框架里面的动态数据，除了用webbrowser之外，还有什么其他的办法可以获取。比如网址http://info.win007.com/analysis/1102793sb.htm，获取表格里面的数字。

...全文

885 5 打赏收藏转发到动态举报

写回复

用AI写文章

5 条回复

切换为时间正序

请发表友善的回复…

发表回复

一注擒庄 2015-03-25

打赏
举报

用抓包工具分析下，看看是通过get还是post得到数据，然后模拟这个过程

yh3536508 2015-03-09

打赏
举报

里面有个scoreOdds.js文件，看这一句 var scoreOddsHttp = zXmlHttp.createRequest(); 基本判断是用了ajax取数据至于请求路径，返回数据格式，你自己分析这个文件吧

xuzuning 2015-03-07

打赏
举报

用 js 加载的数据，需要去模拟执行 js 代码

wike119 2015-03-07

打赏
举报

引用 1 楼 hch126163 的回复:

分析所有请求，正则提取数据在页面源代码 var h_data=[['15-03-04',1366,'国际友谊','#4666bb',4519,'捷克 ((中)',5564,'比利时 ',2,2,'1-1','-1',0,1,1,1103068],['14-10-28',1366,'国际友谊','#4666bb',4519,'<span title="捷;

这样只能获取静态数据，但是这个页面重要的还有动态数据，我现在该怎么获取这些动态数据？

hch126163 2015-03-07

打赏
举报

分析所有请求，正则提取数据在页面源代码 var h_data=[['15-03-04',1366,'国际友谊','#4666bb',4519,'捷克 ((中)',5564,'比利时 ',2,2,'1-1','-1',0,1,1,1103068],['14-10-28',1366,'国际友谊','#4666bb',4519,'捷克 (',5563,'波兰 (',1,1,'0-0','-0.5',0,1,-1,1067770],['14-09-17',875,'世女欧预','#4D327D',4519,'捷克 (',5680,'西班牙 ',0,1,'0-0','-1.75',-1,1,-1,986819],['14-08-20',875,'世女欧预','#4D327D',8305,'爱沙尼亚',4519,'捷克 (',1,4,'0-2','-2.5',1,1,1,986815],['14-06-18',875,'世女欧预','#4D327D',4519,'捷克 (',11641,'马其顿 ',5,2,'1-0','3.75',1,-1,1,986579],['14-06-14',875,'世女欧预','#4D327D',4519,'捷克 (',2362,'意大利 ',0,4,'0-4','-1.5',-1,-1,1,986578],['14-05-07',875,'世女欧预','#4D327D',4519,'捷克 (',4564,'罗马尼亚',0,0,'0-0','0.5',0,-1,-1,981380],['14-04-26',875,'世女欧预','#4D327D',4519,'捷克 (',8305,'爱沙尼亚',6,0,'5-0','',1,-2,1,979443],['14-02-13',875,'世女欧预','#4D327D',2362,'意大利 ',4519,'捷克 (',6,1,'2-1','1.75',-1,-1,1,939007],['13-11-28',875,'世女欧预','#4D327D',5680,'西班牙 ',4519,'捷克 (',3,2,'2-0','1.75',-1,1,1,939006],['13-10-30',875,'世女欧预','#4D327D',4564,'罗马尼亚',4519,'捷克 (',0,0,'0-0','0.25',0,1,-1,934304],['13-10-26',875,'世女欧预','#4D327D',11641,'马其顿 ',4519,'捷克 (',1,3,'0-1','',1,-2,1,934301],['13-09-21',41,'球会友谊','#00A8A8',2361,'法国 (',4519,'捷克 (',2,0,'1-0','2.25',-1,1,-1,926569],['13-08-22',41,'球会友谊','#00A8A8',5367,'匈牙利 ',4519,'捷克 (',1,3,'0-1','0.25',1,1,1,909457],['13-08-20',41,'球会友谊','#00A8A8',4519,'1捷克 ((中)',5563,'波兰 (',1,4,'0-0','-0.25',-1,-1,1,908189],['13-06-22',41,'球会友谊','#00A8A8',5563,'波兰 (',4519,'捷克 (',4,0,'1-0','-0.25',-1,-1,1,852592],['13-03-11',41,'球会友谊','#00A8A8',5120,'俄罗斯 (中)',4519,'捷克 (2',0,0,'0-0','0.75',0,1,-1,827255],['13-03-09',41,'球会友谊','#00A8A8',4519,'捷克 (',5560,'斯洛文尼',5,1,'3-0','1',1,1,1,824665],['13-03-07',41,'球会友谊','#00A8A8',8304,'克罗地亚',4519,'捷克 (',1,1,'1-1','',0,-2,-1,826070],['12-09-19',223,'女欧国杯','#FF6600',8134,'阿美尼亚',4519,'捷克 (',0,2,'0-1','-3.5',1,-1,-1,710762],['12-06-21',223,'女欧国杯','#FF6600',1951,'丹麦 (',4519,'捷克 (',1,0,'0-0','2.25',-1,1,-1,710759],['12-06-16',223,'女欧国杯','#FF6600',4519,'1捷克 (',5562,'奥地利 ',2,3,'1-2','0.5',-1,-1,1,710048],['12-04-04',223,'女欧国杯','#FF6600',4519,'捷克 (',1951,'丹麦 (',0,2,'0-1','-1',-1,-1,-1,689933],['12-03-31',223,'女欧国杯','#FF6600',5178,'葡萄牙 ',4519,'捷克 (',2,5,'1-4','-0.25',1,1,1,688708],['11-11-20',223,'女欧国杯','#FF6600',4519,'捷克 (',8134,'阿美尼亚',5,0,'3-0','5.75',1,-1,1,647322],['11-10-22',223,'女欧国杯','#FF6600',4519,'捷克 (',5178,'葡萄牙 ',1,0,'0-0','0.5',1,1,-1,643476],['11-09-17',223,'女欧国杯','#FF6600',5562,'奥地利 ',4519,'捷克 (',1,1,'0-0','0.5',0,1,-1,555538],['11-08-21',41,'球会友谊','#00A8A8',5413,'斯洛伐克',4519,'捷克 (',1,0,'0-0','-0.25',-1,-1,-1,610909],['10-11-28',41,'球会友谊','#00A8A8',4519,'捷克 (',5367,'匈牙利 ',1,2,'0-0','1.25',-1,-1,1,498511],['10-11-26',41,'球会友谊','#00A8A8',5367,'匈牙利 ',4519,'捷克 (',3,4,'0-1','-0.25',1,1,1,497578]]; var a_data=[['15-03-04',1366,'国际友谊','#4666bb',5247,'墨西哥 (中)',9935,'南非 (',2,0,'0-0','1.25',1,1,-1,1103069],['15-02-08',1366,'国际友谊','#4666bb',5247,'1墨西哥 ',5938,'厄瓜多尔',2,0,'0-0','',1,-2,-1,1092095],['15-02-06',1366,'国际友谊','#4666bb',5247,'墨西哥 ',5938,'厄瓜多尔',1,0,'1-0','',1,-2,-1,1090409],['15-01-15',184,'女足四国','#FF2F73',2696,'南韩 ((中)',5247,'墨西哥 ',2,1,'1-0','0.75',-1,-1,1,1080891],['15-01-13',184,'女足四国','#FF2F73',2337,'加拿大 (中)',5247,'墨西哥 ',2,1,'0-0','1.25',-1,1,1,1080244],['15-01-11',1366,'国际友谊','#4666bb',1933,'中国 (',5247,'墨西哥 ',0,0,'0-0','1.5',0,1,-1,1079683],['14-11-28',1371,'女美加杯','#888566',5247,'墨西哥 ',12344,'哥伦比亚',2,0,'0-0','',1,-2,-1,1071281],['14-11-26',1371,'女美加杯','#888566',5247,'墨西哥 ',7829,'哥斯达黎',1,0,'0-0','',1,-2,-1,1071027],['14-11-22',1371,'女美加杯','#888566',5247,'墨西哥 ',16109,'海地 (1',1,0,'0-0','',1,-2,-1,1070698],['14-11-20',1371,'女美加杯','#888566',5247,'墨西哥 ',7812,'千里达及',6,0,'1-0','',1,-2,1,1070696],['14-11-18',1371,'女美加杯','#888566',5247,'墨西哥 ',12344,'哥伦比亚',1,1,'0-1','',0,-2,-1,1070646],['14-10-27',1368,'美女金杯','#737300',7812,'千里达及(中)',5247,'墨西哥 ',2,2,'0-1','-1.25',0,-1,1,1067498],['14-10-25',1368,'美女金杯','#737300',3862,'美国 (',5247,'墨西哥 ',3,0,'2-0','3.5',-1,1,1,1067351],['14-10-22',1368,'美女金杯','#737300',5247,'墨西哥 (中)',5939,'牙买加 ',3,1,'1-1','2.25',1,-1,1,1066376],['14-10-19',1368,'美女金杯','#737300',22968,'马提尼克(中)',5247,'墨西哥 ',0,10,'0-5','-5.75',1,1,1,1066374],['14-10-17',1368,'美女金杯','#737300',7829,'哥斯达黎(中)',5247,'墨西哥 ',1,0,'1-0','-1.5',-1,-1,-1,1066372],['14-09-19',1366,'国际友谊','#4666bb',3862,'美国 (',5247,'墨西哥 ',4,0,'3-0','4.75',-1,1,1,1058216],['14-09-14',1366,'国际友谊','#4666bb',3862,'美国 (',5247,'墨西哥 ',8,0,'4-0','2.75',-1,-1,1,1056710],['14-02-15',184,'女足四国','#FF2F73',5247,'墨西哥 (中)',5706,'纽西兰 ',2,1,'1-1','-0.75',1,1,1,954556],['14-02-13',184,'女足四国','#FF2F73',1933,'中国 (',5247,'墨西哥 1',3,1,'3-1','1',-1,-1,1,954553],['14-02-11',184,'女足四国','#FF2F73',2697,'北韩 ((中)',5247,'墨西哥 ',2,0,'0-0','1.5',-1,-1,-1,954539],['13-11-25',41,'球会友谊','#00A8A8',2337,'加拿大 ',5247,'墨西哥 ',0,0,'0-0','2',0,1,-1,939004],['13-09-25',41,'球会友谊','#00A8A8',5247,'墨西哥 ',4883,'巴西 (',0,4,'0-3','-1.75',-1,-1,1,928060],['13-09-04',41,'球会友谊','#00A8A8',3862,'美国 (',5247,'墨西哥 ',7,0,'5-0','2.5',-1,-1,1,918397],['13-03-13',434,'加夫杯','#CC3399',5247,'墨西哥 (中)',1951,'丹麦 (',0,3,'0-1','-1',-1,-1,1,828661],['13-03-11',434,'加夫杯','#CC3399',5178,'葡萄牙 ',5247,'墨西哥 ',0,3,'0-2','-0.25',1,1,1,824880],['13-03-09',434,'加夫杯','#CC3399',5247,'墨西哥 (中)',4521,'威尔斯 ',0,1,'0-1','0.75',-1,-1,-1,824878],['13-03-06',434,'加夫杯','#CC3399',5367,'匈牙利 (中)',5247,'墨西哥 ',0,1,'0-0','-0.75',1,1,-1,824438],['12-12-20',41,'球会友谊','#00A8A8',5178,'葡萄牙 (中)',5247,'墨西哥 ',0,2,'0-2','-0.25',1,1,-1,805718],['12-12-17',41,'球会友谊','#00A8A8',5247,'墨西哥 (中)',5178,'葡萄牙 ',0,1,'0-0','0.75',-1,-1,-1,805535]];