自动登录获取网站数据

[leekey85]

我想实现这样一个功能：
有一个aspx的系统，需要登陆，然后可以输入关键字搜索相应的信息，然后搜索出来的多条信息分页的，并且都可以点击查看详细信息的，我想把每个详细信息都保存下来，但是如果有很多条的话手动很费时间，希望能够写个程序能自动登陆并查找最后将多条详细信息保存到文本或者xls或者mdb中，不知道如何实现，请高手指教，谢谢

[lixq2000]

网络搜爬虫程序，cPAMIE

[king6o60]

首先你要学会：
抓下网页：
就是download该页的源码，用urllib2或者pycurl。
内容识别：
匹配标题，内容，url，用正则或者美丽的汤
插入数据库：
mysqldb