新浪微博爬取数据的下拉数据获取问题

数据学习(Datalearner) 2013-04-01 09:00:58
爬取某个人的主页的信息的时候要下拉到屏幕底端才会加载剩下的内容,一页45条微博,分三次,第一次登陆出现15条,然后拉倒底端出现中间的15条,到最后才显示剩下的十五条。。下拉出发JS,发送请求后得到一个Jason。。现在我不知道下拉发出的请求地址是什么,网上有很多个。。求大神指导
http://weibo.com/aj/mblog/mbloglist?page=33&pre_page=33&pagebar=0&uid=2860753602
http://weibo.com/aj/mblog/mbloglist?_wv=5&page=2&count=15&max_id=-1&pre_page=1&uid=2204493924
等等。求指导啊。。跪谢
...全文
678 2 打赏 收藏 转发到动态 举报
写回复
用AI写文章
2 条回复
切换为时间正序
请发表友善的回复…
发表回复
fengjackling 2013-11-04
  • 打赏
  • 举报
回复
用httpfox就可以看到地址
amongdata 2013-09-23
  • 打赏
  • 举报
回复
大哥,自己抓下包就知道了,还不用抓包。weibo也有开放api,查询API吧

2,760

社区成员

发帖
与我相关
我的任务
社区描述
搜索引擎的服务器通过网络搜索软件或网络登录等方式,将Internet上大量网站的页面信息收集到本地,经过加工处理建立信息数据库和索引数据库。
社区管理员
  • 搜索引擎技术社区
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧