社区
基础编程
帖子详情
php抓取网页,请教。
codeyell-com
2010-09-07 10:09:40
我想抓取的网页类似美团这样的,www.meituan.com
网页通过用户选择的地区不同,来显示不同地区的内容。
也就是说,同样的网址,用户选了不同的地区,内容就不一样了。
请教怎么能抓到各个地区的网页?谢谢。
ps:这个地区,好像是通过SESSION来记录的。
...全文
79
10
打赏
收藏
php抓取网页,请教。
我想抓取的网页类似美团这样的,www.meituan.com 网页通过用户选择的地区不同,来显示不同地区的内容。 也就是说,同样的网址,用户选了不同的地区,内容就不一样了。 请教怎么能抓到各个地区的网页?谢谢。 ps:这个地区,好像是通过SESSION来记录的。
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
10 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
pzhuyy
2011-03-30
打赏
举报
回复
美团有api的。直接用api可以取任意地方的数据阿,不过不知道这个数据取来有什么用。。帮美团打广告?
phper_cd
2010-09-07
打赏
举报
回复
CURL可以模拟提交和cookie,一般就是这些参数吧!
happy664618843
2010-09-07
打赏
举报
回复
美团 内容我也采集过 不过不是用php
love1989
2010-09-07
打赏
举报
回复
我现在也在思考这个东西 怎样正确的得到用户的IP勒...
codeyell-com
2010-09-07
打赏
举报
回复
php可以伪造 ip地址吗?
[Quote=引用 5 楼 xuzuning 的回复:]
怎么一样呢?
合肥 http://www.meituan.com/maillist/subscribe/hefei
天津 http://www.meituan.com/maillist/subscribe/tianjin
首次访问 www.meituan.com ,他会根据你的 ip 地址确定所在地的省会城市
[/Quote]
xuzuning
2010-09-07
打赏
举报
回复
怎么一样呢?
合肥 http://www.meituan.com/maillist/subscribe/hefei
天津 http://www.meituan.com/maillist/subscribe/tianjin
首次访问 www.meituan.com ,他会根据你的 ip 地址确定所在地的省会城市
stoneJU
2010-09-07
打赏
举报
回复
url后面肯定有个参数,将区域设成变量从客户端获取,然后在url后面跟上
lonelyriver
2010-09-07
打赏
举报
回复
snoopy吧 好像有这么个类
codeyell-com
2010-09-07
打赏
举报
回复
curl怎么实现?
服务器不支持curl的话,还有别的办法吗?
[Quote=引用 1 楼 cunningboy 的回复:]
用cURL
[/Quote]
CunningBoy
2010-09-07
打赏
举报
回复
用cURL
一个简单的java爬虫产品
最初的想法是不创建文件,直接将内容保存到变量中,然后创建索引,即先
抓取
网页
的内容,然后将
网页
的内容和URL保存到自己构建的JavaBean对象中,接着将这个对象放到一个list列表中,等所有
网页
抓取
完毕以后,将这...
用java
抓取
网页
信息!
最近因为需要,所以稍微了解了下用java
抓取
网页
信息! 这次我所分配的任务是
抓取
原创上面的学生期末的排考!因为这个
网页
都是用asp.net写的,所以对里面的一些细节不是很了解!所以也只知道一个大概!因为自己毕竟...
php
抓取
搜狗
网页
失败,
网页
抓取
,htmlagilitypack_Html Agility Pack
抓取
搜狗微信搜索时部分内容无法获取,
网页
抓取
,htmlagilitypack -
php
Study...
Html Agility Pack
抓取
搜狗微信搜索时部分内容无法获取例如抓主页中的阅读量 class=s1的span,无法获取此节点,而s2的则无内容。请问这是什么问题呢?如何解决?谢谢。HtmlWeb web = new HtmlWeb();...
Linux
抓取
网页
实例(shell+awk)
上一篇博客讲了Linux
抓取
网页
的方式,有curl和wget两种方式,这篇将重点讲Linux
抓取
网页
的实例——
抓取
google play全球12国的游戏TOP排名 要
抓取
google play游戏排名
网页
,首先需要分析
网页
的特点和规律: 1、...
php
phantomjs
抓取
,利用curl
抓取
网页
数据,phantomjs..请神人解
小弟昨天有发文
请教
,有很多的神人给我小弟很大的帮忙,目前只剩下一小块的数据未抓到。有大大说用 phantomjs来
抓取
html目前的js如var page = require('webpage').create();var url = '...
基础编程
21,887
社区成员
140,364
社区内容
发帖
与我相关
我的任务
基础编程
从PHP安装配置,PHP入门,PHP基础到PHP应用
复制链接
扫一扫
分享
社区描述
从PHP安装配置,PHP入门,PHP基础到PHP应用
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章