社区
基础编程
帖子详情
phpwind 6.0 论坛的 数据采集 问题请教大家
Newdew
2008-04-20 02:49:38
想采集一个需要登录的 phpwind 6.0 论坛的数据(只需要采集到本地数据库,不需要发布到别的论坛) ,在采集时无法采集到数据(相关的规则都正确)。
请问各位兄弟姐妹:是什么原因?有什么解决办法吗?有什么采集器可以采集需要登录的 phpwind 6.0 论坛数据吗(好像火车头,小蜜蜂等等的不行)?
ps: 可能跟 phpwind 6.0采用的动态Cookies技术有关。
谢谢大家!期待大家的指教。
...全文
241
27
打赏
收藏
phpwind 6.0 论坛的 数据采集 问题请教大家
想采集一个需要登录的 phpwind 6.0 论坛的数据(只需要采集到本地数据库,不需要发布到别的论坛) ,在采集时无法采集到数据(相关的规则都正确)。 请问各位兄弟姐妹:是什么原因?有什么解决办法吗?有什么采集器可以采集需要登录的 phpwind 6.0 论坛数据吗(好像火车头,小蜜蜂等等的不行)? ps: 可能跟 phpwind 6.0采用的动态Cookies技术有关。 谢谢大家!期待大家的指教。
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
27 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
Newdew
2008-05-05
打赏
举报
回复
[Quote=引用 26 楼 lvjx125 的回复:]
顶起
[/Quote]
谢谢帮顶,期待高人指点。
Newdew
2008-05-04
打赏
举报
回复
奇怪,23楼我怎么看不到啊?
Newdew
2008-05-04
打赏
举报
回复
顶起来等高手指点!顶起来等高手指点!
lvjx125
2008-05-04
打赏
举报
回复
顶起
meiZiNick
2008-05-01
打赏
举报
回复
等待牛人来答.
Newdew
2008-04-27
打赏
举报
回复
顶起来等高手指点!
Newdew
2008-04-26
打赏
举报
回复
顶起来等高手!
Newdew
2008-04-25
打赏
举报
回复
[Quote=引用 19 楼 fxs_2008 的回复:]
看了一下,共有六个cookie其中一个是动态cookie,
不好采集,对方可能验证cookie,也可能验证你是否是从网站上来的而不是浏览器直接请求!
这种情况下不好采集!必须能模拟cookie才行!
估计curl能行!请高手试试吧!
[/Quote]
期待有高手能搞定phpwind的动态cookie
fxs_2008
2008-04-24
打赏
举报
回复
看了一下,共有六个cookie其中一个是动态cookie,
不好采集,对方可能验证cookie,也可能验证你是否是从网站上来的而不是浏览器直接请求!
这种情况下不好采集!必须能模拟cookie才行!
估计curl能行!请高手试试吧!
panxuan
2008-04-24
打赏
举报
回复
[Quote=引用 16 楼 Newdew 的回复:]
最关键的地方就是:phpwind 6.0采用的是动态Cookies。
[/Quote]
Newdew
2008-04-24
打赏
举报
回复
最关键的地方就是:phpwind 6.0采用的是动态Cookies。
Newdew
2008-04-24
打赏
举报
回复
有人能搞定这个问题吗?
Newdew
2008-04-23
打赏
举报
回复
[Quote=引用 12 楼 fxs_2008 的回复:]
随便给个网址,用户密码,俺测测(可发消息)
[/Quote]
已经给你站内短消息,谢谢你!
Newdew
2008-04-23
打赏
举报
回复
[Quote=引用 14 楼 fxs_2008 的回复:]
看了一下,不是不能采集,而是你没有权限,没有权限就看不到,看不到就采集不到
采集,只能采集你能看到的
你看到的那个可能是自已,但别人的不行
[/Quote]
我能看到的全部采集不到。个人资料我只能看到自己的,但自己的个人资料也无法采集到,其它的普通帖子(我能看到)也采集不到。
fxs_2008
2008-04-23
打赏
举报
回复
看了一下,不是不能采集,而是你没有权限,没有权限就看不到,看不到就采集不到
采集,只能采集你能看到的
你看到的那个可能是自已,但别人的不行
fxs_2008
2008-04-22
打赏
举报
回复
随便给个网址,用户密码,俺测测(可发消息)
Newdew
2008-04-22
打赏
举报
回复
补充一点:使用采集器或者9楼的方法采集Discuz论坛的数据一切正常。采集phpwind论坛的数据就不行了。
Newdew
2008-04-22
打赏
举报
回复
[Quote=引用 9 楼 fxs_2008 的回复:]
先用浏览器登录,不关闭,正常采集
——————————
这个,只要是用iE的程序均可正常采集的
如flashget,微软的xmlhttp等,但如果你不用ie,不行!因为原理不一样!
curl和socket是直接调用http协议,可能不行!
[/Quote]
先谢谢你的热心帮助!
使用IE浏览器登录(Cookies期限选的是永久),不关闭,使用Flashget下载后发现仍然是提示未登录(下载的是源文件,查看源文件发现仍然未登录状态)。在Flashget里加入登录名称和密码仍然不行(该网站登录时有验证码校验)。
fxs_2008
2008-04-22
打赏
举报
回复
先用浏览器登录,不关闭,正常采集
——————————
这个,只要是用iE的程序均可正常采集的
如flashget,微软的xmlhttp等,但如果你不用ie,不行!因为原理不一样!
curl和socket是直接调用http协议,可能不行!
Newdew
2008-04-22
打赏
举报
回复
[Quote=引用 7 楼 junp2007 的回复:]
curl,模拟登录
[/Quote]
谢谢!
curl非常博大,短时间内搞不透。有没有现成的采集器可以用的?
加载更多回复(7)
UG 2023 64bit 64 位系统设计软件.rar
UG NX 2023(Unigraphics NX,中文名交互式 CAD/CAM 系统),是西门子 Siemens PLM Software 研发的 CAD/CAE/CAM 一体化产品工程解决方案,提供全套数字化造型与仿真验证手段。软件功能强悍,可轻松完成各类复杂实体、曲面造型构建,广泛应用于机械装备、塑胶模具、汽车零部件、航空航天、数控加工、钣金设计等工业领域。 软件仅支持
Win
10、
Win
11 64 位系统,不再兼容
Win
7,硬件配置要求适中。软件集三维建模、工程制图、数控编程、力学与运动仿真等功能于一体,可兼容各类主流设计文件格式。 该版本优化了装配加载速度、曲面建模能力与刀路算法,运行稳定,是当下行业主流版本。 由于安装包文件过大,CSDN 无法直接上传,附件提供下载链接及配套安装教程,欢迎下载使用。
vivado XADC IP核使用教程
vivado XADC IP核使用教程
64 位 NX2023 UG 主流行业版本 无偿持续分享.rar
UG(Unigraphics NX)是一款由西门子(Siemens PLM Software)开发的交互式CAD/CAM/CAE系统。作为全球领先的产品工程解决方案,它集成了产品设计、工程仿真与制造加工于一体。其功能强大且应用广泛,能够轻松实现各种复杂实体和造型的构造,为模具、汽车、航空航天及通用机械等行业提供了高性能的机械设计与制图灵活性。
【变压器的开路试验】变压器进行开路试验时的电路连接配置(Simulink仿真实现)
内容概要:本文详细介绍了利用Simulink进行变压器开路试验的电路连接配置与仿真实现方法,重点在于通过仿真手段还原实际电力系统中变压器在空载条件下的电气特性,从而深入理解其工作原理与性能表现。文章作为电力系统仿真系列研究的一部分,系统阐述了从电路模型搭建、参数设定、仿真运行到结果分析的完整流程,突出展示了MATLAB/Simulink在电力设备建模与教学科研中的强大功能与应用价值。; 适合人群:具备电力系统基础知识,熟悉MATLAB/Simulink仿真环境,从事电气工程、自动化及相关领域的研发人员,以及高年级本科生和研究生。; 使用场景及目标:①掌握变压器开路试验的基本原理与Simulink仿真建模的具体步骤;②通过仿真实验深入理解空载电流、铁芯损耗及励磁特性等关键参数的物理意义;③为后续开展变压器短路试验、暂态过程分析以及其他电力设备的仿真研究奠定理论与实践基础。; 阅读建议:建议结合Simulink软件动手实践,逐步构建并调试电路模型,重点关注各元件参数的设置方法与测量模块的应用技巧,同时推荐参考文中提及的其他相关仿真案例进行拓展学习,以全面提升对电力系统仿真实践的整体认知与操作能力。
SoloBlog.zip
SoloBlog.zip
基础编程
21,889
社区成员
140,338
社区内容
发帖
与我相关
我的任务
基础编程
从PHP安装配置,PHP入门,PHP基础到PHP应用
复制链接
扫一扫
分享
社区描述
从PHP安装配置,PHP入门,PHP基础到PHP应用
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章