这张图 是火狐中F12看到的数据。
右键 查看源代码 里面找不到商品相关的数据
php获取dom模型，也找不到商品相关的数据
右键源码，找到js引入文件,发现这个链接应该与商品数据有关，但是这个链接点不进去，我就把地址复制下来了 直接在浏览器访问 出现下图
访问这个js提示了一个新的地址，于是我又复制新地址在浏览器打开，出现了js压缩后的代码。我想请教一下各位大哥大姐，通过这种办法显示的数据，我有办法抓取到吗？
希望各位指点一二，问了好多人了都没有办法，只能求助最大的CSDN了。。。
-
等级
本版专家分：0结帖率 0% -
这张图 是火狐中F12看到的数据。
右键 查看源代码 里面找不到商品相关的数据
php获取dom模型，也找不到商品相关的数据
右键源码，找到js引入文件,发现这个链接应该与商品数据有关，但是这个链接点不进去，我就把地址复制下来了 直接在浏览器访问 出现下图
访问这个js提示了一个新的地址，于是我又复制新地址在浏览器打开，出现了js压缩后的代码。我想请教一下各位大哥大姐，通过这种办法显示的数据，我有办法抓取到吗？
希望各位指点一二，问了好多人了都没有办法，只能求助最大的CSDN了。。。
展开阅读全文
-
等级
本版专家分：395928勋章
-
- 签到新秀 累计签到获取，不积跬步，无以至千里，继续坚持！
-
- 名人 2019年 荣获名人称号
-
- 状元 2018年总版新获得的技术专家分排名第一
-
-
进士
2017年 总版技术专家分年内排行榜第四
2014年 总版技术专家分年内排行榜第四
2013年 总版技术专家分年内排行榜第四
2012年 总版技术专家分年内排行榜第六
-
-
连原始的 url 都不给？
-
等级
本版专家分：0
-
http://www.1yyg.com/list/i100b59.html
需要在程序中获取这里面的商品名称和商品图片链接哦
-
等级
本版专家分：1517勋章
-
- 签到新秀 累计签到获取，不积跬步，无以至千里，继续坚持！
-
-
不会.不过,我可以帮你顶一下,让更多的人看到.
-
等级
本版专家分：36勋章
-
- 签到新秀 累计签到获取，不积跬步，无以至千里，继续坚持！
-
-
<?php
// 创建一个新cURL资源
$ch = curl_init();
// 设置URL和相应的选项
curl_setopt($ch, CURLOPT_URL, "http://skin.1yyg.com/JS/GoodsListFun.js?date=20141020");
curl_setopt($ch, CURLOPT_HEADER, 0);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
// 抓取URL并把它传递给浏览器
curl_exec($ch);
$contents = curl_multi_getcontent($ch);
// 关闭cURL资源，并且释放系统资源
curl_close($ch);
echo $contents;
?>
-
等级
本版专家分：7657勋章
-
-
蓝花
2015年3月 PHP大版内专家分月排行榜第三
2015年2月 PHP大版内专家分月排行榜第三
-
-
这种js数据有2种获取方法
一个是直接抓取页面，并在页面底部添加js代码，将浏览器渲染好的产品数据打包发给服务器，当然页面引入的相对地址要改成绝对地址，涉及跨域问题也比较多
更好的就是跟踪流程直接找到数据来源地址，然后用正则匹配
-
等级
本版专家分：0
-
上面的代码 我试了，不管用。
我用phpQuery抓取下来的老乱码，正在解决乱码问题。如果搞不定就试试这个《页面底部添加js代码，将浏览器渲染好的产品数据打包发给服务器》
-
等级
本版专家分：0 -
同求该问题，顶起 顶起啊
-
等级
本版专家分：5
-
放弃php,用nodejs
-
等级
本版专家分：0
-
解决了没有？
-
等级
本版专家分：0
-
解决了没有？
别沉啊
- PHP获取HTML内容及动态渲染js加载内容 （使用querylist）
1.安装安装querylistcomposer require jaeger/querylist安装phantomjscomposer require jaeger/querylist-phantomjs //PHP版本必须 >=7.0下载对应你电脑系统的PhantomJS二进制文件，放到电脑任意路径，下面...
- 获取页面js动态写入的数据（抓取天猫商品价格）
直接上代码： 先安装phantomjs，然后安装casperjs，...php代码： for($i=0; $i $limit = $i*$perpage; $limit = "$limit,$perpage"; $goods = $db->GetRow('表','id,url,key_id,orig_id','orig_id if($goods){ forea
- js跨域获取数据
目录 一、通过jsonp跨域 2、通过修改document.domain来跨子域 ...在js中，我们直接用XMLHttpRequest请求不同域上的数据时，是不可以的。但是，在页面上引入不同域上的js脚本文件却是可以的，jsonp正是利...
- 网页信息抓取-如何获取延迟加载的网页数据
抓取网页信息时，有一个一直困扰我的问题，那就是有些网页的信息是动态生成的，网页载入后，接着执行js，js从服务器端获取数据后填充到网页，现在这种网页实现特别比较多，归功于ajax技术的使用了，用这种技术生成的...
- Python爬虫：异步数据抓取并保存到Excel
Python爬虫：异步数据抓取并保存到Excel 标签（空格分隔）： Python 爬虫 异步 环境：Python 3.6、Pycharm 2017.2.3、Chrome 61.0.3163.100 ======> 2018年3月3号 更新整理了一下代码 <====...
- JavaScript:全面解析Ajax跨站数据传输和iframe跨域名js调用
这方面的解决实践非常多，今天我就旧话重提把我所知道的通过几个应用场景来分别总结一下先说明一点：我说的某某域名在您的控制下的意思是这个域名下的网页由您来负责开发内部的JavaScript场景一：将bbs.xxx.com的...
- JavaScript:全面解析Ajax跨站数据传输和iframe跨域名js调用(6种方法)
先说明一点：我说的某某域名在您的控制下的意思是这个域名下的网页由您来负责开发内部的JavaScript 场景一：将bbs.xxx.com的页面用iframe嵌入到www.xxx.com的中，如何在iframe内外使用js通信 一级域名都是xxx.com ...
- 英雄联盟LPL比赛数据可视化详细教程,可视化的魅力,你值得拥有!!!
LPL比赛数据可视化 完成这个项目，我感觉我已经被掏空了，我几乎用尽了我会的所有知识 html+css+javascript+jQuery+python+requests+numpy+mysql+pymysql+json+ajax+flask+echarts 在这个过程中，并不是那么顺利，...
- 前端面试题
前端面试题汇总 ... 你做的页面在哪些流览器测试过？这些浏览器的内核分别是什么? 21 ... 21 Quirks模式是什么？它和Standards模式有什么区别 21 div+css的布局较table布局有什么优点？...img的alt与title有何异同？...
- Fiddler服务器数据抓包
在我们开发的时候，有时需要抓包，看一下服务器的返回数据，来校验自己请求的参数和返回的参数是否正确。当然，有时候也想抓一下别人的数据看下，比如微信。当然，如果别人的数据加密了，那你就蛋疼了，还要想着怎么...
- JavaScript:全面解析 Ajax 跨站数据传输和 iframe 跨域名 js 调用
关于跨域名问题还是问题么，这方面的解决实践非常多，今天我就旧话重提把...先说明一点：我说的某某域名在您的控制下的意思是这个域名下的网页由您来负责开发内部的JavaScript场景一：将bbs.xxx.com的页面用ifra...
- 【python数据挖掘课程】二十四.KMeans文本聚类分析互动百科语料
这是《Python数据挖掘课程》系列文章，也是我上课内容及书籍中的一个案例。本文主要讲述文本聚类相关知识，包括中文分词、数据清洗、特征提取、TF-IDF、KMeans聚类等步骤。 本篇文章为基础性文章，希望对你有所帮助...
- Jsoup一个简短的引论——采用Java抓取网页数据
转载请注明出处：... 概述 ...它提供了一套很省力的API，可通过DOM，CSS以及类似于jQuery的操作方法来取出和操作数据。jsoup的主要功能例如以下： 1. 从一个...
- 02数据采集与操作
•常用格式的本地数据读写 •Python的数据库基本操作 •数据库多表连接 •爬虫简介 •BeautifulSoup解析网页 •爬虫框架Scrapy基础 •Logistic 回归 •实战案例：获取国内城市空气质量指数数据 常用格式的本地数据...
- R极简教程-7：读取数据
读取数据往往是进行数据分析的第一步，数据读取的方式很多，就R语言而言，常见的有几种：Load已经存好的RData，读取文本文件，读取excel文件，读取数据库文件，抓取网络数据。
- 《php100 视频教程》笔记心得 张恩民 php100 (张迅雷闪击php系列)
PHP100视频教程2：PHP的数据类型与源码调试 PHP100视频教程3:常用PHP运算类型介绍与应用 PHP100视频教程4： PHP条件语句介绍与应用 PHP100视频教程5：PHP循环语句的介绍与应用 PHP100视频教程6：PHP数组的创建...
- 通过面试题目学习php之填空题
1、 判断一个变量是否存在的函数：isset 判断一个变量是否为null的函数：is_null 判断一个变量是否为空的函数：empty 销毁一个变量的函数：unset 2、$a =array(1,2);...3、$str = '...
- PHP爬取搜狗微信文章内容
近日前辈给我安排了一个任务，让我爬取搜狗微信上公众号的文章，
- 非主流图片小偷PHP源码 2015.zip
程序没有制作后台，全部广告和网站信息用JS和PHP文件空间，详细文件说明请看压缩包内介绍。 而且这次程序非常小巧，整个站加说明文件只有3MB大小，其中字体文件占用了2.3MB。实际网站程序只有600KB左右。 麻雀虽小...
- php学习小结1
php //学习小结[案例]//上一页/下一页链接//标题字符乱码 []后加---//文本不能换行 [style="word-break:break-all;word-wrap:break-word;"]//两模板名称统一 //网站没有即时更新的去除(缓存) 己作处理//链接不...
- PHP详细学习计划
PHP详细学习计划 第一阶段：（PHP+MySQL核心编程） PHP基本语法加强: ...PHP运行之时序图 ...PHP数据类型加强 PHP各种运算符加强 PHP三大流程控制加强 位运算(按位与、按位或、
- 什么是Node.js？
作者：Brett McLaughlin ，原文：What is Node? Node不是万能药！但的确能解决一些关键问题。 ...学习Node不是一件轻松事儿，但...因为当下Web应用开发中的诸多难题唯有JavaScript才能解决。 目录 1，专家们的警告！
- phpQuery—基于jQuery的PHP实现
Query的选择器之强大是有目共睹的，phpQuery 让php也拥有了这样的能力，它就相当于服务端的jQuery。 先来看看官方简介： phpQuery is a server-side, chainable, CSS3 selector driven ...
- C#入门必看实力程序100个
C#入门必看含有100个例字,每个例子都是针对C#的学习关键知识点设计的,是学习C#必须知道的一些程序例子,分享给大家，需要的可以下载
- 精通C语言指针
指针被誉为C语言的精髓、C本质上是加了一层语法糖的汇编，引进当时先进的函数，保留了汇编强大的地址直接访问功能 —— 指针，使其高效灵活。本课程是黄强老师对于指针的一次专题讲解，相信能给大家带来收获！ a:0:{}
- navicat简体中文版 绿色版 （64位）
解压后安装navicat，打开navicat执行PatchNavicat即破解成功。可以正常使用啦。
- MATLAB 2018a正式版【全平台官方包+图文教程+独创破解程序】
MATLAB R2018a 于16日正式发布，其中包含一系列 MATLAB/Simulink 的新功能和新产品，还包括 94 个其他产品的更新和修补程序。 解压密码：CSDN 其他说明见：https://www.52pojie.cn/thread-713048-1-1.html
- ASP.NET 开发课程 MVC5 入门篇
MVC全名是Model View Controller，是模型(model)－视图(view)－控制器(controller)的缩写，一种软件设计典范，用一种业务逻辑、数据、界面显示分离的方法组织代码，将业务逻辑聚集到一个部件里面，在改进和个性化定制界面及用户交互的同时，不需要重新编写业务逻辑。 主讲内容 第一讲 MVC5简介 第二讲 MVC 控制器 第三讲 视图 第四讲 模型 等课程 学会MVC5基本使用
- python实现扫描线填充算法，可以画凹多边形，采用matplotlib模块绘制图形
python实现扫描线填充算法，使用matplotlib模块将绘制的图形保存并画出来，可以画凹多边形
- OpenGL ES2.0基础
初级学习OpenGL ES2.0的课程，从无到有，从进本的函数讲起，每一课时都附带一个例子程序。深入浅出的讲解可编程管线技术，令人费解的文理，以及混合技术，各种优化技术：顶点缓冲区，索引缓冲区，帧缓冲区，介绍精灵的使用，并使用shader制作粒子特效。 掌握OpenGL ES2.0可编程管线，以及OpenGLES2.0的特性，带领初学者入门。