关于java爬虫获取相关商品信息怎么实现，有大佬来指点下迷津吗？

合肥-歪歪 2017-06-21 03:15:51

公司最近的一商城项目需要点击自己家的商品信息详情实时获取天猫，京东相关商品的价格，使买家能够直观的看到价格优势，这怎么实现啊，百度了大半天了，说爬虫可以实现，但网上又说天猫，京东都有反爬虫机制，没搞过爬虫相关的啊，求教大神！！！刚入行半年的萌新求教！！！

...全文

392 4 打赏收藏转发到动态举报

写回复

4 条回复

切换为时间正序

请发表友善的回复…

发表回复

大博博呀 2019-01-08

打赏
举报

回复

怎么说呢,这个你得好好的看一些博客

喜哥在线 2019-01-02

打赏
举报

回复

网上要用Java获取亚马逊的商品信息，根据条形码，我是不知道怎么去做呀！各位大神，请教一下，ok

z896709283 2017-07-14

打赏
举报

回复

爬虫的原理就是遍历网站上的所有url，解析HTML文本数据，从中获取你想要的数据。如果把入口的url比作树上的一片叶子，那么你的目标是就是遍历这棵树上所有根茎叶，因为他们都是互相连接的。至于怎么破反爬虫机制，你可以研究下，代理，模拟登陆之类的

weixin_36745070 2017-06-23

打赏
举报

回复

http://blog.csdn.net/csh624366188/article/details/8649972

🍅 硬核资料：关注即可领取PPT模板、简历模板、行业经典书籍PDF。🍅 技术互助：技术群大佬指点迷津，你的问题可能不是问题，求资源在群里喊一声。🍅 面试题库：由技术群里的小伙伴们共同投稿，热乎的大厂面试真题，持续更新中。🍅 知识体系：含编程语言、算法、大数据生态圈组件（Mysql、Hive、Spark、Flink）、数据仓库、Python、前端等等。加入社区：https://bbs.csdn.net/forums/4304bb5a486d4c3ab8389e65ecb71ac0。

🍅 硬核资料：关注即可领取PPT模板、简历模板、行业经典书籍PDF。🍅 技术互助：技术群大佬指点迷津，你的问题可能不是问题，求资源在群里喊一声。🍅 面试题库：由技术群里的小伙伴们共同投稿，热乎的大厂面试真题，持续更新中。🍅 知识体系：含编程语言、算法、大数据生态圈组件（Mysql、Hive、Spark、Flink）、数据仓库、Python、前端等等。网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

🍅 硬核资料：关注即可领取PPT模板、简历模板、行业经典书籍PDF。🍅 技术互助：技术群大佬指点迷津，你的问题可能不是问题，求资源在群里喊一声。🍅 面试题库：由技术群里的小伙伴们共同投稿，热乎的大厂面试真题，持续更新中。🍅 知识体系：含编程语言、算法、大数据生态圈组件（Mysql、Hive、Spark、Flink）、数据仓库、Python、前端等等。hon）**[外链图片转存中…(img-MbwUSH6G-1711997071709)]🍅 硬核资料。

🍅 硬核资料：关注即可领取PPT模板、简历模板、行业经典书籍PDF。🍅 技术互助：技术群大佬指点迷津，你的问题可能不是问题，求资源在群里喊一声。🍅 面试题库：由技术群里的小伙伴们共同投稿，热乎的大厂面试真题，持续更新中。🍅 知识体系：含编程语言、算法、大数据生态圈组件（Mysql、Hive、Spark、Flink）、数据仓库、Python、前端等等。网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

🍅 硬核资料：关注即可领取PPT模板、简历模板、行业经典书籍PDF。🍅 技术互助：技术群大佬指点迷津，你的问题可能不是问题，求资源在群里喊一声。🍅 面试题库：由技术群里的小伙伴们共同投稿，热乎的大厂面试真题，持续更新中。🍅 知识体系：含编程语言、算法、大数据生态圈组件（Mysql、Hive、Spark、Flink）、数据仓库、Python、前端等等。一个人可以走的很快，但一群人才能走的更远。如果你从事以下工作或对以下感兴趣，欢迎戳这里加入程序员的圈子，让我们一起学习成长！

51,412

社区成员

85,986

社区内容

发帖

与我相关

我的任务

javaspring bootspring cloud 技术论坛（原bbs）

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章