请教下,做个蜘蛛程序,爬淘宝的所有产品数据,有什么好的思路不

点击百度快照 2014-01-11 07:45:49
请教下,做个蜘蛛程序,爬淘宝的所有产品数据,有什么好的思路不。用什么语言合适?
...全文
340 8 打赏 收藏 转发到动态 举报
写回复
用AI写文章
8 条回复
切换为时间正序
请发表友善的回复…
发表回复
南瓜三三 2014-01-13
  • 打赏
  • 举报
回复
httpclient
jackson_fighting 2014-01-13
  • 打赏
  • 举报
回复
引用 4 楼 bill0605030109 的回复:
爬虫还真没试过。。是不是用httpclient这类的东西获取网页的html然后解析啊??
是的
teemai 2014-01-12
  • 打赏
  • 举报
回复
喜闻乐见。爬虫就那么点东西。这玩意重在分析
唐三角 2014-01-11
  • 打赏
  • 举报
回复
lz的问题让俺想起当年为了讨好一个做销售的妹子,给她把淘宝、阿里巴巴的她那个行业相关的产品和公司数据(包括公司名、法人、联系方式等等)全爬了一遍~~~~ 特别是对付那些防抓取的网站连webkit都用上了。现在都惊讶当年为啥那么有动力哈…… 人面不知何处去,桃花依旧笑春风~~~ 纯酱油路过……
  • 打赏
  • 举报
回复
爬虫还真没试过。。是不是用httpclient这类的东西获取网页的html然后解析啊??
Inhibitory 2014-01-11
  • 打赏
  • 举报
回复
喜闻乐见看到这样的成果。
ADC_VN 2014-01-11
  • 打赏
  • 举报
回复
楼主好大的胃口 用java还是Python?

81,092

社区成员

发帖
与我相关
我的任务
社区描述
Java Web 开发
社区管理员
  • Web 开发社区
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧