java+selenium+phantomJS问题

2018-01-26 04:45:45 586 阅读 AI 写同款 · GEO 优化AI 选题数据监测一键分发 ›

Selenium+Phantomjs做Java爬虫背景以前，觉得爬虫是不稳定的，而且不被业界允许的，从来没想过会在实际的项目中使用。现在，由于各种突发情况，必须使用爬虫才能完成相应任务。起初，觉得爬虫不过是爬取网页，解析网页就可以了，比较简单，谁知一路心酸泪。查阅各种资料，Java相关的爬虫工具也比较多，由于时间关系，只简单看了下面几种，分析如下： HtmlUnit webmagic ... 阅读详情

开发爬虫刚接触phantomJS,在爬取一个http://www.hbeb.com/info_supply/2014-04-26/20140426171348.xml页面时，发现公司信息，联系人等时js加载出来的，可是使用java+selenium+phantomJS加载该页面却只能获取公司简介非js加载部分，图片为测试代码，求问是什么原因没有加载出js生成的部分？