CrawlScript-bin-beta0.1 JAVA的爬虫脚本语言下载

weixin_39821620 2019-09-01 09:30:28

官方网站和资料： http://crawlscript.github.io/

网络爬虫脚本语言 CrawlScript:
网络爬虫即自动获取网页信息的一种程序，有很多JAVA、C++的网络爬虫类库，但是在这些类库的基础上开发十分繁琐，需要大量的代码才可以完成一个简单的操作。鉴于这个问题，我们开发了CrawlScript这种脚本语言，程序员只需要写2-3行简单的代码，就可以制作一个强大的网络爬虫。同时，CrawlScript由JAVA编写，可以在其他JAVA程序中被简单调用。
相关下载链接：//download.csdn.net/download/ajaxhu/6851591?utm_source=bbsseo

...全文

17 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

官方网站和资料： http://crawlscript.github.io/ 网络爬虫脚本语言 CrawlScript: 网络爬虫即自动获取网页信息的一种程序，有很多JAVA、C++的网络爬虫类库，但是在这些类库的基础上开发十分繁琐，需要大量的代码才可以完成一个简单的操作。鉴于这个问题，我们开发了CrawlScript这种脚本语言，程序员只需要写2-3行简单的代码，就可以制作一个强大的网络爬虫。同时，CrawlScript由JAVA编写，可以在其他JAVA程序中被简单调用。

CrawlScript-bin-beta0.3 ，CrawlScript语言0.3beta版，无需配置。 JAVA的爬虫脚本语言，用几行代码即可实现对整个网站的爬取，直接执行demo中的代码，可以获取整个新华网的所有的新闻（从网页中提取出的干净的新闻）。

离线浏览器,版本不是很新,但还是可以把网站都DOWN下来

CrawlScript语言在beta0.3版本中集成了整站爬虫的功能，只需要简单几句，就可以完成对整站的爬取。首先下载CrawlScript beta 0.3: CrawlScript beta 0.3版及demo下载。下载后解压，在CrawlScript-bin文件夹中有一个demo.js，这个代码虽然只有几行，但是实现了对整个新华网的新闻正文的爬取和抽取，一个完整的网络爬虫。...

网络爬虫（又被称为网页蜘蛛，网络机器人），是一种按照一定的规则，自动的抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁，自动索引，模拟程序或者蠕虫。相信很多人都用JAVA或者C++写过网络爬虫，但是都存在代码过于复杂、爬虫难以维护的问题。也有很多人使用脚本语言编写过网络爬虫，但是这些脚本很多时候不妨变嵌入大型的系统，或者语法怪异，难以上手。我们教

下载资源悬赏专区

13,654

社区成员

12,578,476

社区内容

发帖

与我相关

我的任务

其他技术论坛（原bbs）

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章