网络矿工数据采集下载

weixin_39821228 2019-09-22 02:00:28

数据采集软件
相关下载链接：//download.csdn.net/download/ph20101010/9635519?utm_source=bbsseo

...全文

473 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

网络矿工数据采集器是一款面向所有用户使用的专业的数据采集软件，即适用于简单化配置操作，也适应针对复杂数据采集的能力,所见即可采。网络矿工独有的代理轮询采集机制，可有效的解决网站屏蔽问题，同时还提供了网络雷达功能，可用于互联网数据动态监控，一套软件的价格两套软件的功效，绝对是您的首选！需要此款工具的朋友们可以前来下载使用。功能介绍　　1、数据采集：以数据采集为核心提供了导航、多页、代理采集、跨

网络矿工数据采集软件是一款面向专业采集用户的采集软件，提供了数据采集、加工、发布一体化的解决方案，具备强大的采集能力，实现了可视化、智能化的规则配置，免去了传统规则配置的烦恼。需Microsoft .NetFramework2.0环境。　　网络矿工采集器围绕网站数据采集提供了丰富的功能，虽然功能众多，但使用却不复杂。网络矿工上手很容易。网络矿工主要包括了以下几个方面的功能： 1、数据采集：以数据采集为核心提供了导航、多页、代理采集、跨层采集、文件下载、编码解码、参数配置等功能，确保在数据采集时可应对各种复杂的采集配置需求； 2、强大的采集能力：支持各种编码、压缩采集，可实现U码转换、HTML代码转换，支持cookie、自定义HTTP Header，支持代理轮询、采集延时等多种设置，支持各种排重，具备断点续采能力； 3、可视化及智能：全面支持可视化配置，从导航、翻页及数据采集规则，都支持可视化的配置； 4、数据加工：提供了各种字符串的加工方式，可边采集边进行数据加工，同时也提供了专用的数据加工工具，可进行数据表合并、创建列、数据格式化等多种方式，

网络矿工采集任务配置演练图文教程

数据采集软件

网络矿工是一款基于.Net平台的开源软件，也是网站数据采集软件类型中唯一一款开源软件。尽管开源，但并不会影响软件功能的提供，甚至要比一些商用软件的功能还要丰富。当前提供的主要功能如下： 1. 多任务多线程数据采集，支持POST方式； 2. 可采集Ajax页面； 3. 支持Cookie，支持手工登录采集数据； 4. 支持采集事务； 5. 支持数据自动及手工导出，导出格式为：文本、Excel、Access、MSSql、Mysql等； 6. 支持在线发布数据； 7. 支持导航网址的采集，导航深度不限； 8. 支持自动翻页； 9. 支持文件下载，可以采集图片、Flash及其他文件； 10. 支持采集结果数据的加工，包括替换、附前缀后缀、截取等操作，支持正则； 11. 采集网址定义不仅支持基本参数定义，也可外接字典数据作为网址参数，进行数据采集； 12. 支持一个任务多实例运行； 13. 提供计划任务，计划任务支持Soukey采集任务、外部可执行文件任务、数据库存储过程任务； 14. 计划任务执行周期支持每天、每周及自定义运行间隔；最小单位为：半小时； 15. 支持任务触发器，即可在采集任务完成后，自动触发执行其他任务（包括可执行文件或存储过程）。 16. 完善的日志功能：系统日志、任务执行日志、出错日志等等； 17. 系统提供MINI浏览器可用于捕获Cookie或POST数据。 ........ 授权协议BSD 代码更新：2013-05-02 版本1.61

下载资源悬赏专区

12,807

社区成员

12,342,703

社区内容

发帖

与我相关

我的任务

其他技术论坛（原bbs）

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章