本软件是由七道奇为您精心收集，来源于网络转载，软件收录的是官方版，软件版权归软件作者所有，本站不对其观点以及内容做任何评价，请读者自行判断，以下是其具体内容：
　　网络矿工数据采集软件（以下简称:网络矿工）是一款强盛的专业数据采集器,通过用户自定义配置,可快速的将网页数据构造化存储到本地,并可输出到数据库、公布到网站.网络矿工可利用于数据发掘、垂直搜索引擎、网站信息聚合、企业口碑监测、舆情信息监测等范畴.

网络矿工努力于数据采集范畴,并为数据采集工作供应了完好的工具,不但可以实现数据采集,同时还供应了数据加工编辑工具,以实现采集数据的加工操作,按照用户的数据利用需求完善数据质量,直接输出高质量数据.

主要功效以下:

1.多任务、多实例、多线程运行机制,一个任务可反复履行,便于快速采集;

2.多级导航,导航翻页、无限极导航,导航中间层支持翻页法则;

3.自动翻页,支持asp.net翻页辨认,支持多种翻页法则,可自动辨认 __Dopostback;

4.支持跨层采集,可对导航页举行采集实现跨层数据采集归并,数据归并1对N关系;

5.支持多页采集,支持多页采集,实用于TAB页情势的网页数据采集归并;

6.网址参数支持数字、字母、日期、字典及外部参数 快速便捷定义采集网址实现大数据量采集;

7.采集、加工一体化,供应多种数据加工法则,晋升采集数据的质量;

8.支持多种数据库,支持excel、txt格局导出,支持Access、Mysql、MsSqlserver;

9.支持在线公布数据,可将采集数据公布到网站;

10.海量采集,可举行大数据量的采集,并不影响采集性能,采取直接入库方法;

11.支持可视化采集,支持XPath可视化采集,所见即所得;

12.支持多种网页编码及压缩采集,支持多种网页编码及Gzip,Deflate压缩采集;

13.可举行图片、文件下载,支持图片文件下载,存储本地;

14.支持智能化采集,可自动辨认网页标题、正文、公布时间;

15.支持翻页采集数据归并,支持翻页数据归并,典型利用采集带有翻页的文章内容;

16.支持Url Base64编码,支持网址Base64编码;

17.支持Http Header自定义采集,可模拟网络爬虫,针对复杂的网站可实现自定义模拟真实恳求;

18.支持多 sql 语句数据插入,支持多sql语句的数据插入;

19.支持自我导航采集,自我导航实现了一个页面数据的1对N的关系;

20.支持采集延时、代理,支持采集延时、代理及代理轮询采集;

21.采集法则配置支持通配符,越发机动的配置采集法则,晋升采集质量;

22.支持网址排重,辨认已经采集的网址无需再采;

23.支持U码辨认,可自动辨认网页U码,转换成中文;

24.供应OCR辨认,可将图片辨认成文本,仅支持英文和数字的辨认;

25.支持多种按时采集战略,机动的按时筹划可满意全部需求;

26.供应多种工具帮助采集法则配置解析,供应网址编/解码、正则解析、Mini浏览器等多种工具;

27.支持采集法则导入、导出,采集法则导入导出便利数据迁移;

28.供应HTTP嗅探器,可帮助解析探测真实的网址;

29.全面支持可视化采集,支持可视化导航配置;

30.支持图片水印功效;

31.支持导航、多页参数配置,可通过参数提交的方法举行导航或多页地址的获得;

32.支持ASP.Net翻页函数辨认;

普通下载
普通下载
普通下载