信息采集的难点是什么?数据比较复杂,形式多样;下载后的难点又是什么?数据管理。
网络信息采集大师(NetGet)的主要功能,就是解决这两个问题。一般数据采集是有针对性的,通常是针对某个或者某些网站,采集某些类别的数据。比如采集几个网站的人才招聘信息,产品信息,供求信息,公司库信息等等。对这些网站的数据结构进行简单分析后,设置相应的采集规则,就可以把你想要的数据统统下载到本地。本软件支持分类,分类的目的是数据便于管理,便于统计分析。
现有功能简介:
1. 本软件可采集任何类型的网站信息。包括htm ,html, ASP , JSP , PHP等。采集速度快,信息一致准确。支持网站登录。
2. 分类。分类的目的,是方便地管理数据。可以添加,删除,修改分类。分类数据库有三个最新备份,放在目录 \files下,为数据安全提供了可靠保障。
3. 任务。任务即采集任务。表现为相应的采集规则。任务可以随时开始,暂停和停止。本软件支持多任务,即同时采集不同的数据。
4. 数据导出。采集的数据可导出为三种方式:文本,Excel和数据库。可根据自己的需要,导出为不同的格式。
5. 数据库。目前经过测试的有Access和SqlServer数据库。数据库功能包括导入数据库和数据查询。
6. 菜单功能扩展。一般是为了扩展数据分析功能。比如您自己开发了一个数据库软件,这个软件用来分析采集的数据,可把软件挂接在本软件上,方便使用。
7. 日志。记录每个重要的操作。比如对类别的维护,对任务的维护等等。可对日志进行清理和备份。
新增功能:
1.文件下载功能。
2.数据库自定义接口,数据库自动去重。
3.软件在线升级。
4.消息提醒,随时获取最新信息。 |