1 

软件

网页数据采集软件

主要功能简介：

1、支持客户端及服务端在信创环境下部署

2、满足网页端数据采集需求，且支持本地采集及云采集两种采集模式

3、系统管理：任务管理、账号管理、日志管理

4、支持通过模拟人工打开网页，点击按钮、点击链接、翻页循环、条件判断、Ajax 加载，鼠标移动到网页元素上，输入文本，下拉框项选择等多种网页浏览操作，可视化轻松制作采集规则流程，无须编写代码。

5、支持在云采集时，可设置定时自动启动任务进行增量采集，定期自动更新数据。

6、支持采集过程中对数据进行清洗处理操作，包括替换，正则表达式替换、正则表达式匹配、去除空格、添加前缀、添加后缀、日期时间格式化、Html转码等格式化处理方式，使数据更符合需求，更加规整，结构化。

7、支持预登录采集，可保存Cookie或自动填写账号密码实现需登录网站的数据抓取。

8、支持将采集结果直接导出为Excel、CSV、json、Mysql、达梦等多种格式或数据库。

9、支持接入第三方服务（如代理IP、验证码识别）。

10、支持附件下载（含图片、文件等）。

11、支持通过API方式采集数据实时推送至第三方或第三方系统自动拉取功能，实现自动化数据流转。

12、支持反爬机制应对：自动轮换 IP（需配合代理）、设置请求间隔、模拟浏览器头（User-Agent）等。

13、支持多文件下载时，字段可多行合并，文件名、链接、保存路径等按相同下标准确对应。

14、支持通过自定义脚本采集页面内容，灵活适配动态或特殊样式的网页结构。

套

1