八爪鱼采集器免费版功能
简单来讲,使用八爪鱼可以非常容易的从任何网页精确采集你需要的数据,生成自定义的、规整的数据格式。八爪鱼数据采集系统能做的包括但并不局限于以下内容:
1. 金融数据,如季报,年报,财务报告, 包括每日最新净值自动采集;
2. 各大新闻门户网站实时监控,自动更新及上传最新发布的新闻;
3. 监控竞争对手最新信息,包括商品价格及库存;
4. 监控各大社交网站,博客,自动抓取企业产品的相关评论;
5. 收集最新最全的职场招聘信息;
6. 监控各大地产相关网站,采集新房二手房最新行情;
7. 采集各大汽车网站具体的新车二手车信息;
8. 发现和收集潜在客户信息;
9. 采集行业网站的产品目录及产品信息;
10. 在各大电商平台之间同步商品信息,做到在一个平台发布,其他平台自动更新。
八爪鱼采集器免费版特色
模板采集
模板采集模式内置上百种主流网站数据源,如京东、天猫、大众点评等热门采集网站,只需参照模板简单设置参数,就可以快速获取网站公开数据。
智能采集
八爪鱼采集可根据不同网站,提供多种网页采集策略与配套资源,可自定义配置,组合运用,自动化处理。从而帮助整个采集过程实现数据的完整性与稳定性。
云采集
由5000多台云服务器支撑的云采集,7*24小时不间断运行,可实现定时采集,无需人员值守,灵活契合业务场景,帮你提升采集效率,保障数据时效性。
API接口
通过八爪鱼API,可以轻松获取八爪鱼任务信息和采集到的数据,灵活调度任务,比如远程控制任务启动与停止,高效实现数据采集与归档。基于强大的API体系,还可以无缝对接公司内部各类管理平台,实现各类业务自动化。
自定义采集
针对不同用户的采集需求,八爪鱼可提供自动生成爬虫的自定义模式,可准确批量识别各种网页元素,还有翻页、下拉、ajax、页面滚动、条件判断等多种功能,支持不同网页结构的复杂网站采集,满足多种采集应用场景。
便捷定时功能
简单几步点击设置,即可实现采集任务的定时控制,不论是单次采集的定时设置,还是预设某一天或是每周每月的定时采集,都可以同时对多个任务自由进行设置,根据需要对选择时间进行多重组合,灵活调配自己的采集任务。
全自动数据格式化
八爪鱼内置了强大的数据格式化引擎,支持字符串替换、正则表达式替换或匹配、去除空格、添加前缀或后缀、日期时间格式化、HTML转码等多项功能,采集过程中全自动处理,无需人工干预,即可得到所需格式数据。
多层级采集
很多主流新闻、电商类的网站,里面包含一级商品列表页,也包含二级商品详情页,还有三级评论详情页面;不论网站有多少层级,八爪鱼都可以不限制层级的采集数据,满足各类业务采集需求。
八爪鱼采集器免费版安装步骤
在本站下载最新安装包,一键安装,完成即可使用
八爪鱼采集器免费版更新日志
v8.7.0绿色版
采集与数据导出
新增“自动导出到本地文件”功能。本地或云采集完成后,自动导出已采集的数据文件(Excel、Csv、Html、Json、Xml)到本地电脑
新增本地采集“等待运行”状态。批量设置本地定时自动采集的时候,超出同时启动任务数限制时自动进入排队等待采集
新增查看本地采集历史采集信息。点击任务列表的“电脑图标”可以查看最近一次的采集历史信息
优化手动导出到数据库配置流程和交互
自动入库工具
新增入库计划批量操作(启/停、删除、设置)
新增入库信息字段内容(任务名称、数据库类型、执行周期)
新增支持直接修改入库计划配置信息
新增错误日志提醒小红标
优化入库工具操作交互界面
企业版本协作
企业版主账号通过任务列表“筛选器”查看企业成员账号任务状态
企业版主账号支持管理企业成员账号的任务:启/停止、复制、定时、导出数据等
其它
新增触发器条件“为空”的判断
修复部分任务无法采集、列表无数据的故障
修复本地采集日志信息重复和顺序错乱的问题
优化修复其它已知bug问题