软件星级:4分
标签: 数据采集
八爪鱼数据采集器Mac版是一款功能强大的数据采集器,能够各方面的数据,完全根据用户的需求而定。它采用的引擎很强,自定义模式,可单独只采集某方面的内容,适应能力超级好。
1、模板采集
模板采集模式内置上百种主流网站数据源,如京东、天猫、大众点评等热门采集网站,只需参照模板简单设置参数,就可以快速获取网站公开数据。
2、智能采集
八爪鱼采集可根据不同网站,提供多种网页采集策略与配套资源,可自定义配置,组合运用,自动化处理。从而帮助整个采集过程实现数据的完整性与稳定性。
3、云采集
由5000多台云服务器支撑的云采集,7*24小时不间断运行,可实现定时采集,无需人员值守,灵活契合业务场景,帮你提升采集效率,保障数据时效性。
4、自定义采集
针对不同用户的采集需求,八爪鱼可提供自动生成爬虫的自定义模式,可准确批量识别各种网页元素,还有翻页、下拉、ajax、页面滚动、条件判断等多种功能,支持不同网页结构的复杂网站采集,满足多种采集应用场景。
5、便捷定时功能
简单几步点击设置,即可实现采集任务的定时控制,不论是单次采集的定时设置,还是预设某一天或是每周每月的定时采集,都可以同时对多个任务自由进行设置,根据需要对选择时间进行多重组合,灵活调配自己的采集任务。
1、舆情监控
全方位监测公开信息,抢先获取舆论趋势
2、市场分析
获取用户真实行为数据,全面把握顾客真实需求
3、产品研发
强力支撑用户调研,准确获取用户反馈和偏好
4、风险预测
高效信息采集和数据清洗,及时应对系统风险
1、启动八爪鱼时,提示【无法打开八爪鱼采集器,因为无法验证开发者】/ 【打不开八爪鱼采集器,因为它来自身份不明的开发者】
解决方法 :进入【系统偏好设置】,打开【安全性与隐私】
选择【通用】,点击【仍要打开】即可。
2、启动八爪鱼时,提示【打不开八爪鱼采集器,因为Apple无法检查其是否包含恶意软件】
解决方法:同样的,我们需要进入【系统偏好设置】,打开【安全性与隐私】,选择【通用】,点击【仍要打开】即可。
如果【通用】中没有【仍要打开】按钮怎么办?进入【终端】,输入 sudo spctl --master-disable 后回车。
系统提示输入Password,输入Mac的登录密码后再回车。
执行命令行后,我们重新打开【系统偏好设置】的【安全性与隐私】,勾选为【任何来源】,然后再继续安装八爪鱼Mac客户端即可。
1. 自定义任务配置中增加列表相关的设置引导
2. 自定义任务配置中增加网页中没有要采集数据时的设置引导
3. 自定义任务配置中优化检测到Ajax后的设置引导
4. 自定义任务配置中优化自动识别结果的设置引导
5. 自定义任务配置中加入表单类是网页自动识别,识别率约80%+
6. 解决八爪鱼打开后,电脑长时间睡眠,重新唤醒后八爪鱼白屏问题
7. 解决无法自动更新的问题