八爪鱼数据采集系统以完全自主研发的分布式云计算平台为核心,可以在很短的时间内,轻松从各种不同的网站或者网页获取大量的规范化数据。
【概括介绍】【概括介绍】
轻松从各种不同的网站或者网页获取大量的规范化数据
【基本介绍】
八爪鱼数据采集系统以完全自主研发的分布式云计算平台为核心,可以在很短的时间内,轻松从各种不同的网站或者网页获取大量的规范化数据,帮助任何需要从网页获取信息的客户实现数据自动化采集,编辑,规范化,摆脱对人工搜索及收集数据的依赖,从而降低获取信息的成本,提高效率。
【软件功能】
1. 金融数据,如季报,年报,财务报告, 包括每日最新净值自动采集;
2. 各大新闻门户网站实时监控,自动更新及上传最新发布的新闻;
3. 监控竞争对手最新信息,包括商品价格及库存;
4. 监控各大社交网站,博客,自动抓取企业产品的相关评论;
5. 收集最新最全的职场招聘信息;
6. 监控各大地产相关网站,采集新房二手房最新行情;
7. 采集各大汽车网站具体的新车二手车信息;
8. 发现和收集潜在客户信息;
9. 采集行业网站的产品目录及产品信息;
10. 在各大电商平台之间同步商品信息,做到在一个平台发布,其他平台自动更新。
【日志更新】
1、主要体验改进:
【任务列表】新增「定时任务」筛选条件,可筛选出所有定时或非定时任务
【任务列表】保存新增的列信息,下次登陆后依然保持
【任务列表】新增「批量清空定时配置」功能
【自定义模式】新增「自动重试」的开关设置,针对特定网页可关闭此选项,加快采集速度
【自定义模式】打开网页的执行前等待增加「随机1-30秒」选项,增强防封能力
【简易模式】可反馈提交想要的模板
【其他】客户端支持手机号登陆
2、Bug修复:
修复自定义模式下,固定元素列表、文本列表循环无拆分的问题
修复简易模式部分Bug
修复任务列表部分Bug
修复代理IP剩余量客户端与网站显示不一致问题
修复定时失效问题
提高客户端登陆稳定性