集蜂云 是一个可以让开发者在上面构建、部署、运行、发布采集器的数据采集云平台。
它提供完善数据采集平台基础能力,包括海量任务调度、运行日志、PB 级的数据存储、代理、数据统计与监控告警等功能。
平台拥有数千采集节点,基于 docker 云技术,保证每次运行的资源分配,即使面对突发大规模数据采集需求,也能轻松应对,省去采购硬件成本。
由于大部分数据采集无需 24 小时运行,平台按采集器运行时长付费,每次运行可能低至 1 分钱,帮您节省服务器、宽带以及运维成本。
开发者也可以将采集器发布到市场给其他人使用,从而带来被动收入。
学习如何在市场选择、运行采集器,或构建属于您自己的采集器。
从市场选择 : 市场内包含数量众多、功能各异的采集器。这些采集器由官方或其他开发者提供并维护。 直接使用它们快速开始采集数据。
构建您自己的采集器 : 学习如何构建自己的采集器,包含如何定义采集器的输入与输出,如何采集并处理数据,如何发布并更新版本。
进阶技巧 : 这里包含一些集蜂云的高级技巧。包括如何使用webHook等功能集成到已有系统等。