logo
icon

集蜂云Docs

集蜂云
控制台
市场
设置
费用
采集器
运行与构建
输入与输出
构建
任务
发布
分享
开发
快速开始
创建采集器
输入
输出
采集队列
键值对
SDK
代码示例
数据-存储
数据-数据集
数据-键值对
数据-采集队列
代理
集成
webhook
企业微信
飞书
钉钉
邮箱
与其他采集器
收益
API

数据

什么是数据

数据存储了采集器与定时任务执行后采集到的具体数据内容,包括从图像、键值对到结构化输出的所有数据格式。

数据存储默认保留7天,过期的数据会自动清除。

数据存储类型

平台支持3种类型的数据结构存储,,可通过数据快速访问

数据集 : 存储网络抓取和数据处理的结果,每个采集器运行都会获得一个唯一的数据集。功能包括表格式数据可视化和多种导出格式(例如 JSON 和 CSV)。

键值对 : 存储各种数据类型,如JSON、图像、视频、字符串等。可通过平台访问,满足各种数据存储需求。

采集队列 : 管理采集器和任务爬取的URL列表,可查看具体采集与解析到的URL地址,明确采集爬取结果。