SpatialVID
270 万 clips 带相机位姿、深度的空间标注实拍集
- 数据类型
- YouTube 实拍视频;相机位姿;深度;动态掩码;结构化字幕
- 规模口径
- 271 万 clip、1.276 亿帧、7,089 小时;原始约 2.1 万小时;HQ 子集见正文口径
- License
- CC-BY-NC-SA-4.0(HF 页,下载须同意禁商用条款)
- 链接
- arxiv.org
内容与规模
南京大学与中科院自动化所等发布(2025-09,arXiv 2509.09676)。人工筛选 YouTube 33,443 段(21,789 小时,关键词 walk/tour/drone 等)→ 切 3–15 秒 → 美学/亮度/OCR/运动四项过滤 → 271 万 clip、7,089 小时,保留率约 33% [1]。
标注方式
改造的 MegaSaM 估相机位姿与深度,SAM2 出动态掩码,Gemini-2.0-Flash + Qwen3-30B 生成结构化字幕与运动指令 [1]。
口径冲突
原始时长一说 21,789 小时、一说 "超过 21,000 小时";HQ 子集一说约 37 万 clip、约 1,111 小时(论文 v2),另一说 1,146 小时(二手口径),以论文为准 [1]。
谁拿它训练
相机控制与世界模型研究(如相机条件微调)。
已知缺陷
HF 页标 CC-BY-NC-SA-4.0(非商用);源自 YouTube 野生视频,授权不明;位姿由模型估计而非传感器真值。
来源
相关卡片
卡片整理 2026-10-15。公司自报数据标“公司口径”;⚠️ 为未经独立核实。