各模型的数据配方与供应商
一句话结论
- 只有一小撮模型写了数据账:中国是开源阵营(阿里通义万相 Wan(2.1 / 2.2 / 2.5)、腾讯 HunyuanVideo(1 / 1.5)、阶跃 Step-Video-T2V、Sand AI MAGI-1、智谱 CogVideoX、昆仑万维 SkyReels(V2 / A2)、Open-Sora(2.0))加字节 字节 Seaweed-7B / 字节 Waver / 字节 Seedance(1.0 / 2.0)与即梦 1.0;美国只有 Meta Movie Gen(O(100)M 视频)、NVIDIA Cosmos 世界基础模型(20M 小时→约 1 亿 clip)、Stability Stable Video Diffusion(LVD)(5.8 亿 clip)三份可核验的一手文档 [1][2][3][4]。
- 管线同构,规模差一个数量级:切镜→去水印字幕→美学/运动/OCR 过滤→嵌入去重与聚类重采样→自训 VLM 密集 caption。已披露规模从 智谱 CogVideoX 约 35M 片段、字节 Seaweed-7B 约 100M 片段,到 腾讯 HunyuanVideo(1 / 1.5) 1.5 约 8 亿片段(原始 >1000 万小时)[5][6]。
- 来源几乎不点名:中国仅 昆仑万维 SkyReels(V2 / A2)(自采 28 万+电影、80 万+剧集,约 620 万小时,授权状态未披露)、阿里通义万相 Wan(2.1 / 2.2 / 2.5)("内部版权来源+公开可访问数据")、字节 Seedance(1.0 / 2.0)与即梦 1.0("公开与授权库")有一句话口径;美国靠"授权路线"卖点的只有 Adobe Firefly Video 与 Adobe Stock 采购、Moonvalley / Marey,均为公司口径 [7][8]。
- 后训练数据量几乎不披露:中国只有 腾讯 HunyuanVideo(1 / 1.5) SFT 约 100 万、字节 Seaweed-7B SFT 约 70 万(5 万加权);偏好数据(DPO/RLHF)全行业只有流程没有对数 [5][6]。
- "底座同、方向税异":四家主流中国闭源模型的预训练底座高度相似,差异在可灵的影视+方言人声、Seedance 的多模态参考+漫剧、Vidu 的动漫+具身、PixVerse 的实时交互;有自有平台者(快手、字节)能内生差异化数据,无平台者(生数、爱诗)才是外部供应商的真实客户(推断,见下文方向差异)。
披露程度分层
按"能否据以估算数据规模与来源"分为四层:
| 层级 | 披露内容 | 模型 |
|---|---|---|
| L1 完整配方 | 规模、来源类别、过滤管线、captioner、SFT 均有数字 | Meta Movie Gen、NVIDIA Cosmos 世界基础模型、Stability Stable Video Diffusion(LVD)、腾讯 HunyuanVideo(1 / 1.5)、字节 Seaweed-7B、阿里通义万相 Wan(2.1 / 2.2 / 2.5)(缺绝对数)、昆仑万维 SkyReels(V2 / A2) |
| L2 管线+部分规模 | 管线细节清楚,规模或来源缺一 | 阶跃 Step-Video-T2V、Sand AI MAGI-1、智谱 CogVideoX、Open-Sora(2.0)、字节 Waver、字节 Seedance(1.0 / 2.0)与即梦 1.0、Lightricks LTX-Video / LTX-2、快手可灵 Kling(Koala-36M + Omni 技报) |
| L3 一句话口径 | 只有"公开+授权""商业安全"等公司表述 | OpenAI Sora / Sora 2、Google Veo(2 / 3 / 3.1)(模型卡+YouTube 报道)、Adobe Firefly Video 与 Adobe Stock 采购、Moonvalley / Marey、Synthesia(演员棚拍数字人数据)、百度 MuseSteamer 蒸汽机(媒体口径) |
| L4 无披露 | 技报或官方页未查到训练数据信息 | 生数 Vidu、爱诗 PixVerse、MiniMax 海螺 Hailuo、Luma AI(Ray)、Pika、Midjourney Video、Google DeepMind Genie 3、Black Forest Labs FLUX 3;美图、商汤、Higgsfield、xAI、Decart、HeyGen 未查到 |
说明:字节 Seedance(1.0 / 2.0)与即梦 2.0 的 arXiv 页面为模型卡性质,未见训练数据信息,不能因此把 2.0 归入 L2。
各模型公司用了哪几层数据
深色 = 该层是预训练主体或自建采集体系;浅色 = 少量或只用开源;灰 = 未用或未披露。悬停看规模口径,完整数字见下方数据表。
数据表
| 公司 | 模型 | 地区 | 网络/开源视频 | 自有平台 | 版权授权 | 合成/渲染 | 自建管线/captioner | SFT/偏好 | 新品类数据 | 配比公开 | 路线 |
|---|---|---|---|---|---|---|---|---|---|---|---|
| 快手 可灵 | Kling 1.x–3 / Omni | 中国 | 明确使用:Koala-36M 172K h(开源集,论文口径) | 未用 / 未披露 | 未用 / 未披露 | 少量或仅开源 | 主力层:三层治理+VTSS,无总量 | 未用 / 未披露 | 少量或仅开源 | 部分 | 仅 Koala-36M 与 Omni 技报给出管线轮廓,无主模型规模;UGC 与授权均未披露 |
| 字节 Seedance / 即梦 | Seedance 1.0 / 2.0 | 中国 | 未用 / 未披露 | 未用 / 未披露 | 少量或仅开源:称'公开与授权库',无明细(公司口径) | 未用 / 未披露 | 主力层 | 明确使用:SFT 几百类,三个 RM,无条数 | 少量或仅开源 | 部分 | 1.0 技报管线完整但规模未披露;2.0 页面无数据信息;抖音 UGC 为推断 |
| 字节 Seaweed-7B / Waver | Seaweed-7B / Waver | 中国 | 未用 / 未披露:约 100M 片段 ≈22 万 h(本文换算) | 未用 / 未披露 | 未用 / 未披露 | 明确使用:数百万条仿真视频 | 主力层 | 主力层:SFT 约 70 万(5 万加权) | 少量或仅开源:Waver 见过 200M+ 片段 | 公开 | 字节数字最多的两份技报;日处理 >50 万小时,无效片段率 42%→2.9% |
| 生数 Vidu | Vidu Q1–Q3 / Vidar | 中国 | 少量或仅开源:Vidar 用开源机器人数据约 75 万条 | 未用 / 未披露 | 明确使用:视觉中国专区(公司口径) | 少量或仅开源 | 未用 / 未披露 | 未用 / 未披露 | 明确使用 | 未公开 | 无训练数据技报;无平台,靠版权库、开源与具身合作方;多数线索为本地口径待核 |
| 爱诗 PixVerse | PixVerse V5/V6/C1/R | 中国 | 未用 / 未披露 | 少量或仅开源:1.5 亿用户记录是否训练未披露(推断) | 未用 / 未披露 | 未用 / 未披露 | 少量或仅开源 | 未用 / 未披露 | 少量或仅开源 | 未公开 | 仅'自研视频内容理解标注系统';R 系实时世界模型需动作条件数据(推断) |
| MiniMax 海螺 | Hailuo 01/02/03 | 中国 | 未用 / 未披露:Hailuo 02 数据约为前代 4 倍(公司口径) | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 少量或仅开源 | 未用 / 未披露 | 未用 / 未披露 | 未公开 | 无技报;诉讼指控含版权影视角色,非事实认定 |
| 阿里 通义万相 | Wan 2.1 / 2.2 / 2.5 | 中国 | 明确使用:'数十亿图像与视频',图像约为视频 10 倍 | 明确使用 | 未用 / 未披露 | 明确使用:亿级渲染文字图 | 主力层 | 明确使用:视频简单/复杂运动各数百万 | 少量或仅开源:2.2 视频 +83.2%(公司口径) | 公开 | '内部版权来源+公开可访问数据';4 步过滤砍约 50%,100 簇人工打分 |
| 腾讯 HunyuanVideo | HunyuanVideo 1 / 1.5 | 中国 | 明确使用:原始 >1000 万 h→约 8 亿片段(1.5) | 未用 / 未披露 | 未用 / 未披露 | 少量或仅开源 | 主力层 | 主力层:v1 SFT 约 100 万;1.5 CT 每任务 100 万 | 明确使用:v1 视频转音频 25 万 h 预训练/8 万 h SFT | 公开 | 规模披露最足的中国开源模型之一,来源未点名(称遵循 GDPR、含数据合成) |
| 阶跃 Step-Video-T2V | Step-Video-T2V | 中国 | 明确使用:20 亿视频-文本对 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 主力层 | 明确使用:SFT 前置池约 3000 万→人工精筛 | 未用 / 未披露 | 公开 | 八帧采样质量+光流+12 万簇平衡;与中广天择共建垂类模型非语料证据 |
| Sand AI MAGI-1 | MAGI-1 | 中国 | 明确使用:'数十 PB'原始视频与图像 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 主力层 | 未用 / 未披露 | 少量或仅开源 | 部分 | 来源与最终规模均未披露;自回归逐秒 caption;后训练数据量未查到 |
| 智谱 CogVideoX | CogVideoX / 清影 | 中国 | 主力层:过滤后约 35M 片段(≈5.8 万 h,本文换算) | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 主力层 | 未用 / 未披露 | 未用 / 未披露 | 公开 | '网上可得的大部分视频'+LAION-5B/COYO;2 万条标注训练 6 个分类器 |
| 昆仑万维 SkyReels | SkyReels V1 / V2 | 中国 | 明确使用 | 未用 / 未披露 | 主力层:自采 28 万+电影、80 万+剧集,约 620 万 h(授权状态未披露) | 少量或仅开源 | 主力层 | 明确使用:约 100 万 SFT 子集 | 少量或仅开源 | 公开 | 全表最直接的版权暴露点;SkyCaptioner-V1 人工核对准确率 76.3% |
| 潞晨 Open-Sora 2.0 | Open-Sora 1.x / 2.0 | 中国 | 明确使用:7000 万/1000 万/500 万三段样本 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 主力层 | 未用 / 未披露 | 未用 / 未披露 | 公开 | 总成本 $199.6K(约 4160 H200 GPU 天);未点名视频来源 |
| 百度 蒸汽机 | MuseSteamer | 中国 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 少量或仅开源:'亿级中文多模态数据清洗'(媒体口径) | 少量或仅开源 | 少量或仅开源 | 未公开 | 来源、规模、SFT 均未披露;中文音视频一体 |
| OpenAI Sora / Sora 2 | Sora / Sora 2 | 美国 | 少量或仅开源 | 未用 / 未披露 | 明确使用:Shutterstock 六年协议(公司口径) | 未用 / 未披露 | 少量或仅开源 | 未用 / 未披露 | 少量或仅开源 | 未公开 | '公开或已授权';2026-03-24 宣布停止 Sora app(关闭生效日未核),Disney 协议终止 |
| Google Veo | Veo 2 / 3 / 3.1 | 美国 | 未用 / 未披露 | 主力层:YouTube 约 200 亿视频的子集(CNBC 二手) | 少量或仅开源 | 明确使用 | 主力层 | 未用 / 未披露 | 明确使用:音视频联合训练(模型卡) | 部分 | 模型卡写多级 Gemini caption、去重、合成 caption;视频数量与小时数未披露 |
| Google Genie 3 | Genie 3 | 美国 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 明确使用:实时可交互世界,720p/24fps(二手) | 未公开 | 训练数据未披露 |
| Meta Movie Gen | Movie Gen | 美国 | 未用 / 未披露:O(100)M 视频+O(1)B 图像(论文口径) | 少量或仅开源 | 少量或仅开源 | 明确使用 | 主力层 | 主力层 | 主力层:音频预训练 O(1)M 小时 | 公开 | 美国闭源模型中数据账最完整:策展+LLaMa3-Video captioner+人工精修 SFT;论文未写来源构成 |
| Runway Gen-3/4 | Gen-3 / Gen-4 / Aleph | 美国 | 明确使用:近 4000 个 YouTube 频道(404 Media 泄露表,不等于全部入库) | 未用 / 未披露 | 明确使用:Lionsgate 片库定制模型(2 万+标题,二手) | 未用 / 未披露 | 少量或仅开源 | 未用 / 未披露 | 少量或仅开源 | 未公开 | 泄露表+片库合作并存;Getty/AMC 授权未查到 |
| Luma Ray | Ray2 / Ray3 | 美国 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 少量或仅开源 | 未公开 | 训练集、授权、后训练均未披露 |
| Pika | Pika | 美国 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未公开 | 训练数据、授权、诉讼均未查到 |
| Midjourney Video | Video V1 | 美国 | 少量或仅开源:答辩称需'数十亿公开图像' | 少量或仅开源:用户评分(图像侧,视频未披露) | 少量或仅开源 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未公开 | 与 Meta 技术授权(Midjourney 为授权方);被迪士尼等三家起诉 |
| Adobe Firefly Video | Firefly Video | 美国 | 未用 / 未披露 | 未用 / 未披露 | 主力层:采购均值 $2.62/分钟(Bloomberg 二手) | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 部分 | 公司口径:授权内容、不抓网络、不用客户内容;视频数据构成未披露 |
| Moonvalley Marey | Marey | 美国 | 未用 / 未披露 | 未用 / 未披露 | 主力层:授权小时数未披露 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 部分 | 自称 fully licensed,创作者直签;Troveo 称供大部分(Troveo 口径) |
| NVIDIA Cosmos | Cosmos WFM | 美国 | 明确使用:20M 小时原始→约 1 亿预训练 clip | 未用 / 未披露 | 明确使用 | 少量或仅开源:渲染合成占 4% | 主力层 | 明确使用:约 1 千万 clip 精调 | 主力层 | 公开 | 论文口径'专有+公网视频';被诉称使用 HD-VILA 等所指 YouTube 视频(未判决) |
| Apple 视频模型 | Apple(未命名) | 美国 | 少量或仅开源 | 未用 / 未披露 | 少量或仅开源 | 少量或仅开源 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未公开 | Shutterstock 授权(报道);被诉称用 Panda-70M;视频细节未披露 |
| Amazon Nova Reel | Nova Reel | 美国 | 少量或仅开源 | 未用 / 未披露 | 少量或仅开源 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未公开 | 仅笼统'授权/专有/开源/公开';2026-04 被 YouTube 创作者起诉 |
| Lightricks LTX | LTX-Video / LTX-2 | 全球 | 主力层 | 未用 / 未披露 | 明确使用:Shutterstock 研究授权(公司口径) | 未用 / 未披露 | 主力层 | 少量或仅开源 | 少量或仅开源 | 部分 | '大量公开数据辅以授权材料';LTX-2 开权重但数据不开放 |
| Stability SVD | Stable Video Diffusion | 全球 | 主力层:LVD 5.8 亿 clip/212 年(论文口径) | 未用 / 未披露 | 未用 / 未披露 | 少量或仅开源 | 主力层 | 明确使用:25 万高质量 clip 精调 | 少量或仅开源 | 公开 | LVD 来源为'长视频集合',未逐一列出也未释出数据 |
| Black Forest Labs FLUX 3 | FLUX 3 | 欧洲 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 未用 / 未披露 | 明确使用:视频预测占训练算力 95%+(公司口径,二手转引) | 未公开 | 图像/视频/音频/动作联合;数据来源与规模未披露 |
| Synthesia | Synthesia 数字人 | 全球 | 少量或仅开源 | 未用 / 未披露 | 主力层:付费演员棚拍+授权媒体(公司口径) | 未用 / 未披露 | 少量或仅开源 | 未用 / 未披露 | 未用 / 未披露 | 部分 | 演员按条分成,保留 provenance 文档;公开内容占比未披露 |
依据各公司论文 / 技术报告 / 官方博客;公司口径与二手已在表内标注。
热力图读法:0 = 未用或未披露,1 = 少量或只用开源,2 = 明确使用有规模,3 = 主体。"0"多数意味着"未披露"而非"没用";横向对比应看 level≥2 的格子,且每格都带口径标注。
中国模型配方表
值为各模型自述或技报口径;"未披露"指已查技报/官方页无,"未查到"指检索未见。
| 模型(公司) | 规模 / 来源 | 管线与 captioner | 后训练 | 证据 |
|---|---|---|---|---|
| 快手可灵 Kling(快手) | Koala-36M:36M 片段/约 172K 小时(论文表内时长与 clip 均长互相矛盾 ⚠️),与 Panda-70M 同源 YouTube 视频;Omni 称"互联网大规模挖掘";主模型规模未披露 [9][10] | 基础治理/时序质量/跨模态对齐三层;VTSS 打分;captioner 均 ~202 词 | 未披露;Omni 用专家模型合成编辑/多图参考样本 | 技报 + 开源集 |
| 字节 Seedance(1.0 / 2.0)与即梦 1.0(字节) | 称"公开与授权库、合法合规";规模未披露;I2V 占预训练 20%→持续训练 40% [11] | 切镜≤12s、裁水印字幕、质量与安全模型、语义去重;captioner 基于 Tarsier2(字节视频 captioner) | SFT"几百类"人工采集;RLHF 三个奖励模型;均无条数 | 技报 |
| 字节 Seaweed-7B / 字节 Waver(字节 Seed) | Seaweed 约 100M 片段(≈22 万小时,换算)+数百万仿真视频;Waver"见过 200M+ 片段" [12][13] | 6 级质量过滤,无效片段率 42%→2.9%;日处理 >50 万小时 | SFT 约 70 万(5 万加权);DPO 每 prompt 4 条人选 best/worst | 技报 |
| 生数 Vidu(生数) | 未披露;Vidar 预训练用开源机器人数据约 75 万条(公司口径) | 未披露 | 未披露 | 无技报 |
| 爱诗 PixVerse(爱诗) | 未披露;"自研视频内容理解标注系统"(媒体口径) | 未披露 | 未披露 | 无一手 |
| MiniMax 海螺 Hailuo(MiniMax) | Hailuo 02 数据约为前代 4 倍(公司口径);无绝对数 [14] | NCR 仅为训练效率层面 | 未披露 | 公司口径 |
| 阿里通义万相 Wan(2.1 / 2.2 / 2.5)(阿里) | 2.1 称"数十亿图像与视频";2.2 相对 2.1 图像 +65.6%、视频 +83.2%(公司口径);来源"内部版权来源+公开可访问数据";亿级渲染文字图合成 [15] | 基础维度砍约 50%;100 簇人工 1–5 分+专家模型;6 档运动分级 | 图像 top20% 数百万;视频简单/复杂运动各数百万;SFT/DPO 对数未披露 | 技报 |
| 腾讯 HunyuanVideo(1 / 1.5)(腾讯) | 1.5:原始 >1000 万小时→约 8 亿片段;图像 100 亿+池精选 50 亿;来源未点名 [5][16] | PySceneDetect、VideoCLIP 去重、k-means 约 1 万概念中心;captioner 输出 7 字段 JSON | v1 SFT 约 100 万;1.5 CT 每任务 100 万;RLHF 约 1 万 prompt;v1 视频转音频 25 万小时预训练 | 技报 |
| 阶跃 Step-Video-T2V(阶跃) | 约 20 亿视频-文本对、38 亿图文对 [17] | 8 帧采样质量+光流+12 万簇+CLIP 对齐;六级子集 | SFT 前置池约 3000 万→人工精筛;蒸馏约 9.5 万样本 | 技报 |
| Sand AI MAGI-1(Sand AI) | "多渠道,数十 PB";来源与最终规模未披露 [18] | 启发式+CLIP/DINOv2 去重+MLLM 过滤;自回归逐秒 caption | 技报可读部分未见 | 技报 |
| 智谱 CogVideoX(智谱) | 过滤后约 35M 片段(≈5.8 万小时,换算)+约 20 亿图像;"网上可得的大部分视频" [19] | 2 万条标注训 6 个分类器;CogVLM2-Caption | 未披露 | 技报 |
| 昆仑万维 SkyReels(V2 / A2)(昆仑万维) | Koala-36M、HumanVid+爬取;自采 28 万+电影、80 万+剧集≈620 万小时(授权未披露) [20] | TransNet 切镜;SkyCaptioner-V1 人工核对准确率 76.3% | 约 100 万 SFT 子集做镜头运动均衡;偏好对人工+自动 | 技报 |
| Open-Sora(2.0)(潞晨) | 7000 万/1000 万/500 万三段样本;总成本 $199.6K [21] | 美学/运动/模糊/OCR/抖动五滤 | 未披露 | 技报 |
| 百度 MuseSteamer 蒸汽机(百度) | "亿级中文多模态数据清洗"(媒体口径);来源规模未披露 [22] | "视频结构化描述语言" | 多目标强化学习,无量 | 媒体口径 |
美图 MiracleVision、商汤 Vimi 的训练数据构成未查到。
美国与全球模型配方表
| 模型(公司) | 规模 / 来源 | 管线与 captioner | 后训练 / 新模态 | 证据 |
|---|---|---|---|---|
| OpenAI Sora / Sora 2(OpenAI) | "公开或已授权";授权含 Shutterstock;规模未披露 [23][24] | 借鉴 DALL-E 3 式重 caption(二手转述,待核) | 未披露;Sora 2 音频同步 | 公司口径 |
| Google Veo(2 / 3 / 3.1)(Google) | 模型卡:音频/视频/图像训练;CNBC:约 200 亿 YouTube 视频的子集;具体数量未披露 [25][26] | 多个 Gemini 多粒度标注、语义去重、合成 caption | 音视频联合训练 | 模型卡 + 二手 |
| Google DeepMind Genie 3(DeepMind) | 训练数据未披露 | 未披露 | 实时可交互世界(720p/24fps 为二手) | 官方页 |
| Meta Movie Gen(Meta) | 视频 O(100)M 对 + 图像 O(1)B;来源构成未披露(论文未出现"licensed") [1] | 三级逐步变严子集;LLaMa3-Video 8B/70B captioner | 数百万候选→人工筛选+人工精修 caption 做 SFT;音频 O(1)M 小时;个性化合成配对 O(1)M | 论文 |
| Runway(Gen-3 / Gen-4 / Aleph) | 404 Media 泄露表:近 4000 个 YouTube 频道(表不等于全部入库);Lionsgate 定制模型 [27][28] | 未披露 | 未披露 | 泄露+公告 |
| Luma AI(Ray) / Pika | 均未披露 | — | — | 无 |
| Midjourney Video | 答辩称需"数十亿公开图像";视频未披露 | — | — | 诉讼答辩 |
| Adobe Firefly Video 与 Adobe Stock 采购(Adobe) | 公司口径:授权内容、不抓网络、不用客户内容;视频数据构成未披露 [29] | 未披露 | 未披露 | 公司口径 |
| Moonvalley / Marey | 自称 fully licensed,创作者直签;授权小时数未披露 [30] | 未披露 | 未披露 | 公司口径 |
| Lightricks LTX-Video / LTX-2(Lightricks) | "大量公开数据,辅以授权材料";Shutterstock 研究授权;规模未给 [31][32] | Siamese 美学模型、运动过滤、内部 captioner 全量重 caption | 最高美学内容精调;LTX-2 开权重但数据不开放 | 技报 |
| Stability Stable Video Diffusion(LVD) | LVD 约 5.8 亿 clip/212 年→LVD-F 1.52 亿 clip;来源"长视频集合",未释出 [3] | CoCa+V-BLIP+LLM 三路 caption | 25 万高质量 clip 精调;多视角用 15 万 CC 授权 3D 渲染 | 论文 |
| NVIDIA Cosmos 世界基础模型 | 约 20M 小时原始→约 1 亿预训练 clip;"专有视频数据集+公开互联网视频";渲染合成占 4% [2] | 切镜→运动→质量→VLM 过滤→VILA 13B caption→去重 | 约 1 千万 clip 精调;驾驶/机器人专项 | 论文 |
| Black Forest Labs FLUX 3(BFL) | 数据来源与规模未披露;视频预测占训练算力 95%+(公司口径,二手转引) [33] | — | 图像+视频+音频+动作联合 | 二手 |
| Synthesia(演员棚拍数字人数据) | 付费演员棚拍+公开内容+授权媒体(公司口径转述) [34] | 文档化 provenance | — | 公司口径 |
| Apple / Amazon Nova Reel | Apple:Shutterstock 授权(报道);Amazon:笼统"授权/专有/开源/公开" [35] | 未披露 | 未披露 | 报道 |
美国阵营分三条路线:(a) 平台自有池+抓取(Google 用 YouTube;Runway、NVIDIA、Apple、Amazon 被指抓取);(b) "干净/授权"(Adobe、Moonvalley、Lightricks 的 Shutterstock 授权、Synthesia 演员),卖点是商业安全与赔偿;(c) 以合作绕开训练数据问题(Runway–Lionsgate 定制模型 Lionsgate × Runway 片库合作、Meta–Midjourney 技术授权)。
方向差异
四家中国闭源模型(可灵、Seedance、Vidu、PixVerse)的产品方向来自 2026 年官方发布;下表为"能力→数据需求→来源结构"的推断,仅底座管线有一手技报支持,其余为学术旁证或推断。
| 模型 | 2026 方向 | 独有数据需求 | 数据来源结构(推断为主) |
|---|---|---|---|
| 快手可灵 Kling | 影视级+AI 导演;方言人声、数字演员、4K/60fps | 方言多人口型对齐;同一人跨场景多段带声视频;高码率母带 | 快手 UGC/直播可内生;缺专业多镜头序列与高码率原片,华策为产业股东、视觉中国"洽谈"对应此缺口 |
| 字节 Seedance(1.0 / 2.0)与即梦 | 原生多模态音视频;3 视频+9 图+3 音频参考;漫剧 | 跨视频同身份配对(Phantom-Data);多轨音频;角色设定图到视频 | 抖音/剪映/红果为推断的内生池;缺口在好莱坞与日本影视动画的合法供给(见 Disney / Universal / WBD v. MiniMax 与 MPA–字节 MOU) |
| 生数 Vidu | 内容线(动漫/剧)+ 具身世界模型 Vidar | 2D 动漫子集;多语言文字渲染;具身三层金字塔数据 | 无平台,缺口最大;视觉中国专区、具身合作方、开源机器人数据 |
| 爱诗 PixVerse | V6 通用;C1 影视垂类;R 系实时世界模型 | 动作条件游戏数据(键鼠与帧同步)、相机轨迹、分支剧情 | 无平台;1.5 亿 C 端用户记录是否用于训练未披露;游戏动作数据可买(Worldmodeldata)、可自录、可合成 |
三条判断(均为推断):
- 底座趋同:各家都在"通用视频预训练+自动清洗与密集 caption+人工精选 SFT+偏好 RLHF"范式内;2026 年又同时收敛到音视频同出、多镜头叙事、多模态参考三个新共性。这三类数据多半不是买来的,而是用算法从大视频池里构造(参考对靠跨视频检索、多镜头靠切镜重组、音视频三元组靠自动对齐过滤),池子越大越杂,能构造的越多,放大了有平台者的优势 新品类章。
- 谁需要买:字节 Seedance(1.0 / 2.0)与即梦 与 快手可灵 Kling 的差异化数据多半能从自有平台内生,需要的主要是合法性;生数 Vidu 与 爱诗 PixVerse 缺平台,是版权库、短剧/动漫版权方、游戏动作数据商、机器人数据公司的真实客户。
- PixVerse R 系与其余三家分叉:实时世界模型更接近 Skywork Matrix-Game、Hunyuan-GameCraft、Google DeepMind Genie 3 的需求,供应商是游戏公司和合成数据商,而非影视版权库。
供应商关系
下图只含有来源的"供方→客户"关系,按证据分级标注(一手 / 公司口径 / 二手)。"洽谈""股东"等非语料证据的关系在明细中注明。
谁在给谁供数:供应商 × 数据层 × 客户
每格列出该供应商在该层服务的模型公司;颜色深浅 = 证据强度(论文/官方一手 > 公司口径 > 二手)。多数数据商不点名客户,空白不等于没有。
数据表
| 供应商 | 客户 | 数据层 | 证据强度 | 细节 |
|---|---|---|---|---|
| Shutterstock | OpenAI Sora | 版权授权 | 公司口径 | 六年期训练数据协议(图像/视频/音乐/元数据);Murati 经 WSJ 确认含 Shutterstock |
| Shutterstock | Meta | 版权授权 | 二手 | 媒体报道的数据客户;10-K 不列名;视频模型占比未披露 |
| Shutterstock | 版权授权 | 二手 | 媒体报道的数据客户;10-K 不列名 | |
| Shutterstock | Amazon | 版权授权 | 二手 | 媒体报道的数据客户;与 Nova Reel 的对应关系未证实 |
| Shutterstock | Apple | 版权授权 | 二手 | 授权协议报道;视频用途未披露 |
| Shutterstock | Lightricks LTX | 版权授权 | 公司口径 | 2024-12 公告:首个使用 Shutterstock research license 的合作方,授权高清/4K 视频库训练 LTXV |
| Adobe Stock 贡献者与采购 | Adobe Firefly Video | 版权授权 | 二手 | 向摄影师定向征集(约 $3/分钟,均值 $2.62,最高 $7.25,Bloomberg);另有贡献者奖金 |
| Troveo | Moonvalley Marey | 版权授权 | 公司口径 | Troveo 称提供 Marey 所用数据的大部分;Moonvalley 公开材料只强调创作者直签 |
| Troveo(创作者未发布素材) | OpenAI / Google | 版权授权 | 二手 | Bloomberg 2025-01:未发布素材 $1–4/分钟;Troveo CEO 称所有视频模型公司均已合作或洽谈 |
| Lionsgate | Runway | 版权授权 | 公司口径 | 2024-09 公告:片库训练仅供 Lionsgate 内部使用的定制模型;2026-04 有进展停滞的未证实报道 |
| Disney | OpenAI Sora | 版权授权 | 公司口径 | 角色输出授权,非训练数据授权:2025-12 协议 $10 亿股权+200+ 角色生成授权;OpenAI 2026-03-24 宣布停止 Sora 后终止,投资未交割 |
| YouTube / Google 自有 | Google Veo | 自有平台 | 二手 | CNBC:约 200 亿视频库子集用于 Gemini 与 Veo 3;Google 称遵守与创作者和媒体公司的协议 |
| 视觉中国 | 生数 Vidu | 版权授权 | 公司口径 | 战略投资+专区;5.4 亿内容/7 亿训练数据为视觉中国口径 |
| 视觉中国 | MiniMax 海螺 | 版权授权 | 公司口径 | 战略投资;称已完成首次训练数据授权收益分配(媒体转述) |
| 视觉中国 | 可灵 | 版权授权 | 公司口径 | 2025-02 '洽谈',未见落地公告 |
| 视觉中国 | 即梦 / Seedance | 版权授权 | 公司口径 | 2025-02 '洽谈'列表之一,未见落地公告 |
| 视觉中国 | 通义万相 | 版权授权 | 公司口径 | 2025-02 '洽谈'列表之一,未见落地公告 |
| 视觉中国 | 爱诗 PixVerse | 版权授权 | 公司口径 | 2025-02 '洽谈'列表之一,未见落地公告 |
| 捷成股份 | 华为云视频大模型 | 版权授权 | 公司口径 | 2024-07 《视频大模型合作协议》;>10 万小时库、约 2 万小时已结构化;'20 万小时'口径不一致 |
| 捷成股份 | 字节 Seedance | 版权授权 | 公司口径 | 自述字节为版权客户之一,是否含训练未披露 |
| 华策影视 | 可灵 | 版权授权 | 二手 | 可灵产业股东;非语料授权证据 |
| 中广天择 | 阶跃 Step-Video | 版权授权 | 二手 | 共建视频垂类模型;非语料授权证据 |
| Rapidata | Google Veo 3.1(评测对象) | SFT/偏好 | 公司口径 | Rapidata 自行发布的公开评测偏好集(非采购/供货关系):Veo 3.1 约 7.4 万条反馈/约 2.3 万标注者,覆盖 Veo 3.1/2、Marey、Kling v2.1;非 Google 采购 |
| Claru | 匿名视频生成实验室 | SFT/偏好 | 公司口径 | 976,355 条四维人工质量评估案例;客户未具名 |
| Defined.ai | Google / Meta / Apple / Amazon / Microsoft | 版权授权 | 二手 | Reuters 转述的客户;长视频报价 $100–300/小时(卖方自述);视频模型对应关系未披露 |
| CuriosityStream | 8 家 AI 开发者(未具名) | 版权授权 | 公司口径 | 约 300 万小时库、可交付 >180 万小时;授权收入口径待核 |
| Midjourney | Meta | 版权授权 | 二手 | 2025-08 技术授权与研究合作,条款未披露;Midjourney 为授权方 |
| Synthesia 付费演员 | Synthesia 自有模型 | 版权授权 | 公司口径 | 绿幕棚拍,演员按条分成 |
| 光轮智能 Lightwheel | 生数 Vidar | 合成/渲染 | 二手 | 仅本地口径称合成数据来源,未找到公开一手来源,待核 |
合并自各公司论文致谢、官方博客、NVIDIA 案例页与融资稿。
要点:
- 美国授权主渠道是 Shutterstock:OpenAI Sora / Sora 2(六年协议)、Lightricks LTX-Video / LTX-2(研究授权)有公司口径;Meta、Google、Amazon、Apple 为媒体报道,10-K 不列名;2025 年其 Data, Distribution, and Services 分部 $203.3M,但 2025Q4 同比 -19%、2026Q2 同比 -16% [36]。Getty Images 称不将编辑内容授权用于训练,2025Q4 两笔多年期 AI 交易合计约 $65M,客户未具名。
- 创作者聚合与采购:Troveo AI 公司口径累计付出 >$20M、8M 小时授权视频;Moonvalley 称直签,Troveo 称供大部分,两方口径需区分 [37]。Adobe 向摄影师采购均值 $2.62/分钟(Bloomberg 二手),见 Adobe Firefly Video 与 Adobe Stock 采购。
- 片库定制与角色授权不等于训练授权:Lionsgate × Runway 片库合作 是仅供 Lionsgate 内部使用的定制模型;Disney × OpenAI 协议与 Sora 退出 是 200+ 角色生成授权(角色输出授权,非训练数据授权),OpenAI 2026-03 宣布停止 Sora 后终止、投资未交割 [38]。
- 中国侧"合规授权"仍是叙事:视觉中国 VCG 2025 年含 AI 训练数据的增值服务仅 4554.2 万元(占 5.9%),与可灵、即梦、通义、生数、爱诗为"洽谈"口径,战略投资生数与 MiniMax;捷成股份 与华为云签《视频大模型合作协议》,AI 业务未单列;华策影视、中广天择 与模型方的关系不是语料授权证据 [39]。
- 后训练供方:Rapidata 公开了 Veo 3.1 等模型的偏好集(约 7.4 万条反馈),那是 Rapidata 自行发布的公开评测偏好集,不是 Google 的采购或供货关系;Claru 的 976,355 条评估案例客户匿名 [40]。
- 合成侧:光轮智能 Lightwheel 的视频生成客户未披露,"供给生数 Vidar"仅有本地口径,待核。
口径冲突与未核实
| 说法 A | 说法 B | 采信 | 原因 |
|---|---|---|---|
| Seedance 1.0 技报是唯一写了数据管线的官方文件 | 字节 Seaweed-7B、字节 Waver 披露更多数字;Wan、Hunyuan、Step-Video、MAGI-1、SkyReels 也有管线 | B | 逐份技报核对 |
| Seedance 2.0 技报披露按主体/运动/场景/风格/音频建专门数据集 | arXiv 2604.14148 摘要页无训练数据信息,另有二手称其为模型卡 | 降为未核实 | 页面未见相关内容 |
| Seedance 1.0 来源为"自建多来源数据集" | 技报原话方向为"公开与授权库、合法合规" | B,并标公司口径 | 以技报措辞为准,无明细 |
| 可灵"3 万+企业客户" | 2026-06 媒体口径"近 5 万家" | 并存 | 不同时点 |
| MiniMax 案索赔上限 $75M | 每件作品法定赔偿最高 $150,000(willful 上限,起诉书未列总额) | 采信 150, 000/件为法定上限;75M 无来源,不写入 | 多家报道一致;见 版权诉讼与监管。2026-05 MiniMax 的管辖权与 12(b)(6) 驳回动议被驳回,案件继续(截至 2026-10,二手) |
| MiniMax 招股书承认训练数据可能含未经许可内容 | 仅见二手评论称招股书将诉讼列为风险因素 | 待回原文核 | 未取得招股书原文 |
| Cosmos 靠每天抓取 80 年时长视频(404 Media) | 论文:约 20M 小时,"专有视频数据集+公开互联网视频" | 并存 | 论文本身未承认抓取 YouTube,诉讼主张见 YouTube 创作者系列诉讼(DMCA 1201) |
| Amazon Nova Reel 约 310 万 YouTube 视频共享数据集 | 报道仅提及 HD-VILA-100M、HD-VG-130M 与 NVIDIA 案 3850 万 URL | 310 万不采信 | 未找到来源 |
| Troveo 7000+ 授权方、95% 独家 | 本次可确认 >20M、8M小时;2026 − 02另有2400 + 授权方、>5M 旧口径 | 保留前者待核 | 官网无法访问 |
| Troveo 是 Marey 全授权数据主要来源 | Moonvalley 公开材料只强调创作者直签 | 并存 | 前者为 Troveo 自述 |
| OpenAI Sora 关停时间点 | 2026-03-24(周二)宣布停止 Sora app / 另一二手称 app 2026-04-26 关闭、API 至 2026-09-24 | 宣布日采信,闭站日待核 | 多家报道称 OpenAI 未给出明确关闭日期;OpenAI 是否退出全部视频模型各报道口径不一(Disney 称其退出视频生成) |
| Runway 泄露表约 3,900+ 频道 | 多家报道"近 4000 个" | 近 4000 | 口径一致;表不等于全部入库 |
| 光轮智能向生数 Vidar 供应合成数据 | 未找到公开一手来源 | 待核 | 仅本地口径 |
| 捷成">20 万小时"授权华为云 | 2026-08 中证网:>10 万小时、约 2 万小时已结构化 | 后者 | 较新且具体;20 万小时不能当作已交付 |
| Getty 与 Lightricks 合作 | 仅二手转述 | 不采信 | 无一手证实 |
尚未覆盖:Vidu Q2/Q3、PixVerse V5/V6、Hailuo 03、Wan 2.5 无技报;Kling 3.0 无独立数据文件;Sora 技报与 Sora 2 system card 原文(官网 403);Adobe 视频模型官方数据声明;Luma、Pika、Higgsfield、xAI、Decart 训练数据;Marey 授权小时数。
来源
- Meta Movie Gen: https://arxiv.org/abs/2410.13720
- NVIDIA Cosmos: https://arxiv.org/abs/2501.03575
- Stable Video Diffusion: https://arxiv.org/abs/2311.15127
- 同 [1]–[3],对照中国开源技报见 [5]–[21]
- HunyuanVideo 1.5: https://arxiv.org/html/2511.18870
- Seaweed-7B: https://arxiv.org/html/2504.08685
- SkyReels-V2: https://arxiv.org/html/2504.13074
- Wan: https://arxiv.org/html/2503.20314
- Koala-36M: https://arxiv.org/html/2410.08260
- Kling-Omni: https://arxiv.org/html/2512.16776
- Seedance 1.0: https://arxiv.org/html/2506.09113 ;Seedance 2.0: https://arxiv.org/abs/2604.14148
- Seaweed-7B 同 [6]
- Waver: https://arxiv.org/pdf/2508.15761
- Hailuo 02: https://the-decoder.com/minimaxs-hailuo-02-tops-google-veo-3-in-user-benchmarks-at-much-lower-video-costs/
- Wan 同 [8];Wan2.2 README 镜像: https://gitee.com/lz98/Wan2.2
- HunyuanVideo v1: https://arxiv.org/html/2412.03603
- Step-Video-T2V: https://arxiv.org/html/2502.10248
- MAGI-1: https://arxiv.org/html/2505.13211
- CogVideoX: https://arxiv.org/html/2408.06072
- SkyReels 同 [7]
- Open-Sora 2.0: https://arxiv.org/html/2503.09642
- 百度蒸汽机: https://www.ithome.com/0/865/296.htm
- Sora 数据(Murati 受访): https://petapixel.com/2024/03/14/openais-cto-wont-discuss-training-data-for-ai-video-generator-sora
- Shutterstock–OpenAI: https://venturebeat.com/ai/shutterstock-signs-6-year-training-data-agreement-with-openai ;Sora 关停: https://www.wdwinfo.com/news-stories/openai-shuts-down-sora-ending-disneys-1b-deal/
- Veo 3 Model Card: https://storage.googleapis.com/deepmind-media/Model-Cards/Veo-3-Model-Card.pdf
- Google 用 YouTube(CNBC): https://www.nbcbayarea.com/news/business/money-report/google-is-using-youtube-videos-to-train-its-ai-video-generator/3896620/
- Runway 泄露表: https://404media.co/runway-ai-image-generator-training-data-youtube/ ;https://www.engadget.com/ai/ai-video-startup-runway-reportedly-trained-on-thousands-of-youtube-videos-without-permission-182314160.html
- Runway–Lionsgate: https://runway.com/news/runway-partners-with-lionsgate
- Adobe Stock 贡献者 Firefly FAQ: https://helpx.adobe.com/stock/contributor/help/firefly-faq-for-adobe-stock-contributors.html ;Adobe 采购价: https://www.maginative.com/article/adobe-is-paying-3-per-minute-for-videos-to-train-ai-model
- Moonvalley: https://venturebeat.com/ai/moonvalleys-marey-is-a-state-of-the-art-ai-video-model-trained-on-fully-licensed-data
- LTX-Video: https://arxiv.org/abs/2501.00103
- Lightricks–Shutterstock: https://kyodonewsprwire.jp/release/202412141694
- FLUX 3: https://winbuzzer.com/2026/07/28/black-forest-labs-launches-flux-3-behind-an-early-access-gat-xcxwbn/
- Synthesia: https://synthesia.io/features/avatars ;https://research.contrary.com/company/synthesia
- Amazon FMTI: https://crfm.stanford.edu/fmti/December-2025/company-reports/Amazon_FinalReport_FMTI2025.html ;YouTube 创作者诉讼: https://thenextweb.com/news/amazon-nova-reel-youtubers-dmca-lawsuit
- Shutterstock 财报: https://shutterstock.gcs-web.com/node/14806 ;Getty 10-Q: https://www.sec.gov/Archives/edgar/data/0001898496/000162828026055246/gety-20260630.htm
- Troveo: https://mediaandthemachine.transistor.fm/episodes/this-ai-company-has-paid-out-20m-to-content-owners
- Disney–OpenAI: https://krdo.com/news/2025/12/11/disney-is-investing-1-billion-in-openai-and-licensing-its-characters-for-sora/
- 视觉中国: https://www.huxiu.com/article/4867722.html ;捷成: https://www.cs.com.cn/ssgs/01/2026/08/05/detail_2026080510029510.html ;迪士尼致字节 C&D: https://www.axios.com/2026/02/13/disney-bytedance-seedance
- Rapidata Veo 3.1 偏好集: https://ai.gitcode.com/hf_mirrors/Rapidata/text-2-video-human-preferences-veo3.1/blob/main/README.md ;Claru: https://claru.ai/case-studies/video-quality-at-scale
本章涉及的实体
本文为个人研究笔记,结论基于成文时可获得的公开信息;带〔估算〕〔推断〕或 ⚠️ 的数字未经独立核实。