Product
Zhipu CogVideoX
Zhipu's open-source video model, ~35M single-shot clips, paired with CogVLM2-Caption
Overview
- HQ: Beijing
- Funding: Zhipu listed in Hong Kong in 2026-01
- Links: https://arxiv.org/html/2408.06072
This profile was compiled from the AI training-data column cards (Video generation); each column's data view is shown below under "Data profile" (in Chinese).
Data profile · 视频生成
智谱 CogVideoX
智谱开源视频模型,约 35M 单镜片段,配套 CogVLM2-Caption
- 数据类型
- 网络视频;LAION/COYO 图像;稠密 caption
- 规模口径
- 过滤后约 35M 单镜片段、均长约 6s;另约 20 亿图像
- 客户
- 开源社区;清影用户
数据来源与规模
CogVideoX 技报(arXiv 2408.06072)称视频来自"网上可得的大部分视频",过滤后约 35M 单镜片段、均长约 6s(约 5.8 万小时为换算值);另有约 20 亿图像,来自 LAION-5B 与 COYO-700M 并经美学过滤。WebVid 仅用于评测 [1]。
加工
抽样 2 万条视频人工二分类,训练 6 个 Video-LLaMA 分类器,过滤剪辑感、静态、讲座、文字主导、屏幕截图、低质视频,测试准确率 0.89-0.99;再加光流与美学阈值。稠密 caption 流水线为 panda-70m 短 caption 加 CogVLM 逐帧(每 2 秒)描述,GPT-4 汇总,再约 5 万条数据微调 LLaMA2 加速,最终得到 cogvlm2-caption [1]。
伙伴与争议
huace、bilibili 为清影合作方,未证实涉及语料。智谱 2025-12 招股书据称承认训练数据可能含未经许可内容,该说法未回到原文核实,⚠️。无视频数据专项诉讼。主站另有公司页。
Related
Last compiled: 2026-10-15