cz-benchmarks

工具与格式美国基准

Biohub/CZI 的单细胞评测开源包,初版 6 任务

内容与规模

Biohub/CZI 与 NVIDIA 共建的开源 Python 包,2025-10 宣布。初版含 6 个单细胞任务:聚类、细胞类型分类、跨物种整合、扰动表达预测、序贯排序、跨物种疾病标签迁移,每任务多指标;计划加入留出评测集、影像与变异效应预测 [1][2]。

真值来源与是否盲测

评测基于既有标注数据(如来自 CZ CELLxGENE Discover / Census 一类公共数据),属回顾式;留出集尚在计划中,当前不是盲测。

谁用它发布结果、运营方角色

面向虚拟细胞模型开发者的公共评测工具,运营方为慈善基金会(Chan Zuckerberg Biohub),同时也是相关数据与模型的提供方,评测方与参评生态有利益关联。

缺陷

任务偏标准化的单细胞分析,对扰动预测的可靠性仍受线性基线问题影响(见 PerturBench);采用度与第三方复现结果未核到。

来源

  1. https://biohub.org/?p=36696 (2026-10-15)
  2. https://www.rdworldonline.com/czi-and-nvidia-expand-virtual-cell-push-with-open-models-and-benchmarks/ (2026-10-15)

卡片整理 2026-10-15。公司自报数据标“公司口径”;⚠️ 为未经独立核实。