模型与 Benchmark板块首页
总览
AI for Bio benchmark 总览模型 × benchmark 配对矩阵训练数据从哪来:公开库、私有授权、自产 wet lab 与…模型索引:112 个模型按领域分组44 个 benchmark 的规模、更新与 wet la…
Benchmark 档案:核心 30 项
01 CASP02 ProteinGym03 MoleculeNet04 TDC05 PoseBusters06 CASF-201607 USPTO family08 Basenji/Enformer test set09 scIB10 GuacaMol11 ClinVar hold-out protocol12 DUD-E / LIT-PCBA13 CAGI14 PubMedQA15 CAMEO16 GUE + Nucleotide Transform…17 CAFA18 LAB-Bench / LABBench219 PMO20 CACHE21 DREAM5 / BEELINE / CausalB…22 CAPRI23 BioASQ24 虚拟细胞挑战赛与扰动预测评测25 RNA-Puzzles26 FLIP / FLIP227 Polaris / ASAP / OpenADMET28 Adaptyv competitions / Ben…29 BixBench30 PLINDER / PINDER / Runs N'…
Benchmark 档案:补充 14 项
31 FoldBench32 CrossDocked202033 PoseX34 AbBiBench35 FLAb / FLAb236 AIntibody37 TraitGym38 BEND39 RNAGym40 MotifBench41 BioML-bench42 BioMysteryBench43 Ginkgo GDPa144 FS-Mol
模型:结构/共折叠
AF2-Multimer:Google DeepMindAlphaFold 3BioEmu-2Boltz-1 / Boltz-1xBoltz-2:MIT、Recursion、Boltz P…Chai-1:Chai DiscoveryChai-2:Chai DiscoveryDiffDock:MIT CSAILESMFold2HelixFold-S1:BaiduIntelliFold-2:IntelliGen AIIsoDDE:Isomorphic LabsMassiveFoldNeuralPLexer3OpenComplex2OpenDDE:Aureka AI Research、Au…OpenFold3Pearl:Genesis Molecular AIProtenixRF3:University of Washington …RhoFold+ / DRfold2 / trRosett…RNAPro:NVIDIA、Stanford Univer…SeedFold:ByteDance SeedVina:Scripps Research
模型:小分子
ADMET-AIAQAffinity:SandboxAQBeacon:Inductive BioChemformer:AstraZenecaChemprop v2:MITEnchant v1 / v2ether0:FutureHouseKERMT:Merck & Co.、NVIDIAMiniMol:Valence LabsMolE:RecursionMoLFormer-XL:IBM ResearchNesso-1:Valence Labs、Recursio…ReaSyn v2:NVIDIA、KAISTREINVENT 4RetroDFM-RSaturn:EPFLTamGen:Microsoft Research AI …TerraBind:Terray TherapeuticsTxGemma:Google DeepMind、Googl…Uni-Mol2Uni-Mol3
模型:蛋白
AlphaProteoAMPLIFY:Mila、Polytechnique Mo…BindCraftBoltzGenChai-3:Chai DiscoveryClaude 蛋白设计研究DPLM-2:ByteDance Research、Nan…Dyno Psi-1 / Psi-PhiESM C:Evolutionary Scale、Chan…ESM3:Evolutionary Scale、Chan …EVOLVEproLa-Proteina:NVIDIALatent-X / X2:Latent LabsLucaOne:Alibaba Cloud、Sun Yat…Mosaic:Escalante BioPinal:Westlake UniversityPoET-2:OpenProtein.AIProfluent-E1:ProfluentProGen3:ProfluentProSST:Shanghai Jiao Tong Uni…Proteina-Complexa:NVIDIARFdiffusion2 / 3SaProt:Westlake University、We…SeedProteo:ByteDance SeedVenusREMxTrimoPGLM
模型:抗体
GerminalHCAbLM:Nona Biosciences、HBM H…IgGM / IgGM-FMJAM / JAM-2:Nabla BioOrigin-1:AbsciRFantibodytFold:Tencent AI for Life Sci…
模型:基因组/RNA
AlphaGenome:Google DeepMindAlphaMissense:Google DeepMindBioReasonBorzoi:Calico Life SciencesBulkFormerEvo 2:Arc Institute、NVIDIA、St…NTv3:InstaDeeppopEVE:Harvard Medical School…RIBOSPAN
模型:单细胞
AIDO Cell:GenBio AIC2S-ScaleCellFM:Sun Yat-sen University…Lingshu-CellscGPT / GeneformerscPRINT-2Stack:Arc InstituteSTATE:Arc InstituteTahoe-x1:Tahoe TherapeuticsTranscriptFormerX-Cell:Xaira TherapeuticsxTrimoSCPerturb / scFoundation
模型:分子生成
GenMol:NVIDIA
模型:文本与 agent
Biomni:Stanford University、Ph…Co-ScientistGPT-Rosalind:OpenAIIntern-SKosmos / Edison AnalysisMedGemma / Med-GeminiQuine:Microsoft ResearchRobin:FutureHouseSciReasonerTxAgent:Harvard Medical SchoolVERID:Google Research前沿通用大模型:Anthropic、OpenAI、Goog…

popEVE:Harvard Medical School (Blavatnik Institute)、Centre for Genomic Regulation (CRG), Barcelona

整理 2026-11-16 · 来源与可靠度标注见正文
本文目录
  1. 概况
  2. 做什么
  3. 报过的 benchmark
  4. 其他评测(不在 44 项内)
  5. 训练数据
  6. 湿实验验证
  7. 背景
  8. 怎么看
  9. 局限与注意
  10. 来源
  11. 更正记录

蛋白组范围错义变异致病性模型,分数跨基因可比,用于罕见病诊断排序。

基因组/RNA · 学术实验室 · 美国、西班牙 · 截至 2026-11-16

概况

字段 内容
名称 / 别名 popEVE;有歧义、不自动链接:EVE
家族 否(前作 EVE 无独立实体记录,不建家族条目)
机构 Harvard Medical School (Blavatnik Institute)、Centre for Genomic Regulation (CRG), Barcelona
机构类型 / 国家 学术实验室 / 美国、西班牙
模型类别 错义变异致病性预测(进化 + 人群约束)
领域 基因组/RNA(次领域:蛋白)
首次发布 (依据:medRxiv v1(10.1101/2023.11.27.23299062)) 站上只写「预印本 2023」;v1 原题与 v2(2025-03 改题)不同
其他里程碑 最早公开证据 (medRxiv v1);预印本 v1 (medRxiv v1);期刊上线 †(未核实)(期刊上线(收稿 2025-02-26、接受 2025-10-08))
最近更新 †(未核实),期刊发表:期刊发表(DOI 10.1038/s41588-025-02400-1);medRxiv v2 于 2025-03 改题;代码仓库最后提交 2024-07-01。此为最近一次有出处的事件,不代表此后没有更新
开放程度 代码:开放(GPL-3.0);权重:不明;代码开放,另有按基因查询的在线门户;权重是否单独发布未明确
状态 活跃:12 个月内有期刊发表;代码自 2024-07 无提交
报过的 benchmark 1 项计入(改协议 1)
湿实验验证 无
全站实体页 无(全站实体库未检出对应页面)
截至 2026-11-16

做什么

在进化变分模型之上加蛋白语言模型与人群约束(公共人群频率库与一项大型队列),用高斯过程把分数校准到蛋白组范围,使不同基因的变异能放在同一标尺上排序,适配「单个患者基因组里哪个变异最可能致病」的场景。与 AlphaMissense 同为错义预测,区别是本模型强调跨基因校准与罕见病诊断队列,后者提供全蛋白组预计算目录。

报过的 benchmark

按关系类型排列;每行标来源类型与出处。分数只在同一 benchmark、同一口径内有意义,见各 benchmark 页的当前排名。1 项计入(改协议 1)。

Benchmark 关系类型 计入 评测集 / 口径 来源类型 说明 出处
11 ClinVar hold-out protocol 开发方自报,协议有改动 是 — 自报 专家整理的 2019 与 2020 子集(每基因至少 5 良性 + 5 致病),指标 AUC;逐模型值只在扩展数据图 出处

其他评测(不在 44 项内)

  • 严重发育障碍家系队列(自建任务集,自报):逾 31,000 个家系;自报多数案例中致病变异排首位,识别数百个基因与上百个新候选基因,媒体转述称部分关联已被独立确认
  • 跨基因可比性自评(自建任务集,自报):论文自评该公开留出协议分辨力不足、区分不开头部模型,并以两个年份间排名变动为证

开发方称:把分数校准到蛋白组范围后,不同基因的变异可直接排序,在大规模发育障碍队列中多数案例把致病变异排在首位。

独立证据:未检出独立证据(未检出第三方在站内 benchmark 上的独立评测;新候选基因的外部确认属基因关联而非模型评测)

训练数据

类别 值 说明 出处
a 公开库 是 进化序列 MSA、公共人群频率库、一项大型人群队列的约束,以及公开 DMS 数据 出处
b 私有 / 授权 否 — 出处
c 自产 wet lab 训练数据 否 — —
d 仅用于验证的 wet lab 否 无自做湿实验;新候选基因的确认来自外部独立研究 出处

湿实验验证

无。开发方未报告湿实验验证,或本站未收录可核的记录。

背景

  • 机构:学术项目:一所美国医学院的研究所与巴塞罗那一家基因组研究中心合作,方向为进化序列模型与变异效应预测;另有一家英国基因组研究所为合作机构。非公司项目。
  • 融资:资助来自一家科技慈善基金会的神经退行性疾病网络、美国两家联邦科研机构的奖项,以及加泰罗尼亚政府的研究中心计划(据致谢与新闻稿,列表可能不全)。
  • 产品与合作:前作为同组的进化变分模型;分数正接入两个公开变异注释资源,并与两家儿童医院的罕见病协作网及一国家级基因组计划合作,临床部署仍需安全性与准确性验证。
  • 相关模型:AlphaMissense

怎么看

  1. ClinVar 协议上只有「相当」的定性结论、正文无 AUC 数字,不能据此说胜过 AlphaMissense。
  2. 变异标签与预测器之间可能互相污染,该协议的数字要结合基因级评估看。
  3. 队列结果更接近真实使用场景,但基因数与命中口径有多个版本,引用必须写明分母。
  4. CAGI 在全文中未出现,旧候选配对不成立。

局限与注意

  1. 逐模型 AUC 只在扩展数据图,正文未列。
  2. 队列基因数有两个口径,媒体口径与论文口径不同。
  3. 期刊上线日取自机构新闻稿,非文章页头,标部分核实。
  4. 代码自 2024-07 无提交,临床部署尚需验证。

来源

  1. 期刊论文 2025(期刊)
  2. 期刊全文(公开库)(期刊)
  3. 预印本 v1(预印本)
  4. 代码仓库(仓库)
  5. 机构新闻稿(新闻)

更正记录

以下为本轮核对中改过的字段,原值按记录照录。

字段 原 现 原因 出处 发现日期
first_release 预印本 2023(无日期) 2023-11-28(medRxiv v1) — 依据 2026-11-16
benchmarks_reported 候选配对 CAGI 非配对:全文未出现该 benchmark — 依据 2026-11-16

本文为个人研究笔记,结论基于成文时可获得的公开信息;带〔估算〕〔推断〕或⚠️的数字未经独立核实。