Home/AI for Science/FutureHouse / Edison Scientific
EN↔中文
Company

FutureHouse / Edison Scientific

Operator of the scientific-agent benchmarks LAB-Bench and BixBench

Overview

This profile was compiled from the AI training-data column cards (AI for Science); each column's data view is shown below under "Data profile" (in Chinese).

Data profile · AI for Science

FutureHouse / Edison Scientific

科学 agent 基准 LAB-Bench、BixBench 的运营方

做什么

运营科学 agent 基准:lab-bench(2,457 题、8 类 30 子任务,公开 80%、私留 20% 防污染)与 bixbench(53 场景、近 300 开放题,初版最佳模型约 17%)[1][2]。Edison Scientific 为其相关产品公司。

争议与口径

BixBench 的运营方同时是被评产品(Edison Analysis)的开发方,评测独立性受限,独立复核缺位,对照 validation-as-service 中真值生产方与基准制定方重合的问题[2]。FutureHouse 估计 HLE 文本型化学/生物题约 30% 答案可能有误(HLE 团队部分复现)。融资未查到。

  1. https://github.com/Future-House/LAB-Bench (2026-10-15)
  2. https://arxiv.org/pdf/2503.00096 (2026-10-15)
Last compiled: 2026-10-15