AISLE
AISLE(AI Scientists’ Last Exam)是 Data & Environment 项目孵化的第一个 verifier,用于对齐科学 AI 的任务、环境及评测依据。项目面向未来公开评测,当前尚未公开发布。
与整体框架的关系
Data & Environment 描述更广的数据与环境能力。AISLE 是这些能力在具体评测项目中的组合与验证;后续项目是否复用 AISLE 中的组件,需要有明确设计和实现依据。
在哪里协作
- 实现与开发任务:MasterAI-EAM/AISLE(私有)。
- 跨项目架构关系:ByteInfra 的架构文档和相关 Issue。
- 已发布站点展示项目定位;实现细节和私有来源证据保留在有权限的仓库。
待确认
- 项目技术负责人及架构审阅人。
- 哪些验证能力适合独立复用,哪些属于 AISLE 的项目内部实现。
- 发布与验证状态的证据入口。
不能用某个 PR 已合并推断整个评测项目已经上线、实验已经完成或成果已经发布。