研究人员:将可复现性转化为可用的服务

研究团队可以贡献专业能力、评估方法和可复现的配置。论文的商业检验标准是:另一个获授权的团队能否在声明的条件下评估并使用该成果。

更新日期

Computraq 正在筹备上线。这些指南介绍准备工作与拟议框架,并不表示服务、集成或合作关系已经上线或成立。

准备这些输入

  • 固定版本的代码、模型、数据集或经授权的数据访问说明。
  • 一种将探索性发现与已验收的任务性能区分开的方法。
  • 已知限制、允许用途和资源概况。

决策与顺序

  • 选择一个范围明确的任务,并记录复现其结果所需的证据。
  • 将公开报告与机密输入和未公开的观察结果分开保存。
  • 确定由谁维护该软件包,以及若其成为服务后由谁为用户提供支持。

首个有用的交付物

一份可复现性档案,包含方法、修订版本、验收示例、限制条件和可维护的执行方案。

需要防范的失败模式

研究成果并不自动构成生产保证。不要将实验得分套用到不同的运行时或任务上。

本文如何对应

阅读《The Independent Institution》第3、5、14节。上述角色与顺序是依据这些章节得出的实际准备工作;任何新提出的商业安排仍需有其自身确认的条款。

Computraq参与状态

Computraq处于发布前阶段。本指南解读《The Independent Institution》中提出的运营模式;它并不确立当前的托管、付费预订、提供商集成、合作关系或服务保证。请使用论文、原始幻灯片和意向表达表来准备具体的贡献。

来源与核验