ChainCatcher 消息，开源 AI 研究组织 Nous Research 在社交媒体上发文宣布在去中心化 AI 网络项目 Bittensor（TAO）上建立子网，旨在为开源模型提供新的评估系统。
Nous Research 表示，传统的基准测试严重依赖于公共数据集，这些数据集很容易被利用，并且常常会导致分数看起来很高，但却掩盖了真正的模型功能，误导研发者进行毫无意义的分数追逐。
据悉，Cortex 子网是由 GPT-4 不断生成的新鲜合成数据的动态来源，它允许使用新鲜且不可预测的高质量数据来测试模型，并确保就哪个模型最接近地反映 GPT-4 的性能达成公平和准确的共识。这个新系统旨在通过 Bittensor 内置的激励结构来庆祝和奖励真正满足用户需求的公共开源模型的创建者。