omarsar0· @omarsar0 · X·· 3 小时前AI 评分
掌控自己的智能栈：从评测框架起步
Elvis Saravia 建议企业掌控自己的智能栈，先搭建评测框架（harness）和 evals，再逐步向下游投入。他指出开源模型运行与微调成本仍高，企业不必一次到位。自建 harness 可带来更多选择、解锁能力，并衡量下一步该在哪里投入；开源已成为智能时代生存与发展的路径。
各位，要掌握自己的智能技术栈！
这句话我永远说不够。你们企业的生存本身都取决于此。
但如果负担不起，也不必一次做完所有这些。我的意思是，运行和微调开放模型的成本仍然非常高昂。
如果想找个起点，我建议从评测框架入手。构建自己的评测体系，然后快速向下推进技术栈。
自建评测框架的最大好处是，它能为你提供选择空间、释放各项能力，并帮助你衡量智能技术栈的下一层还需要在哪里投入。
所以，尽管开源在旧时代是一种替代方案，但如今，在智能时代，它才是你生存和发展的方式。
来源：omarsar0 · x.com