权重

即日起，用户可以在MistralStudio上体验预览版API，模型权重将于本月底正式开放下载。

ReflectionAI表示，预计于本月稍后公布模型权重、技术报告及开发者工具。

后者通常是透过各自的应用程式介面（API）提供服务，使用者无法直接取得模型权重。

所谓开放权重模型，是指开发者可以下载模型权重，在自己的硬体上运行，并针对特定应用场景进行修改或微调。

3、尽管外部存储和长上下文窗口在事实查询方面具有实用性，但在涉及深度逻辑推理及隐式知识内化时存在局限，促使业界同样在探讨将经验直接编码并存储在模型权重（即内部参数）中的可行性。

①斯坦福大学、加州大学圣地亚哥分校等机构的研究者于2024年提出TTTLayers，将小型模型的权重用作隐藏状态，并在处理输入时持续更新，以利用更长序列中的信息。

大型模型通常需要被拆分到多颗芯片上运行，芯片处理完一部分任务后，需要频繁交换模型权重、中间结果和KVCache。

开源权重、能在自己机器上跑，正好补上了Jev留下的空位。

今年7月底，由奥地利一家数字权利组织牵头的opensource4o联盟发了公开声明，要求OpenAI以Apache2.0许可，开放2025年3月版本的4o权重。

部分全球基金提升中资股权重

2月2日，一份新请愿上线，希望OpenAI以非商业研究许可放出GPT-4o的权重和架构，让社区保存、研究它。