Mira Murati 发布 975B 开源模型 Inkling

前 OpenAI CTO Mira Murati 创办的 Thinking Machines Lab 今日发布首个开源模型 Inkling。这是一个混合专家（MoE）架构的多模态 transformer，总参数 975B，每次推理激活 41B，使用 Apache 2.0 许可，训练数据覆盖文本、图像、音频和视频共 45 万亿 token。

该公司称 Inkling 不是前沿模型，而是作为微调基础模型配合 Tinker 平台使用。同时预告了更小的 Inkling-Small（276B 总参数，12B 激活），权重将在测试后放出。模型卡与数据文档简短，数据来源仅披露为公开互联网与第三方数据集。

对开源社区，Inkling 填补了美国开源大模型的有力竞争者。

💡 为什么值得看前 OpenAI CTO 新公司发布 975B 参数 MoE 多模态模型，采用 Apache 2.0 许可，主攻微调基础。