Signal YCurated AI News
更新于 11/5 20:4061 个信源

EmbeddingGemma 2:嵌入模型为何应坚持开源许可

通用 AI10/7 04:37Simon Willison查看原文 ↗
摘要

Simon Willison 就 EmbeddingGemma 2 采用 Apache 2.0 许可发表评论,认为嵌入模型不适合闭源托管独占,因为存量向量会形成对厂商的锁定,开放权重是用户的必要退路。

核心要点
  • EmbeddingGemma 2 以 Apache 2.0 许可发布,作者对此明确表示认可。
  • 嵌入模型的典型用法是对成千上万乃至数百万条内容计算向量并长期存储,供后续检索比较。
  • 若模型闭源且仅托管提供,厂商一旦停服,用户必须为已存储的全部向量重新付费计算。
  • OpenAI 曾在 2024 年 4 月 GPT-4 API 全面可用时提出承担用户用新模型重新嵌入内容的财务成本,但作者认为不能指望每家供应商都如此。
  • 作者的偏好并非自托管,而是购买托管服务的同时保留“厂商停服后可自行运行开放权重版本或另找供应商”的选择权。
原文佐证
  • I really appreciate that EmbeddingGemma 2 is under the Apache 2.0 license.
  • Most applications of embedding models involve calculating thousands or even millions of embedding vectors and storing them for later comparison.
  • I'd much rather pay a provider for a hosted model while knowing that if they ever stop hosting it I can run the open weights version myself
AI 洞察
嵌入层正从“一次调用的模型”变成“写入数据基础设施的长期资产”,其锁定成本随数据规模线性放大,厂商更换代价远高于生成式模型。因此开放权重在嵌入领域不是理想主义,而是一种可迁移性的保险,未来企业选型很可能把“可自托管的权重”列为与效果、价格并列的硬性指标。这也给专有托管厂商施加压力:要么提供迁移补贴,要么开放权重以换取信任。