Baseten现在是Hugging Face上的新推论提供者:在没有服务器的情况下运行打开的LLMS

21 八月 202619 视图

Baseten现在作为Hugging Face生态系统中的推论提供商之一提供:通过模型页面和客户端SDK,可以调用开放模型,包括Kimi K3,DeepSeek V4 Flash,以及GLM-5.2,用于聊天和文本生成. 用户可以选择通过自己的Baseten API密钥或通过他们的Hugging Face平衡支付,标准定价和月贷PRO账户.

Baseten现在是Hugging Face上的新推论提供者:在没有服务器的情况下运行打开的LLMS

Baseten in the Hugging Face 生态系统:它的含义

Baseten平台正式成为该平台上的推论提供者之一。 Hugging Face 灵枢. 这对每一个使用开放模型的人来说都是重要的一步:现在你可以直接从模型页面上推出这些模型,而不部署自己的基础设施. 之前,你必须去第三方服务,复制密钥,并手动配置环境——现在这个过程被压缩到几下.

Baseten不仅仅是LLMS的托管. 该平台提供无服务器推论,模型培训,以及现成神经网络的目录——从大型语言模型到语音合成系统. 在初始阶段,Hugging Face集成涵盖了对话助理和文本生成的任务. 现有的开放量级模型包括Kimi K3,DeepSeek V4 Flash,GLM-5.2等. 所支持的情景清单预计稍后会扩大。

如何建立部署模式

用户有两种方式可以访问提供者. 首先是在 Hugging Face 的账户设置中指定您自己的 Baseten API 密钥 。 然后模型页上的请求直接到服务,你按照你的计划支付. 第二种模式是通过Hugging Face基础设施进行路由. 在这种情况下,不需要单独的 Baseten 密钥:认证通过您的 Hugging Face 令牌进行,所有收费都记入您的平台账户.

选择一个提供者很容易控制:您可以在您的个人设置中设置首选项的顺序. 如果从多个第三方服务中可以获得一个模型,Hugging Face会自动在模型页面上显示,按照您的设置排序. 如果您想比较不同基础设施的速度或成本,这是方便的。

客户图书馆和代理框架

开发者不需要写额外的锅炉板. Baseten 已经通过 SDK 正式版本提供: huggingface_hub Python 的 1.26.1 及以上版本以及 @huggingface/inference JavaScript 软件包。 只需用您的 Hugging Face 标志进行认证—— 对 Baseten 上托管的模型的请求将自动被路由 。

这些建筑代理系统也有好消息. 推论提供者与受欢迎的代理机结合,包括: Pi, (中文). OpenCode赫尔墨斯探员 OpenClaw. 这意味着Baseten上的模型可以在这种工具中使用,而不写适配器模块——连接通过框架的标准手段发生.

成本和免费限制

资金问题视所选方式的不同而有不同的解决方式. 如果你使用自己的供应商钥匙,账单完全在Baseten一侧. 在通过Hugging Face的路由时,供应商的标准费率适用,而没有任何来自平台的标记. 今后可能达成收入分享协议,但目前是标准现收现付计划.

积极的用户可以得到不错的奖金。 Hugging Face PRO的用户每月获得2美元的推论信用——他们在不同供应商之间工作。 而注册免费用户可以免费获得少量推论,因此无需任何初始投资即可尝试新集成.

Baseten在推论提供者列表中的出现使得哈格格面生态系统更加灵活. 用户获得更多的选择,开发者获得较少的常规. 要部署开放的LLMS,你不再需要成为一名DevOps专家:两个设置就足够了,模型已经启动运行.

常问问题

对融合和机会的回顾