名词解释 / 01

小语言模型

第 10 / 127 个名词认识 AI 和常见产品

英文名称:Small Language Model
英文缩写:SLM
所属分类:认识 AI 和常见产品

一句话解释

小语言模型是参数量、计算需求和运行成本相对较低的语言模型,适合任务范围明确、响应快、成本敏感或需要在本地设备运行的场景;行业没有统一的大小分界线。

工作中什么时候会遇到

手机、车机、工业边缘设备、内部分类系统或高频客服功能,为了速度、成本和隐私,可能采用小语言模型。

能解决什么问题

  • 执行分类、提取、改写等固定任务。
  • 在算力有限的设备上运行。
  • 降低高频调用的延迟和成本。
  • 针对特定领域进行微调或蒸馏。

举个例子

工厂可在内网服务器部署小语言模型,把维修工单按设备和故障类型分类;复杂原因分析再交给更强模型或工程师。这样比所有任务都调用最大模型更经济,也更容易控制数据流向。

怎么使用

先用真实样本界定单一任务和最低准确要求,再比较小模型与大模型。只有小模型在关键类别达到标准,才扩大使用;不够时可采用大小模型路由。

使用时要注意什么

体积小不代表一定更安全或更准确,仍取决于训练数据、部署和权限。特定测试表现接近大模型,也不代表具备同等知识广度和复杂推理能力。

容易混淆的词

  • 小语言模型与小参数版本:常有重合,但具体称呼由厂商决定。
  • 蒸馏模型:通过大模型知识训练出的较小模型,是获得小模型的一种方式。
  • 本地部署:小模型更容易本地运行,但两者不是同义词。

相关名词

大语言模型蒸馏量化本地部署

相关图片

小语言模型相关图片

参考来源