#小语言模型

共 5 篇相关文章

英伟达开源Nemotron 3.5 Bolt E4B 4GB小语言模型，基于Gemma 4 E4B后训练，约4GB显存即可在RTX和Jetson上运行本地语音助手、游戏角色与机器人应用。

ZYR AI发布实验性语言模型ZY-S1 Preview，参数约1.18B，基于HRM-Text-1B，聚焦编程、推理与本地可运行的小模型方向，探索无需昂贵订阅的实用AI方案。

Shivacon-Energy 是基于 Qwen2.5-0.5B 的能源领域 LoRA 微调模型，通过四关评测实现 0/10 幻觉率与 5/5 JSON 格式准确率。9 个适配器评测中唯一通过，公开全部失败报告，展示了小模型校准优于知识提升的实践路径。

一篇 arXiv 研究揭示：小语言模型（SLM）的 token 级熵几乎失效，但语义熵能有效捕捉不确定性，并通过路由给专家模型带来最高 +50 个百分点的准确率提升，跨家族路由效果远超同家族路由。

OrchSLM 是一个用于探究小语言模型（SLM）非交互式协同编排机制的路由框架，将编排的设计选择转化为可控参数，系统分析任务结构、模型池组成与多智能体共识如何影响编排行为，为 agentic 系统部署提供新视角。