小语言模型综述(A Survey of Small Language Models)-全文中文翻译原文地址小型语言模型(SLM)由于其以最少的计算资源执行各种语言任务的效率和性能而变得越来越重要,使其成为各种设置的理想选择,包括设备上,移动的,边缘设备等。在这篇文章中,我们提出了一个全面的调查SLM,专注于他们的架构,训练技术和模型压缩技术。我们提出了一种新的分类法,用于分类的方法来优化SLM,包括模型压缩,修剪和量化技术。我们总结了基准数据集,是有用的基准SLM沿着与常用的评估指标。此外,我们强调了仍有待解决的关键开放性挑战。我们的调查旨在为有兴趣开发和部署小型但高效的语言模型的研究人员和从业者提供