IBM开源语言模型Granite3.1升级，处理能力突破128k令牌

IBM近期发布了开源语言模型Granite的3.1版本，该版本进行了多项重要升级。新版本模型架构经过优化，具备处理高达128,000个令牌的能力，显著提升了处理复杂文本和任务的能力。

图示：IBM（来源：图虫：已授权站长之家使用）

Granite 3.1版本的模型经过12种语言和116种编程语言的数据集训练，累计处理了12万亿个令牌，使得模型在语言理解和生成方面的性能更上一层楼，更好地满足用户需求。IBM指出，这些新模型在回答使用外部数据的问题（RAG）、从非结构化文本中提取信息以及创建文档摘要等任务上表现尤为出色。

开发者现在可借助Hugging Face平台访问这些模型，为各类应用场景提供强大支持。Granite最初于2024年5月首次推出，此次更新反映了IBM在开源人工智能领域的持续进步和创新。

IBM的Granite模型不仅提升了技术能力，还为开发者和企业提供了更灵活、更强大的工具，帮助他们更高效地处理和分析数据。随着人工智能技术的不断进步，Granite模型将继续发挥重要作用，助力各行业实现数字化转型。

通过这一系列改进，IBM希望吸引更多开发者加入开源社区，共同推动人工智能技术的发展。Granite 3.1的发布标志着技术上的重大突破，同时也积极推动了未来语言模型的研究。

项目入口：[https://huggingface.co/collections/ibm-granite/granite-31-language-models-6751dbbf2f3389bec5c6f02d](https://huggingface.co/collections/ibm-granite/granite-31-language-models-6751dbbf2f3389bec5c6f02d)

**划重点：**

🌟 Granite3.1模型经过重新设计，能处理最多128,000个令牌。

🌍 模型训练数据涵盖12种语言和116种编程语言，总计处理12万亿个令牌。

💻 开发者可通过Hugging Face平台访问这些强大的开源语言模型。