天眼查App披露,腾讯科技(深圳)有限公司近期提交了一项专利申请,专利名称为“大语言模型的训练方法、装置、计算机设备及存储介质”。专利摘要表明,该方法通过融入第一摘要文本和第二摘要文本,为语言模型训练提供更丰富的学习信息。

QQ20250210-103054.png

从专利描述中可以看出,第一摘要文本和第二摘要文本所含信息量各异,其中第一摘要文本还包含正确和错误语句。通过对比学习这两个摘要文本,并区分其中的正确与错误语句,可以有效避免因摘要文本单一而导致的模型过拟合和生成不准确等问题。

腾讯 (2)

该技术的创新之处在于提升了模型的泛化能力和准确性。腾讯通过引入多元化的摘要文本,使大语言模型的训练更加高效和精确。