LongWriter 是清华大学联合推出的长文本生成模型,能生成超10,000字的连贯文本,项目已开源。通过分析现有大型语言模型的输出限制,创建了”LongWriter-6k”数据集,成功扩展了AI模型的输出能力。LongWriter 还采用了直接偏好优化(DPO)技术来提高模型的输出质量和遵循指令中长度限制的能力。


LongWriter 是清华大学联合推出的长文本生成模型,能生成超10,000字的连贯文本,项目已开源。通过分析现有大型语言模型的输出限制,创建了”LongWriter-6k”数据集,成功扩展了AI模型的输出能力。LongWriter 还采用了直接偏好优化(DPO)技术来提高模型的输出质量和遵循指令中长度限制的能力。
全部评论
留言在赶来的路上...
发表评论