为了解决后训练难题，各大公司都提升了后训练方法的复杂性，包括多轮训练、人工数据加合成数据、多训练算法和目标等，以同时实现专业知识和通用功能，但这类方法大多闭源，而开源模型的性能又无法满足需求，在LMSYS的ChatBotArena上，前50名模型都没 ...

最近，Allen Institute for AI（AI2）发布了一系列完全开放、最先进的训练后模型Tülu 3，以及所有数据、数据混合、配方、代码、基础设施和评估框架，其突破了训练后研究的界限，缩小了开源模型和闭源模型微调配方之间的性能差距。