【资料图】

MosaicML+的+MPT-7B+是一个具有近70亿个参数的大型语言模型，该团队在自己的近万亿个标记的数据集上对其进行了训练。MosaicML+遵循+Meta+的LLaMA模型的训练方案。但即使有65，000个token，也可以阅读整部小说并写一篇结语。(站长之家)