-我们在此处提供了更详细的[预训练数据制作](./tools/preprocess),[Pretrain 和自定义数据集](https://paddlenlp.readthedocs.io/zh/latest/llm/pretraining/dataset.html),[分布式策略支持情况](https://paddlenlp.readthedocs.io/zh/latest/llm/pretraining/index.html#model-capability),[性能测试报告文档](https://paddlenlp.readthedocs.io/zh/latest/llm/pretraining/index.html#model-performance),参见: [大模型预训练介绍](https://paddlenlp.readthedocs.io/zh/latest/llm/pretraining/index.html), [大模型权重列表](https://paddlenlp.readthedocs.io/zh/latest/llm/pretraining/index.html#model-weight)。
0 commit comments