3
如何在领域数据上二次预训练
Q
[THUDM/ChatGLM-6B]如何在领域数据上二次预训练
A
回答
4
我也在做增量预训练，欢迎做类似的伙伴交流
3
正准备做这个事情，大家有什么推荐的方案吗？
7
插眼
3
现在有结果吗
5
cy
8
看来官方暂时不太打算回答这方面的问题。
我准备按照这个项目来搞一搞 https://github.com/shibing624/MedicalGPT
4
https://github.com/shibing624/MedicalGPT 参考这个项目，预训练，指令微调，rm模型训练，ppo都有现成的