PEFT/LoRA

AutoDL租用5090 32G, 90GB内存, 25核CPU只要3元/小时, 用来训练小模型或微调经济实惠. 由于服务器在中国, 记录一些使用过程中遇到的麻烦. 顺便分享一下我使用AI进行辅助研究的经验. 一般情况下, 我会把AI分为三种角色: 一个实验周期: