这里参考了 LoRA 模型训练教程一键包 LoRA 模型训练教程 一键包
以及:
https://colab.research.google.com/drive/1_f0qJdM43BSssNJWtgjIlk9DkIzLPadx#scrollTo=8Qp6STJk2Wjh
首先是安装miniconda 或者 anaconda 来获得虚拟环境:
建立虚拟环境:
这里我们只需要有python 3.10的环境即可:
之后git得到文件(没有git,自行安装git):
安装依赖(确保你有pip):
安装xformers:
或者:
安装Triton:
安装lion:
此时已经安装完成。修改train.sh的数据进行训练即可。
回天一梦 2023-03-24
回天一梦 2023-03-24
阿里云 2023-04-14