当前位置:首页|资讯

(InternAI)5.部署InternLM2-Chat-1.8B初体验

作者:千反田终成艾姬多娜发布时间:2024-10-01

1.CLi demo 部署 CLI 是 Command Line Interface(命令行界面) 的缩写。所以Cli部署意思就是在终端中实现模型的部署,在终端和模型进行交互对话。虽然没有好看的UI界面,但比较适合简单测试,以及学会CLi部署的代码,也有助于调用API的代码构建。 部署前提: 0.也许至少要有8GB显存的显卡。 1.在服务器的容器上,已有训练好可直接调用的大模型文件夹以及安装好了对应的conda环境; [图片] 在开发机的容器中,我们发现模型等文件已经被打包好在文件夹中。所以我们可以直接使...【查看原文】


Copyright © 2024 aigcdaily.cn  北京智识时代科技有限公司  版权所有  京ICP备2023006237号-1