DCU上如何运行大模型以及用到的docker命令

编程入门 行业动态 更新时间:2024-10-10 15:28:51

DCU上如何运行大<a href=https://www.elefans.com/category/jswz/34/1771358.html style=模型以及用到的docker命令"/>

DCU上如何运行大模型以及用到的docker命令

第一步:需要连接到官方(/)提供的vpn

第二步:通过termius进入到项目

第三步:遇到问题

1.docker空间太小了,得换地方:参考这个
centos设置docker 目录_mob64ca12f73101的技术博客_51CTO博客
docker中我常用的一些命令:

docker ps 查看镜像
docker ps -a 查看所有镜像
可以使用docker start命令,直接将一个已经终止的容器启动运行起来。这是个好办法。start容器id
exit   ctrl+c 这两个办法都可以退出容器

2.修改pip为国内源,如果不是国内源,简直了兄弟们,根本走不通啊。我是参考下面兄弟的方法,直接在docker容器中运行。

python包管理工具pip设置国内镜像源_pip 国内镜像_px2557的博客-CSDN博客

第四步:ModelZoo / ChatGLM2-6b_pytorch · GitLab

         运行这个项目,通过Docker(方式一)的方式安装,此处有个问题,就是安装完了项目下载到哪里呢?文章里面没有说:我现在是这么干的。进入docker,随便进个目录,我进的是home,然后运行

git clone ModelZoo / ChatGLM2-6b_pytorch · GitLab这个项目。。然后就dowload到docker里面了。按照步骤运行。。肯定是成功不了的。。。因为这个chatGLM2-6B的项目,他用的模型是ChatGLM的模型。然后我报错了,这个一定要注意。。人家其实也写了的。如下:

本仓库实现了对于ChatGLM-6B模型基于P-Tuning v2的微调。P-Tuning v2是由清华大学提出的一种高效参数微调方法。

我只能说 秀儿是你吗?

其实也无所谓,只要模型路径是对的应该就可以。但是模型必须是chatglm的吗?这个还不确定,应该得是吧。。

确定了,用chatglm2-6b的模型也是可以的,所以是我菜了

模型导入了,理论上是成功了,如下图:

已经在训练了。

现在有两个问题:

1.如果服务器断开连接,重新进入服务器的话,如何查看训练状态

2.如何停止训练,如果再去训练其他模型可以吗?
大佬回复了,如果不是后台运行程序,大概率程序就断了,可以尝试用tmux

Tmux详解_royal_hu的博客-CSDN博客
大佬的这个教程就很详细,学习ing


正在训练中了。接下来想运行baichuan的大模型。读一下关于大模型的文档

更多推荐

DCU上如何运行大模型以及用到的docker命令

本文发布于:2024-03-08 11:20:44,感谢您对本站的认可!
本文链接:https://www.elefans.com/category/jswz/34/1720729.html
版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系,我们将在24小时内删除。
本文标签:模型   命令   DCU   docker

发布评论

评论列表 (有 0 条评论)
草根站长

>www.elefans.com

编程频道|电子爱好者 - 技术资讯及电子产品介绍!