在上一期的教程,我分享了在启智社区运行真实lora的flux工作流,没看过的可以去看一下:
这一期的教程来玩点别的,CogVideo 是一种让文字变成短视频的 AI项目。想象一下,你只需要输入一句话,比如“黄昏时的沙滩上,海浪轻轻拍打着岸边”,然后这个 AI 就会根据你的描述生成一个逼真的视频,把你脑海中的画面真实地展现出来。
这是CogVideo的开源地址:GitHub - THUDM/CogVideo: text and image to video generation: CogVideoX (2024) and CogVideo (ICLR 2023)
这个技术是由顶尖的研究团队开发的,通过对大量的视频进行学习,CogVideo 可以自动生成和你描述内容相匹配的短视频。无论是广告、创意表达,还是教育视频,这项技术都能带来全新的视觉体验。简单来说,CogVideo 就是把你的想象变成现实的工具,让你的文字活起来!
但是运行CogVideo有一定的门槛,根据官方所述,至少也要有16gb的显存,考虑到运行这个项目需要用到大量的算力,所以我选择白嫖云端的gpu来运行这个项目,这一期的教程,我给大家带来了两个平台的白嫖方案。
1.智启社区,已经是我们的老朋友了,这个平台就不用我多说了,我在上一期教程做了详细的介绍,这个社区提供了免费的算力,每天签到获得10个积分,可以免费用5小时的t4,如果觉得不够的话,可以切换成40g显存的a100,只要在30分钟内关机就不会扣除积分。
首先登陆启智社区:
https://openi.pcl.ac.cn/user/sign_up?sharedUser=NewestAI AFF
(带aff)
虽然不是同一时间,但是是同一个平台。进来以后,点击右上角的加号,创建云脑任务, Ai任务类型是调试任务,所属项目:新建项目。随便起个名字儿,下一步。
!
计算资源选择英伟达gpu,资源规格务必选择40g的a100,如果你选择只有32g的v100,一会儿运行Cogvideo这个项目,不能直接一键运行了,要不然会爆显存。
接下来到参考设置那里填写镜像,不需要选择平台上面的镜像,填写我这个已经搭建好CogVideo环境的:
192.168.242.22:443/default-workspace/2a72307689ae49758c80c896fffda0a1/image:CogVideo-2b
接下来选择模型,在公开模型里面搜索CogVideo,然后勾选再按确定。
新建任务以后会自动跳转到新界面,等待机器开机,然后调试任务。
接下来会打开jupyter,然后直接在终端输入bash install.sh就完事儿了。
终端会跳出一个端口映射出来的链接。
但是这个链接目前还不能访问,要等几分钟配置好CogVideo成功启动后才可以ctrl c复制访问,关机以后再次开机,也可以输入bash install.sh再次启动,或者直接输入cd /tmp/code/CogVideo/inference & python gradio_web_demo.py
对于选了v100 32g的GPU,运行会报错,可以在输入完install sh两分钟以后,按ctrl +c退出gradio运行,用这个命令来代替:cd /tmp/code/CogVideo/inference & python cli_demo.py --prompt “A girl ridding a bike.” --model_path THUDM/CogVideoX-2b
其中“”里面的是提示词,你可以更改。
对于不喜欢自带的端口映射,你可以在打开jupyter的时候不输入bash install.sh而是输入bash run.sh,然后再点左上角的加号,开一个新的终端,保存你的ngrok authtokens,再输入ngrok http 7870,上一期有ngrok的教程。
2.百度飞桨社区
百度飞桨(PaddlePaddle)是百度开发的深度学习平台,飞桨社区是围绕这一平台的用户、开发者和研究者组成的交流和合作平台。社区提供了大量的资源,包括教程、文档、讨论区、案例分享等,帮助用户学习和使用飞桨,推动深度学习技术的发展。
百度飞桨社区为用户提供了免费的算力资源,以支持开发者和研究者在深度学习项目中的计算需求。每天签到可以至少获得8点算力,可以免费运行32g显存的v100两小时以上,16g的v100可以运行4小时,相比谷歌的colab,每天只能白嫖2-3小时的t4,还是强了不少。
首先注册登录百度分享社区 https://aistudio.baidu.com/newbie?invitation=1&sharedUserId=7199308&sharedUserName=Newestai AFF
(带aff)
登陆后访问这个链接https://aistudio.baidu.com/projectdetail/8242722?sUid=7199308&shared=1&ts=1724038758293
这是我搭建的一键运行镜像,别忘了给我的镜像先点个红心,然后启动环境, Gpu规格选择32g的,等机器启动成功以后,会打开一个notebook界面,在这里从第一个开启运行所有的代码,直到最后一个就是生成视频的代码了,下一次开机只需要运行最后一段代码。
不知道这一期的教程对你有没有帮助,如果有帮助,别忘了点赞关注分享,如果没有帮助,请把你想要的项目再评论告诉我,点赞最多的,我下一期就搭建那个,如果希望我出视频教程,可以在评论告诉我。
我的其他教程:教你白嫖32g的显卡在线搭建ai数字人嘴唇同步工具video-retalking!







