工作流
这里指的不是ai短剧或者ai视频
ai自动工作流本文是自动化,ai去除人声,ai生成字幕,ai转英文或者其他语种字幕,ai生成tts配音,ai视频合成
由于这里没有口播,所以对口型等没有加入工作流
又由于目前没有接入api ai,所以自动生成油管封面和自动上传油管,暂时都略过,包括不限于视频超分等
目前打算手工类视频,不露脸不对口型,只录音,提交视频后自动工作流转为英文视频
先去人声,然后asr生成字幕,然后llm转英文字幕,然后tts生成语音,然后ffmpeg把音频,字幕等合成一个新的视频
这样就可以上传了,目前几个小时过去了,推荐量也就几百,播放也就十,看看过几天会不会数据好一些
vlog
要是不想配音怎么半,对于不需要细节的内容,比如vlog,可以直接让ai分析视频,让它根据提示内容生成字幕,然后配音和封面等
全程只需要拍摄视频,其他交给ai
有点像是纪录片的风格,原本普普通通的视频,加了语音旁白后,瞬间感觉氛围和格调高了很多
哪怕不看视频,做音频背景音也不错,毕竟很多视频不是来看的,而且助眠的
这对ai的算力要求不小,所以本文打算本地ai处理
本地ai
目前所有工作流中最核心的就是本地大模型llm,大模型中目前不错的是qwen3.8 27b
现在的大模型可以处理视频,图片等,如果不能,可以视频抽帧为图片再继续
本文用的是4b,一个小模型,它用来处理各种翻译,文稿梳理等
用几个小时搭建了一个自动化工作流,在本机上已完成ai生成文稿,字幕,配音,视频合成
目前拍摄一个vlog,输出效果还行,但是小模型时不时会有幻觉问题
等硬件价格降了再考虑更新显卡之类的配置
Tips
后面vlog将是常态化内容,在油管抽卡
看看算法会推送某个视频的某些元素,流量不多的情况下,就当做一个无限扩展的免费的网盘
其他的ai功能再根据实际需求和实际数据来增加或者优化