text2video - 一键文本转视频工具


半个神器,一键文本转视频的工具。

这个工具可以将一段文本转换为视频,并保存到指定的本地,初衷是想实现小说的可视化阅读功能。

实现原理:

  • 将文本进行分段,现在没有想到好的办法,就是通过标点符号句号分段,分成一个个的句子
  • 通过句子生成图片,生成声音,图片开源的有很多,本方案采用 stable-diffusion,语言转文字使用 edge-tts
  • 在通过 opencv 将图片合并为视频,目前输出 mp4 格式的视频,句子作为字母贴到视频内容的底部区域。
  • 音频是一个有时间概念的东西,恰好可以通过音频控制一张画面的播放时长
  • 再通过 ffmpeg 将音频合并到原始视频中。

最终,一个有画面,有字幕,有声音的视频就出现了,咱们实现了一个 文本转视频

传送门:

https://github.com/bravekingzhang/text2video

Tips:

GitHub资源访问缓慢看这篇《**GitHub国内访问加速操作指南**》


text2video - 一键文本转视频工具
https://pknote.top/163.html
作者
胖氪不胖
发布于
2024年3月29日
许可协议