text2video-开源一键文本转视频的工具

text2video是什么

text2video是一个开源一键文本转视频的工具，工具可以将一段文本转换为视频，并保存到指定的本地，初衷是想实现小说的可视化阅读功能，具通过标点符号句号分段文本，使用 stable-diffusion生成图片和 edge-tts转换语言，通过 OpenCV合并图片为 mp4 视频，字母贴在视频底部，音频控制画面播放时长，最后使用 FFmpeg合并音频和视频，非开箱即用的工具，需要一定的知识。

实现原理

• 将文本进行分段，现在没有想到好的办法，就是通过标点符号句号分段，分成一个个的句子
• 通过句子生成图片，生成声音，图片开源的有很多，本方案采用 stable-diffusion，语言转文字使用 edge-tts
• 在通过 opencv 将图片合并为视频，目前输出 mp4 格式的视频，句子作为字母贴到视频内容的底部区域。
• 音频是一个有时间概念的东西，恰好可以通过音频控制一张画面的播放时长
• 在通过 ffmpeg 将音频合并到原始视频中。

最终，一个有画面，有字幕，有声音的视频就出现了，咱们实现了一个 文本转视频。

开源一键文本转视频的工具

GitHub地址：https://github.com/bravekingzhang/text2video