跳到正文
我的
GitHub · 3D 生成新仓库·· 2 天前精选AI 评分63

GitHub 开源 feverslop-ts:把歌曲转成对口型的 AI 音乐视频生成管线

H256/feverslop-ts

来源与原文

GitHub · 3D 生成新仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/H256/feverslop-ts

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

GitHub 用户 H256 发布 feverslop-ts,用 TypeScript 把一首歌(歌词加音频)转成卡点音乐视频方案,生成故事、角色、场景、影片风格、Krea 2 参考图提示词,并为每个片段生成一条 MiniMax H3 reference-to-video 请求。支持 Clip 和 Performance 两种模式,后者用 demucs 分离人声、Whisper large-v3 做逐词对齐实现口型同步;需 Bun、uv、ffmpeg 和 OpenAI 兼容 LLM 服务器,可通过一个或多个 ComfyUI 服务器渲染,步骤结果缓存在 project.json 中断后续跑,全片按 24 fps 帧网格拼接保证无漂移。

推荐理由

开源管线把歌拆成 BGM 分镜再逐片段生成视频,README 写明了缓存、断点续跑和口型同步的实现细节,可迁移到类似工作流。

来源:GitHub · 3D 生成新仓库 · github.com

这条消息,你怎么看?

把新闻带到 MickerBook,和社区伙伴聊聊;也可以去 AIHER 看看模型背后的角色与梗。