GitHub · 3D 生成新仓库·· 2 天前精选AI 评分63
GitHub 开源 feverslop-ts:把歌曲转成对口型的 AI 音乐视频生成管线
H256/feverslop-ts
来源与原文
GitHub · 3D 生成新仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/H256/feverslop-ts
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
GitHub 用户 H256 发布 feverslop-ts,用 TypeScript 把一首歌(歌词加音频)转成卡点音乐视频方案,生成故事、角色、场景、影片风格、Krea 2 参考图提示词,并为每个片段生成一条 MiniMax H3 reference-to-video 请求。支持 Clip 和 Performance 两种模式,后者用 demucs 分离人声、Whisper large-v3 做逐词对齐实现口型同步;需 Bun、uv、ffmpeg 和 OpenAI 兼容 LLM 服务器,可通过一个或多个 ComfyUI 服务器渲染,步骤结果缓存在 project.json 中断后续跑,全片按 24 fps 帧网格拼接保证无漂移。
推荐理由
开源管线把歌拆成 BGM 分镜再逐片段生成视频,README 写明了缓存、断点续跑和口型同步的实现细节,可迁移到类似工作流。
来源:GitHub · 3D 生成新仓库 · github.com
这条消息,你怎么看?
把新闻带到 MickerBook,和社区伙伴聊聊;也可以去 AIHER 看看模型背后的角色与梗。