天谱乐是唱鸭团队研发的全球首个多模态音乐生成大模型,通过文字、图片、视频输入即可生成专业级影视配乐。其核心优势在于:
- 多模态理解能力:依托自研算法逐帧分析视频画面的明暗、色彩、情绪变化,精准匹配音乐节奏与画面情感。例如上传雪景视频可生成忧郁的民谣,而科幻场景则触发电子合成器音效。
- 快速生成与高质量输出:15-20 秒即可生成长达 3.5 分钟的完整音乐,支持导出 MP3/MP4 格式,人声效果接近真人演唱,歌词押韵且画面感强。
- 专家级创作自由度:通过「专家模式」可自定义曲风(如国风、朋克、嘻哈)、和弦走向、BPM(节拍数)等参数,满足专业影视配乐需求。
1. 素材准备与场景选择
- 图片类型建议:优先选择高分辨率、主题明确的图片(如风景、人物特写、概念插画),避免过度模糊或元素混乱的素材。
- 情绪预判技巧:根据画面主色调和元素提前构思音乐风格。例如:
- 冷色调(蓝 / 灰)+ 孤独场景:建议选择「悲伤」「空灵」情绪标签,搭配钢琴或弦乐。
- 暖色调(橙 / 黄)+ 活力场景:尝试「欢快」「复古」风格,加入鼓点或吉他元素。
- Step 1:登录与功能入口
访问天谱乐官网(https://ai.singduck.cn/),点击「图片生曲」按钮进入创作界面。平台已全面接入唱鸭 APP,也可通过移动端操作。 - Step 2:上传与分析
上传图片后,系统自动识别画面内容与情绪,约 10 秒后生成默认音乐片段。此时可通过「试听」功能快速预览效果。 - Step 3:参数调节与风格优化
- 基础调节:在「风格模板」中选择预设类型(如「AI 推荐」「文艺酒馆」「星河恋歌」),系统会根据模板自动匹配乐器和节奏。
- 高级调整(专家模式):
- 曲风选择:支持数十种风格,包括古典、爵士、电子等,点击即可实时切换。
- 情绪强度:通过滑动条调节「治愈 / 活力 / 怀旧」等情绪标签的强度,影响旋律走向和和弦编排。
- BPM 设置:根据视频节奏需求调整节拍数(如 60BPM 适合慢镜头,120BPM 匹配快切画面)。
- Step 4:导出与分享
确认效果后,点击「生成完整作品」,系统将输出带封面和歌词的 MP4 文件,支持一键分享至抖音、B 站等平台。
1. 视频素材处理与格式要求
- 时长与分辨率:支持上传 10-60 秒的视频,分辨率建议≥720P,推荐格式为 MP4、MOV、AVI。
- 内容优化建议:
- 剧情类视频:选取包含明确情感转折点(如对话、冲突、高潮)的片段,便于 AI 捕捉情绪变化。
- 风景 / 产品展示:选择画面稳定、色彩对比强烈的素材(如日出、城市夜景),提升音乐与画面的视觉同步感。
- Step 1:智能场景分析
上传视频后,天谱乐会逐帧解析画面内容,自动生成「情绪曲线」和「场景标签」(如「紧张追逐」「温馨对话」)。可根据分析结果手动调整关键帧的音乐强度。 - Step 2:动态参数控制
- 分镜匹配:在「时间轴编辑」界面,为不同视频段落分配独立曲风。例如:
- 开场:用舒缓钢琴引入
- 中段动作戏:切换为鼓点密集的电子乐
- 结尾:回归弦乐烘托情感。
- 人声与歌词定制:点击「生成歌词」按钮,AI 会根据画面内容创作押韵唱词,并支持选择男声 / 女声、方言(如粤语、闽南语)演唱。
- 分镜匹配:在「时间轴编辑」界面,为不同视频段落分配独立曲风。例如:
- Step 3:细节优化与导出
- 混音调节:在「音频设置」中调整乐器音量平衡(如突出贝斯或弱化弦乐),避免声音过于杂乱。
- 导出选项:选择「分轨文件」可获得单独的乐器音轨,便于后期在 Adobe Audition 等软件中进一步编辑。
- 生成音乐与画面情绪不匹配
- 原因:图片 / 视频内容模糊或情绪标签选择不当。
- 解决:重新上传高清素材,或在专家模式中手动调整「情绪强度」和「曲风」参数。
- 生成速度慢或失败
- 原因:网络波动或文件过大。
- 解决:检查网络连接,压缩视频至≤100MB 后重新上传;若多次失败,联系客服获取技术支持。
- 版权与商用合规性
- 注意事项:生成作品版权归属以平台使用条款为准,商业用途需购买授权或联系官方合作。建议在导出前仔细阅读《用户协议》。
- 与 Suno 相比:天谱乐支持中文歌词自然发音,无需科学上网即可使用,且能直接生成带字幕的成品视频,无需手动拼接。
- 与专业软件(如 FL Studio)相比:天谱乐大幅降低创作门槛,无需乐理知识即可快速产出灵感片段,适合影视制作人快速试错或短视频创作者批量生产。
- 与网易天音等竞品相比:天谱乐的「多模态输入 + 实时情绪分析」技术更适合影视场景,而天音更侧重乐器编排的精细化调整,适合独立音乐人。
- 跨模态素材组合
- 尝试「图片 + 文本」混合输入:例如上传森林图片并输入「神秘探险」,AI 会结合画面元素与文字描述生成带有部落鼓点和鸟鸣采样的音乐。
- 视频 + 音频叠加:在视频生曲功能中上传已有背景音乐的素材,AI 会自动识别并优化原有旋律,避免听觉冲突。
- 行业应用场景拓展
- 影视制作:为微电影、广告片生成低成本定制配乐,替代传统外包流程。
- 游戏开发:制作动态背景音乐,根据游戏场景变化(如战斗、解谜、剧情)实时切换曲风。
- 教育与自媒体:为课程视频、Vlog 添加个性化 BGM,提升内容吸引力。
- 创作点获取:每日登录赠送 20 创作点,完成唱鸭 APP 内任务(如分享作品、邀请好友)可额外获得点数。轻度使用(如每日生成 3-5 首)基本无需付费。
- 功能限制:免费版暂不支持分轨导出和超长视频(>60 秒)生成,商业项目建议升级专业版或联系企业合作。