有没有诵读转歌曲的AI,而不是文本歌词

想用AI创作本地方言歌曲(用文本字符无法书写),有没有朗诵转歌曲的音乐AI呢?

Suno

Record or upload your audio and shape it into a song

1 Like

豆包和通义都有生成 ai 歌曲的功能,但是好像不能将诵读转为歌曲唉。

搜了下这个貌似不行 我的意思是 用方言念出方言歌词
然后把这个录音作为歌词 AI谱曲

你说的这个貌似是清唱录音,然后AI添加伴奏吧

暂时没外网 待会回家细看一下

VOCALOID 好像支持导入音频文件然后生成工程文件:

官网是这样写的:

VOCALO CHANGER

“Sing to input”—the VOCALO CHANGER offers a new way to produce your vocal tracks. The voice bank for VOCALOID6 replicates your singing style as-is.

不过……个人建议如果只是想玩玩还是别用 VOALOID 了,首先这玩意儿是专业级的语音合成工具,对用户的技术水平要求很高,而且要求用户拥有一定的乐理知识(好像之前有 UP 主说最好会弹钢琴、懂乐谱);二是这个软件非常贵,好像全套下来得上千。

1 Like

之前在 B 站玩过鬼畜调音,我没搞过 AI 歌曲,但是看过一些相关的视频,以下为根据比较成熟的视频实例进行的反推和头脑风暴

楼主可以把需求再详细、具体化一些,或者可能就是想找那种一键搞定的工具?

情况1:一键式的
做法:找到这类工具、或者找开发者做出来

情况2:现成歌曲 + 用特定音色唱
做法:比较成熟了,直接搜“AI 翻唱”

情况3:现成歌曲 + 自己重写歌词 + 用特定音色唱
做法:这个也比较成熟了,肯定有教程的,同样搜“AI 翻唱”

传统方法1:用软件支持的语言,通过谐音拼凑出方言。

传统方法2:录制诵读,然后调音。(搜索“采样处理”“人声调音”)

进一步讨论

限于楼主给的信息太少,我也只能给出琐碎的想法

传统方法结合 AI 的效果是最好的,我目前不看好 AI 一键生成的。(具体方法相当于自己主动做饭,一键式相当于搞个全自动炒菜机)

AI 翻唱相当于是绕过了很多音乐相关的门槛。(AI 翻唱是目前比较走捷径且成熟的方案)

一键式生成虽然也绕过了,但是不一定好听。(这里还是,不知道楼主对音乐质量要求有多高)

方言问题如果知道更多详细的需求、并且不追求一键式,是能解决的问题。

就是AI给方言歌词谱曲,把说的改成唱的
但是是小众的没有文本化的方言歌词

原材料只有方言歌词:

  • 先搞出来曲子(这个你可以让 AI 弄)(准确说是搞出来旋律,但是你还得有伴奏)
  • 选用一种音色生成方言语音采样
  • 给采样调音

总之,把起点和目标之间拆解一下就好。(除非真有一键搞定的工具)

1 Like

(以下内容都是道听途说,姑妄言之,姑妄听之)

或许……您这种情况可以考虑上 VOCALOID 了,早年间 VOCALOID 没有中文支持,见过有大佬玩 “跨语种调校”,简而言之就是用日语罗马音拼汉语发音。

另外,最近 Synthesizer V 也挺火的,据说有 AI 加持,跨语种能力似乎会更强。

搜了一下确实可行

这个是传统方法与 AI 结合的(依然需要音标,而不是工具直接支持方言)

【【Synthesizer V】基于音标的方言调教:以《义务为豪大大鸡排做个广告歌》为例】
【Synthesizer V】基于音标的方言调教:以《义务为豪大大鸡排做个广告歌》为例_哔哩哔哩_bilibili

【【闽南语/夏语遥SV】你的钢门比较松弛(你的尻川口有淡薄仔松)】
(视频简介有具体方言歌词写法)(不要在意具体歌词,但是人们搞娱乐的技术力是很高的)
【闽南语/夏语遥SV】你的钢门比较松弛(你的尻川口有淡薄仔松)_哔哩哔哩_bilibili

我正在了解 Synthesizer V,目前感觉是 AI 音色唱歌(需要准备旋律) + 调音的软件

1 Like

支持74种语言318种声音的免费文字转语音工具,支持音频和字幕下载

站内搜到一个带方言的语音生成工具

这个……好像不太行,首先这个只是朗读、不是唱歌,然后支持的方言太少了,只有普通话、东北官话、粤语、陕西方言。看楼主的描述,其希望用的未必是这种比较大众的方言。

这个肯定不行,只是发现:这个 AI 产品考虑到了很多种语言。

这个可以用来生成采样。

我还是认为原材料只有歌词就能一键出歌很难。(当然,如果对歌曲没有任何要求也有可能)


(提供信息+建立关联罢了,可能和我记笔记的习惯有关,喜欢在一个 Problem 下收集各种相关的信息,并不急着解决它)