谷歌希望利用人工智能将你的脑电波转化为音乐

时间：2023-08-10 17:15:49 来源: 互联网

(相关资料图)

导读月复一月，新产品、程序和实验向我们展示了生成式人工智能的潜力有多大。为此，谷歌与日本研究人员合作，找到了一种方法，利用功能性磁共振...

月复一月，新产品、程序和实验向我们展示了生成式人工智能的潜力有多大。为此，谷歌与日本研究人员合作，找到了一种方法，利用功能性磁共振成像 (fMRI) 捕获的人类大脑活动来制作音乐，并使用谷歌的 MusicLM 音乐生成模型进行重建。

正如谷歌在题为“Brain2Music：从人脑活动中重建音乐”(来自ZDNet)的研究论文中所解释的那样，从涵盖 10 个不同流派的 540 首音乐作品中随机选择了 15 秒的剪辑。五名参与者通过一副兼容 MRI 的插入式耳机收听了这些片段，在此期间他们的大脑活动被扫描。

研究人员将数据输入 MusicLM，以“预测和重建人类受试者接触到的音乐类型”。最终，生成的音乐确实与测试对象最初“在语义层面上”听到的音乐有相似之处。

如果你想听一些重建的大脑活动音乐，谷歌为该研究建立了一个网页，其中包含原始刺激和重建的内容。

研究团队还揭示了限制AI音乐质量的三个因素：

fMRI数据中包含的信息在时间和空间上都非常稀疏(观察到的区域大小为2×2×2mm 3 ，比人类神经元大许多数量级)。

音乐嵌入中包含的信息，我们从中重建音乐(我们使用 MuLan，其中 10 秒的音乐仅由 128 个数字表示)。

我们的音乐生成系统的局限性。当我们研究 MusicLM时，我们发现它在遵循文本提示的方式和生成音频的保真度方面都有改进的空间。

标签：

新闻快讯

X 关闭

X 关闭