Brain2Music：从大脑活动重建音乐

Brain2Music: Reconstructing Music from Human Brain Activity

Timo I. Denk, Yu Takagi, Takuya Matsuyama, Andrea Agostinelli, Tomoya Nakai, Christian Frank, Shinji Nishimoto
[Osaka University]

动机：探索从人脑活动重建体验的过程，通过功能性磁共振成像(fMRI)捕捉音乐，并介绍一种方法来从脑活动中重建音乐。
方法：使用功能性磁共振成像(fMRI)捕捉音乐，并用音乐检索或MusicLM音乐生成模型结合fMRI数据的嵌入来重建音乐。通过像素级编码建模分析，研究MusicLM不同组成部分与脑活动之间的关系。
优势：实现了从脑活动重建音乐，生成的音乐在语义属性(如类型、乐器和情绪)方面与人类体验的音乐相似。

介绍了一种从大脑活动重建音乐的方法，通过功能性磁共振成像(fMRI)和MusicLM音乐生成模型，实现了生成与原始音乐语义相似的音乐。

内容中包含的图片若涉及版权问题，请及时与我们联系删除