Echo

Echo 关注TA

大家好,我是Echo!

Echo

Echo

关注TA

大家好,我是Echo!

  •  普罗旺斯
  • 自由职业
  • 写了309,546,688字

该文章投稿至Nemo社区   资讯  板块 复制链接


中国团队推出脑电图图像生成模型 DreamDiffusion,清华、腾讯参与研究

发布于 2023/07/05 16:22 476浏览 0回复 696

IT之家 7 月 5 日消息,清华大学深圳国际研究生院、腾讯人工智能实验室(AI Lab)和鹏城实验室的研究人员近日发表论文称,研究团队开发了一个名为 DreamDiffusion 的图像生成模型,该模型可以直接通过脑电图(EEG)信号生成高质量图像。相关论文发表于美国康奈尔大学旗下在线学术论文平台 arXiv 上。

图形用户界面, 应用程序

▲ 图源 研究团队论文(下同)

目前已有不少团队研究了使用文本到图像的扩散模型从人脑生成图像的方法,但大多数采用的都是功能性磁共振成像(fMRI)技术捕捉大脑活动从而生成图像。这种技术缺乏实用性,因为它需要专家操作并且需要昂贵且难以携带的 fMRI 设备。

图示

相比之下,脑电图是一种记录大脑电波活动的非侵入性、低成本方法,且已有一些便携式商业产品可以轻松采集脑电图信号。于是,研究团队提出了一种“稳定扩散”的图像生成方法,能够减少脑电图信号的噪声干预,使扩散模型的预训练更稳定有效。

研究团队向 6 位受试者展示了属于 40 个不同对象类别的 2000 张图像,进而通过采集受试者的脑电图信号来生成高质量图像。下图中虚线左边的图像是原始图像,虚线右边的图像为脑电图生成图像。

为了评估该方法的准确性,研究团队将其与最近的另一项类似研究 Brain2Image 进行了定性比较,结果证实,其准确率明显高于 Brain2Image 生成的图像,从而证明了该方法的有效性。

IT之家附上论文地址点此前往

广告声明:本文含有的对外跳转链接(包括不限于超链接、二维码、口令等形式),用于传递更多信息,节省甄选时间,结果仅供参考。IT之家所有文章均包含本声明。


本文由LinkNemo爬虫[Echo]采集自[https://www.ithome.com/0/703/917.htm]

本文标签
 {{tag}}
点了个评