IT之家今日(7月5日)消息,中国清华大学深圳国际研究生院、团队推出图图腾讯人工智能实验室(AI Lab)和鹏城实验室的脑电研究人员近日发表论文称,研究团队开发了一个名为DreamDiffusion的像生型清讯参图像生成模型,该模型可以直接通过脑电图(EEG)信号生成高质量图像。成模相关论文发表于美国康奈尔大学旗下在线学术论文平台arXiv上。华腾
目前已有不少团队研究了使用文本到图像的中国扩散模型从人脑生成图像的方法,但大多数采用的团队推出图图都是功能性磁共振成像(fMRI)技术捕捉大脑活动从而生成图像。这种技术缺乏实用性,脑电因为它需要专家操作并且需要昂贵且难以携带的像生型清讯参fMRI设备。
相比之下,华腾脑电图是研究一种记录大脑电波活动的非侵入性、低成本方法,中国且已有一些便携式商业产品可以轻松采集脑电图信号。于是,研究团队提出了一种“稳定扩散”的图像生成方法,能够减少脑电图信号的噪声干预,使扩散模型的预训练更稳定有效。
研究团队向6位受试者展示了属于40个不同对象类别的2000张图像,进而通过采集受试者的脑电图信号来生成高质量图像。下图中每组左边标有GT的是原始图像,右边的Sample图像为脑电图生成图像。
为了评估该方法的准确性,研究团队将其与最近的另一项类似研究Brain2Image进行了定性比较,结果证实,其准确率明显高于Brain2Image生成的图像,从而证明了该方法的有效性。
(责任编辑:知识)
中盈盛达融资担保(01543.HK)完成发行2.60亿元公司债 票面利率为4.60%
前10月全国规模以上工业发电同比增长10.0% 水电同比下降11.9%
超五成豫股公司前三季度营收净利双增长 营收超百亿元者达10家
王子新材(002735.SZ)拟收购中电华瑞49%股权 2月25日起复牌