「AI新青年講座」將邀請(qǐng)世界頂尖AI研究機(jī)構(gòu)和大學(xué)的科研新青年,主講他們?cè)谟?jì)算機(jī)視覺、機(jī)器學(xué)習(xí)等人工智能領(lǐng)域的最新重要研究成果。

AI新青年是加速人工智能前沿研究的新生力量。AI新青年的視頻講解和直播答疑,將可以幫助大家增進(jìn)對(duì)人工智能前沿研究的理解,相應(yīng)領(lǐng)域的專業(yè)知識(shí)也能夠得以積累加深。同時(shí),通過與AI新青年的直接交流,大家在AI學(xué)習(xí)和應(yīng)用AI的過程中遇到的問題,也能夠盡快解決。

「AI新青年講座」目前已完結(jié)207講,有興趣分享學(xué)術(shù)成果的朋友,可以與智東西公開課教研團(tuán)隊(duì)進(jìn)行郵件(class@zhidx.com)聯(lián)系。

有沒有一瞬間,你要把自己腦子里的東西掏出來給別人看,或者是撬開別人的腦子看看里面都裝了什么?來自新加坡國立大學(xué),香港中文大學(xué),和Stanford的研究者們,基于擴(kuò)散模型實(shí)現(xiàn)了從腦電波還原圖像的“人類視覺解碼器”——MinD-Vis。

MinD-Vis框架可通過腦圖像生成高度逼真的視覺刺激。其創(chuàng)新之處在于MinD-Vis能夠在極少的訓(xùn)練樣本情況下,從腦信號(hào)中重建出高度逼真、語義匹配的圖像。這項(xiàng)研究也能促進(jìn)腦機(jī)接口的發(fā)展并推動(dòng)對(duì)人類視覺系統(tǒng)的理解。

在進(jìn)行了定性和定量的基準(zhǔn)測(cè)試后發(fā)現(xiàn),MinD-Vis在語義映射(100路語義分類)和生成質(zhì)量(FID)方面都優(yōu)于最先進(jìn)的方法,分別達(dá)到66%和41%。

5月23日,「AI新青年講座」第208講邀請(qǐng)到MinD-Vis一作、新加坡國立大學(xué)在讀博士陳子?jì)蓞⑴c,主講《基于擴(kuò)散模型從腦信號(hào)中還原生成高度逼真圖像》。

講者
陳子?jì)?,新加坡國立大學(xué)在讀博士;由周涓教授指導(dǎo),主要研究方向?yàn)槎嗄B(tài)腦解碼與fMRI表征學(xué)習(xí),論文發(fā)表于CVPR、AD等計(jì)算機(jī)會(huì)議、醫(yī)學(xué)期刊。

第208講

主 題
《基于擴(kuò)散模型從腦信號(hào)中還原生成高度逼真圖像》

提 綱
1、腦機(jī)接口及人類視覺刺激解碼概述
2、面向視覺解碼的稀疏掩碼雙條件擴(kuò)散模型
3、極少訓(xùn)練樣本的MinD-Vis視覺解碼框架
4、生成質(zhì)量測(cè)試和未來展望

直 播 信 息
直播時(shí)間:5月23日19:00
直播地點(diǎn):智東西公開課知識(shí)店鋪

成果

論文標(biāo)題:《Seeing Beyond the Brain: Conditional Diffusion Model with Sparse Masked Modeling for Vision Decoding》
論文地址:https://arxiv.org/abs/2211.06956
開源地址:https://github.com/zjc062/mind-vis