「AI新青年講座」將邀請(qǐng)世界頂尖AI研究機(jī)構(gòu)和大學(xué)的科研新青年，主講他們?cè)谟?jì)算機(jī)視覺、機(jī)器學(xué)習(xí)等人工智能領(lǐng)域的最新重要研究成果。
AI新青年是加速人工智能前沿研究的新生力量。AI新青年的視頻講解和直播答疑，將可以幫助大家增進(jìn)對(duì)人工智能前沿研究的理解，相應(yīng)領(lǐng)域的專業(yè)知識(shí)也能夠得以積累加深。同時(shí)，通過與AI新青年的直接交流，大家在AI學(xué)習(xí)和應(yīng)用AI的過程中遇到的問題，也能夠盡快解決。
有興趣分享學(xué)術(shù)成果的朋友，可以與智東西公開課教研團(tuán)隊(duì)進(jìn)行郵件（class@zhidx.com）聯(lián)系。
在所有的圖形學(xué)技術(shù)中，高動(dòng)態(tài)范圍全景貼圖（HDRI）能夠提供逼真的場(chǎng)景光照和沉浸式的環(huán)境紋理，然而能夠直接應(yīng)用的HDRI需要有足夠多的場(chǎng)景細(xì)節(jié)、極高的分辨率和記錄光照的高動(dòng)態(tài)范圍，這使得不論是采集還是編輯HDRI都變得十分困難和昂貴。
那么能否使用圖像生成模型來合成HDRI呢？
南洋理工大學(xué)MMLab在讀博士陳昭熹等人提出了一個(gè)基于零次學(xué)習(xí)文字驅(qū)動(dòng)的HDR全景圖合成框架Text2Light，能夠根據(jù)輸入的場(chǎng)景描述合成分辨率超4K的具有高動(dòng)態(tài)范圍的全景圖。
Text2Light主要由兩個(gè)階段組成，分別對(duì)應(yīng)著離散和連續(xù)的兩種不同的表征。階段一通過使用基于層級(jí)碼本的離散表征，來實(shí)現(xiàn)文本驅(qū)動(dòng)的低動(dòng)態(tài)范圍全景圖合成；階段二通過使用基于結(jié)構(gòu)化球面場(chǎng)的連續(xù)表征，來實(shí)現(xiàn)超分辨率逆向色調(diào)映射，將階段一的低動(dòng)態(tài)范圍全景圖轉(zhuǎn)化為高動(dòng)態(tài)范圍的高清全景圖。
Text2Light能夠根據(jù)任意輸入文本來合成高清HDR全景圖，生成的結(jié)果提供逼真的環(huán)境光照，且可以直接應(yīng)用在Blender、UE、Maya等現(xiàn)代圖形學(xué)渲染管線中，直接渲染數(shù)字資產(chǎn)。
11月21日晚7點(diǎn)，「AI新青年講座」第172講邀請(qǐng)到南洋理工大學(xué)MMLab在讀博士陳昭熹參與，主講《利用文本生成虛擬HDR全景圖》。
講 者
陳昭熹，南洋理工大學(xué)MMLab在讀博士
師從劉子緯教授，本科畢業(yè)于清華大學(xué)；研究興趣為三維計(jì)算機(jī)視覺和生成模型，尤其在三維數(shù)字內(nèi)容生成和神經(jīng)渲染方面，曾在ICCV、ECCV、SIGGRAPH Asia上發(fā)表多篇學(xué)術(shù)論文。
主 題
利用文本生成虛擬HDR全景圖
提 綱
1、HDRI高動(dòng)態(tài)范圍全景貼圖應(yīng)用的局限
2、利用文本生成全景圖面臨的挑戰(zhàn)
3、零次學(xué)習(xí)文字驅(qū)動(dòng)的HDR全景圖生成框架
4、分辨率超4K的360度全景圖生成
直播信息
直播時(shí)間：11月21日19：00
直播地點(diǎn)：智東西公開課知識(shí)店鋪
成 果
Text2Light：《Text2Light: Zero-Shot Text-Driven HDR Panorama Generation》
論文鏈接：https://arxiv.org/pdf/2209.09898.pdf
開源代碼：https://github.com/FrozenBurning/Text2Light
