「AI新青(qing)年(nian)講座(zuo)」將邀請(qing)世界頂尖AI研究機(ji)(ji)(ji)構和大學的科研新青(qing)年(nian)，主講他們在計算機(ji)(ji)(ji)視覺、機(ji)(ji)(ji)器學習(xi)等(deng)人工智能領(ling)域的最新重要研究成果。

AI新青年(nian)是加速人工智能前沿(yan)研(yan)究(jiu)的(de)(de)(de)新生(sheng)力量(liang)。AI新青年(nian)的(de)(de)(de)視頻講解(jie)和直播答疑，將可以幫助大家(jia)增進對人工智能前沿(yan)研(yan)究(jiu)的(de)(de)(de)理(li)解(jie)，相應領域的(de)(de)(de)專業知(zhi)識也(ye)能夠得以積累加深。同時，通(tong)過與(yu)AI新青年(nian)的(de)(de)(de)直接交流，大家(jia)在AI學習和應用AI的(de)(de)(de)過程中遇到(dao)的(de)(de)(de)問題，也(ye)能夠盡(jin)快(kuai)解(jie)決。

有興趣(qu)分享學術成果的朋(peng)友，可以與智東(dong)西公開課教研團隊進行郵(you)件（class@sanyasheying.cn）聯系。

在所有的(de)(de)(de)圖(tu)形學技(ji)術中，高(gao)動態范圍全景(jing)貼圖(tu)（HDRI）能夠(gou)提供逼(bi)真的(de)(de)(de)場景(jing)光照和沉浸式的(de)(de)(de)環境紋理，然而能夠(gou)直接應(ying)用的(de)(de)(de)HDRI需要有足夠(gou)多(duo)的(de)(de)(de)場景(jing)細節(jie)、極高(gao)的(de)(de)(de)分(fen)(fen)辨率和記錄光照的(de)(de)(de)高(gao)動態范圍，這(zhe)使得不論是(shi)采集還(huan)是(shi)編(bian)輯(ji)HDRI都(dou)變(bian)得十分(fen)(fen)困難和昂貴。

那么能否使用(yong)圖像生成模型來合成HDRI呢？

南(nan)洋理工大學(xue)MMLab在讀博(bo)士(shi)陳昭熹(xi)等人(ren)提出(chu)了一(yi)個基于零次學(xue)習文字(zi)驅動(dong)的HDR全景圖合(he)成框架Text2Light，能夠(gou)根據輸入的場景描(miao)述(shu)合(he)成分辨率(lv)超4K的具有高動(dong)態(tai)范圍的全景圖。

Text2Light主要由兩個階段(duan)(duan)組成(cheng)，分(fen)(fen)別對(dui)應著離(li)(li)散(san)和(he)連續的(de)(de)兩種不同(tong)的(de)(de)表征。階段(duan)(duan)一通(tong)過(guo)使(shi)用(yong)基(ji)于層(ceng)級碼本的(de)(de)離(li)(li)散(san)表征，來實現(xian)文本驅(qu)動(dong)的(de)(de)低動(dong)態(tai)范(fan)圍全景(jing)圖合成(cheng)；階段(duan)(duan)二通(tong)過(guo)使(shi)用(yong)基(ji)于結構化(hua)球面場的(de)(de)連續表征，來實現(xian)超分(fen)(fen)辨率逆向色調映射(she)，將(jiang)階段(duan)(duan)一的(de)(de)低動(dong)態(tai)范(fan)圍全景(jing)圖轉化(hua)為高動(dong)態(tai)范(fan)圍的(de)(de)高清全景(jing)圖。

Text2Light能夠根據(ju)任意輸(shu)入文(wen)本來合成高清HDR全(quan)景圖，生成的結果提(ti)供(gong)逼真的環境光照，且可以直接(jie)應用在(zai)Blender、UE、Maya等現代圖形學渲染(ran)管線中(zhong)，直接(jie)渲染(ran)數(shu)字資(zi)產(chan)。

11月21日晚7點，「AI新青年講座」第172講邀請到南洋理工大學MMLab在讀博士陳昭熹參與，主講《利用文本生成虛擬HDR全景圖》。

講 者

陳昭熹，南洋理工大學MMLab在讀博士
師(shi)從劉子緯教(jiao)授(shou)，本(ben)科(ke)畢業于清華大學；研究興趣為三維計算機視(shi)覺和生成模型，尤其在(zai)三維數(shu)字內容生成和神經渲染方面，曾在(zai)ICCV、ECCV、SIGGRAPH Asia上(shang)發表(biao)多篇學術(shu)論文。

主 題

利用(yong)文本(ben)生成虛擬HDR全景圖

提 綱

1、HDRI高動態范圍全景貼圖應用的局限
2、利用文本生成全景圖面臨的挑戰
3、零次學習文字驅動的HDR全景圖生成框架
4、分辨率超4K的360度全(quan)景圖生成

直播信息

直播時間：11月21日19：00
直播地點：智東西公(gong)開課(ke)知識(shi)店(dian)鋪

成 果

Text2Light：《Text2Light: Zero-Shot Text-Driven HDR Panorama Generation》
論文鏈接：//arxiv.org/pdf/2209.09898.pdf
開源(yuan)代碼：//github.com/FrozenBurning/Text2Light