「騰訊優(yōu)圖實驗室專場」是騰訊優(yōu)圖實驗室在智東西公開課開設(shè)的系列專場，主要講解騰訊優(yōu)圖實驗室在計算機(jī)視覺領(lǐng)域的最新研究成果與進(jìn)展。
從7月開始，騰訊優(yōu)圖實驗室研究員興甲、志文、丹迪、繁續(xù)和佳祥五位老師，先后直播講解了《弱監(jiān)督目標(biāo)定位的研究及應(yīng)用》、《多模態(tài)圖文內(nèi)容的識別與定位》、《開源推理框架TNN模型部署加速與優(yōu)化》和《基于模型剪枝的高效模型設(shè)計方法》。錯過直播的朋友可以點擊“閱讀原文”觀看。
12月15日晚7點，騰訊優(yōu)圖實驗室高級研究員振宇將圍繞《人臉3D重建前沿研究及熱點趨勢》這一主題帶來第6講的直播講解。
人臉3D重建是計算機(jī)視覺和圖形學(xué)領(lǐng)域研究的重要問題，在社交、游戲、影視等行業(yè)有廣泛的應(yīng)用。目前，人臉3D重建既可以通過學(xué)習(xí)調(diào)節(jié)參數(shù)化人臉模板來實現(xiàn)，也可以根據(jù)光線與幾何間的相互作用來推斷。
通過調(diào)節(jié)參數(shù)化人臉模板的方法主要是借助有效的先驗輔助來進(jìn)行求解，像經(jīng)典的人臉3DMM優(yōu)化方法，但由于這些先驗知識表達(dá)能力有限，通常無法獲得令人滿意的重建效果，這使得擺脫先驗知識依賴的非參數(shù)化人臉重建方法，逐漸受到了大家的關(guān)注。但因為沒有可靠的先驗知識，該方法容易受到輸入圖像質(zhì)量的影響。而根據(jù)光線與幾何間的相互作用推斷的方法，重建結(jié)果的好壞一般由人像再光照任務(wù)來評估，人像再光照通常會采用基于光場相機(jī)采集的數(shù)據(jù)學(xué)習(xí)方法和球諧光方法，但這兩種方法都面臨這一些挑戰(zhàn)，像前者會耗費(fèi)大量的人力物力且泛化性差，后者則無法模擬真實世界的環(huán)境光照。
針對非參數(shù)化人臉重建易受輸入圖像質(zhì)量影響的問題，騰訊優(yōu)圖實驗室提出了一種基于開放圖像集合的非參數(shù)化人臉重建方法。該方法利用合成數(shù)據(jù)和課程學(xué)習(xí)，將圖像集合信息引入到訓(xùn)練過程中，使得非參數(shù)化方法也能夠受限于ID一致性的約束，有效提升了人臉重建結(jié)果的細(xì)節(jié)和魯棒性。
而對于人像再識別方法存在的成本高、泛化性差且無法模擬真實世界的環(huán)境光照的難點，騰訊優(yōu)圖又提出了一種基于物理本征學(xué)習(xí)的人像再光照方法，該方法首先對輸入的人臉圖像完成物理的本征分解，之后利用課程學(xué)習(xí)的，且基于可微分光線追蹤的優(yōu)化方法，生成了一個大規(guī)模人臉本征數(shù)據(jù)庫，并利用神經(jīng)網(wǎng)絡(luò)進(jìn)一步提升了本征分解的真實度。通過該方法預(yù)測的人臉本征分量，能夠很好的模擬真實環(huán)境光線條件下不同的人像光照效果。
在本次專場中，振宇老師將對上面的兩種方法進(jìn)行詳細(xì)分析，并就人臉3D重建的研究熱點和未來趨勢給出自己的見解。
振宇是騰訊優(yōu)圖實驗室高級研究員，南京理工大學(xué)計算機(jī)視覺專業(yè)博士，2018-2019赴意大利特倫托大學(xué)公派訪問。他專注于3D視覺相關(guān)領(lǐng)域前沿研究，研究方向涉及人臉3D重建、場景3D重建與深度估計以及多任務(wù)與遷移學(xué)習(xí)等。同時振宇老師在CVPR、ECCV、ICCV、AAAI、TPAMI等頂會頂刊發(fā)表多篇文章，同時擔(dān)任AAAI、CVPR、TNNLS等多個會議及期刊審稿人。
本次專場包含主講和問答兩個部分，其中主講環(huán)節(jié)40分鐘，問答環(huán)節(jié)20分鐘。同時，我們還組建了技術(shù)交流群，并邀請振宇老師進(jìn)群，歡迎大家申請！
主題
人臉3D重建前沿研究及熱點趨勢
提綱
1、人臉3D重建方法與發(fā)展現(xiàn)狀
2、基于開放圖像集合的非參數(shù)化人臉重建
3、模擬真實環(huán)境光線條件的人像再光照方法
4、研究熱點與趨勢分析
講師介紹
振宇，騰訊優(yōu)圖實驗室高級研究員，南京理工大學(xué)計算機(jī)視覺專業(yè)博士，2018-2019赴意大利特倫托大學(xué)公派訪問；專注3D視覺相關(guān)領(lǐng)域前沿研究，研究方向涉及人臉3D重建、場景3D重建與深度估計以及多任務(wù)與遷移學(xué)習(xí)等；在CVPR、ECCV、ICCV、AAAI、TPAMI等頂會頂刊發(fā)表多篇文章，同時擔(dān)任AAAI、CVPR、TNNLS等多個會議及期刊審稿人。
課程信息
直播時間：12月15日19：00
直播地點：智東西公開課知識店鋪
