摘要

近日,2020年IEEE計(jì)算機(jī)視覺(jué)與模式識(shí)別會(huì)議(IEEE Conference on Computer Vision and Pattern Recognition,CVPR)落下帷幕,韓曉光博士團(tuán)隊(duì)的研究工作“Total3DUnderstanding: Joint Layout, Object Pose and Mesh Reconstruction for Indoor Scenes from a Single Image”入圍最佳論文提名(比例為會(huì)議投稿總數(shù)的0.4%)。在2019年,韓曉光博士團(tuán)隊(duì)也有研究工作入圍CVPR2019最佳論文提名(0.8%)。

會(huì)議簡(jiǎn)介

CVPR是由美國(guó)電氣及電子工程師學(xué)會(huì)(IEEE)組織的計(jì)算機(jī)視覺(jué)領(lǐng)域最權(quán)威的國(guó)際會(huì)議之一,每年一屆,與ICCV(計(jì)算機(jī)視覺(jué)國(guó)際會(huì)議)和ECCV(歐洲計(jì)算機(jī)視覺(jué)會(huì)議)并列為計(jì)算視覺(jué)領(lǐng)域最頂級(jí)的三大國(guó)際會(huì)議。

國(guó)際計(jì)算機(jī)視覺(jué)領(lǐng)域普遍認(rèn)為,CVPR/ICCV/ECCV三大會(huì)議代表了計(jì)算機(jī)視覺(jué)領(lǐng)域的旗艦和風(fēng)向標(biāo)。較之Poster Paper(海報(bào)論文),Oral Paper(口頭論文)一般有更高的學(xué)術(shù)水準(zhǔn)。每年舉行的CVPR還會(huì)從入圍最佳論文提名的極少數(shù)優(yōu)秀論文中評(píng)選最佳論文(Best Paper Award)和最佳學(xué)生論文(Best Student Paper Award)。

?

圖 1. 結(jié)果展示:第一列為輸入圖片,第二列為預(yù)測(cè)出的三維包圍盒,第三列為場(chǎng)景三維重建結(jié)果。

韓曉光博士團(tuán)隊(duì)入圍CVPR2020最佳論文候選的論文題目是“Total3DUnderstanding: Joint Layout, Object Pose and Mesh Reconstruction for Indoor Scenes from a Single Image”,為我校與深圳市大數(shù)據(jù)研究院、英國(guó)伯恩茅斯大學(xué)及廈門(mén)大學(xué)合作共同完成,第一作者為我校訪(fǎng)問(wèn)學(xué)生聶隱愚,韓曉光博士為唯一通訊作者。

?

該工作致力于從單張圖片完整地恢復(fù)整個(gè)室內(nèi)場(chǎng)景的幾何信息,包括預(yù)測(cè)房間的布局、相機(jī)的位置與姿態(tài)、圖片中單個(gè)物體的姿態(tài)以及物體幾何形狀。通過(guò)對(duì)各個(gè)子任務(wù)進(jìn)行聯(lián)合學(xué)習(xí),該方法在所有子任務(wù)上都達(dá)到了最先進(jìn)的水平,得到了審稿人的一致好評(píng),最終被錄取為Oral Paper(口頭論文)并入圍最佳論文提名。

論文詳細(xì)內(nèi)容請(qǐng)見(jiàn):

https://arxiv.org/abs/2002.12212

中文介紹請(qǐng)見(jiàn):CVPR'20 Oral: 一張照片三維重建你的房間 | 將門(mén)好聲音

據(jù)悉,韓曉光博士團(tuán)隊(duì)的另一篇工作FPConv: Learning Local Flattening for Point Convolution也被CVPR2020收錄,為我校與深圳市大數(shù)據(jù)研究院,中國(guó)科技大學(xué)及快手科技合作完成。第一作者林逸群為我校研究型碩士生(Mphil),由我校崔曙光教授和韓曉光博士共同指導(dǎo),韓曉光博士為通訊作者。

論文詳細(xì)內(nèi)容請(qǐng)見(jiàn):

https://arxiv.org/pdf/2002.10701.pdf

中文介紹請(qǐng)見(jiàn):三維變二維,無(wú)需體素化!港中文提出用于點(diǎn)云卷積的局域展平網(wǎng)絡(luò)模塊FPConv

?

入圍CVPR2019最佳論文候選的研究工作為“A Skeleton-bridged Deep Learning Approach for Generating Meshes of Complex Topologies from Single RGB Images”。

該論文為我校與深圳大數(shù)據(jù)研究院、華南理工大學(xué)和微軟亞洲研究院合作共同完成,第一作者為我校暑期訪(fǎng)問(wèn)學(xué)生唐佳鵬,韓曉光博士為共同第一作者。該工作提出了一種全新的基于骨架表達(dá)的三維幾何深度學(xué)習(xí)算法,非常有效地解決了計(jì)算機(jī)視覺(jué)中一個(gè)非常具有挑戰(zhàn)性的問(wèn)題——從單視角圖像中重建完整的三維物體。本工作受到會(huì)議評(píng)審者的一致好評(píng),三位評(píng)審者均給出了強(qiáng)烈接收(Strong Accept)的意見(jiàn)。

論文詳細(xì)內(nèi)容請(qǐng)見(jiàn)

https://arxiv.org/pdf/1903.04704.pdf

中文介紹請(qǐng)見(jiàn):CVPR 2019 | 基于骨架表達(dá)的單張圖片三維物體重建方法

教授簡(jiǎn)介

?

韓曉光教授

韓曉光,博士,現(xiàn)任香港中文大學(xué)(深圳)研究助理教授以及深圳市大數(shù)據(jù)研究院研究科學(xué)家,其研究方向包括計(jì)算機(jī)視覺(jué)、計(jì)算機(jī)圖形學(xué)、虛擬現(xiàn)實(shí)和醫(yī)療圖像處理等,在該方向著名國(guó)際期刊和會(huì)議發(fā)表論文近30篇,包括頂級(jí)會(huì)議和期刊SIGGRAPH,CVPR,ICCV,AAAI,ACM TOG, IEEE TIP,IEEE TVCG等。他的工作曾獲得計(jì)算機(jī)圖形學(xué)頂級(jí)會(huì)議Siggraph Asia 2013新興技術(shù)最佳演示獎(jiǎng),入選2016年年度最佳計(jì)算論文之一,以及2019年和2020年計(jì)算機(jī)視覺(jué)頂級(jí)會(huì)議CVPR連續(xù)兩年入選最佳論文提名(入選率分別為0.8%和0.4%),他的團(tuán)隊(duì)于2018年11月獲得IEEE ICDM 全球氣象挑戰(zhàn)賽冠軍(參賽隊(duì)伍1700多)。