祝賀｜張康教授團(tuán)隊(duì)項(xiàng)目入選2024年國(guó)家社科基金文化遺產(chǎn)保護(hù)傳承研究專項(xiàng)
近日，全國(guó)哲學(xué)社會(huì)科學(xué)工作辦公室公示了《2024年國(guó)家社科基金文化遺產(chǎn)保護(hù)傳承研究專項(xiàng)》立項(xiàng)名單，香港科技大學(xué)（廣州）信息樞紐計(jì)算機(jī)媒體與藝術(shù)（CMA）學(xué)域主任張康教授團(tuán)隊(duì)的“文化遺產(chǎn)保護(hù)傳承中的前沿科技應(yīng)用研究”項(xiàng)目入選。這是我校獲批的首個(gè)國(guó)家社科基金重大項(xiàng)目，標(biāo)志著中外合作辦學(xué)（含內(nèi)地與香港合作辦學(xué)）在國(guó)家社科基金類項(xiàng)目申請(qǐng)上實(shí)現(xiàn)了重要突破。
文化遺產(chǎn)保護(hù)傳承中的前沿科技應(yīng)用研究
文化遺產(chǎn)作為歷史文明見證，其保護(hù)傳承對(duì)文化連續(xù)性和歷史再現(xiàn)至關(guān)重要。該研究以中國(guó)文化遺產(chǎn)為研究對(duì)象，通過(guò)前沿?cái)?shù)字技術(shù)對(duì)文化遺產(chǎn)進(jìn)行保護(hù)、傳承和創(chuàng)新性傳播。整體框架涵蓋從數(shù)據(jù)收集及內(nèi)容創(chuàng)作、美學(xué)度量與分析、三維場(chǎng)景數(shù)字化重建及文化遺產(chǎn)傳承的全流程，旨在實(shí)現(xiàn)文化遺產(chǎn)的數(shù)字化、交互化和可持續(xù)性保護(hù)與傳承。
該項(xiàng)目由四個(gè)子課題構(gòu)成。
子課題1：文化遺產(chǎn)視覺特征的精確內(nèi)容生成技術(shù)創(chuàng)新
負(fù)責(zé)人：計(jì)算媒體與藝術(shù)學(xué)域許丕文副教授
作為項(xiàng)目基礎(chǔ)，致力于解決當(dāng)前生成性AI模型在中華文化遺產(chǎn)內(nèi)容復(fù)現(xiàn)與生成中的精度和真實(shí)性問(wèn)題，通過(guò)融合前沿的大語(yǔ)言模型與圖像擴(kuò)散技術(shù)，構(gòu)建一個(gè)深度理解文化視覺特征的多模態(tài)數(shù)據(jù)集成與處理平臺(tái)，整合圖像、文本、視頻和音頻等多元數(shù)據(jù)，全面捕捉文化遺產(chǎn)的視覺特征，創(chuàng)新開發(fā)一系列帶有文化遺產(chǎn)視覺特征的內(nèi)容生成模型（圖1），實(shí)現(xiàn)對(duì)文化遺產(chǎn)內(nèi)容的精確復(fù)現(xiàn)與生動(dòng)呈現(xiàn)，為后續(xù)子課題提供堅(jiān)實(shí)的數(shù)據(jù)基礎(chǔ)和內(nèi)容資源，為文化遺產(chǎn)的數(shù)字化保護(hù)、傳承與創(chuàng)新提供強(qiáng)有力的技術(shù)支撐。
子課題2：美學(xué)度量與分析
負(fù)責(zé)人：計(jì)算媒體與藝術(shù)學(xué)域主任張康教授利用專家知識(shí)整合和美學(xué)特征提取技術(shù)，建立評(píng)分系統(tǒng)和數(shù)據(jù)驅(qū)動(dòng)模型，解決當(dāng)前美學(xué)評(píng)估方法主觀性強(qiáng)、缺乏系統(tǒng)性、技術(shù)手段單一、適用范圍有限等問(wèn)題，為全面量化文化遺產(chǎn)的美學(xué)價(jià)值提供技術(shù)支持。本課題將為國(guó)畫（圖2）、書法、壁畫、浮雕、服裝設(shè)計(jì)、地毯、剪紙等領(lǐng)域的內(nèi)容生成提供美學(xué)標(biāo)準(zhǔn)，確保生成內(nèi)容的文化和藝術(shù)價(jià)值。
子課題3：三維場(chǎng)景與數(shù)字化重建
負(fù)責(zé)人：計(jì)算媒體與藝術(shù)學(xué)域、人工智能學(xué)域王澤宇助理教授計(jì)劃通過(guò)高精度的三維掃描設(shè)備和智能重建技術(shù)對(duì)文化遺產(chǎn)場(chǎng)景進(jìn)行三維數(shù)據(jù)的采集與分析，為文化遺產(chǎn)保護(hù)傳承提供更加準(zhǔn)確和高質(zhì)量的數(shù)據(jù)基礎(chǔ)。采用基于圖像的修復(fù)方法和半自動(dòng)化的深度輪廓提取技術(shù)將實(shí)現(xiàn)對(duì)壁畫、雕刻、建筑結(jié)構(gòu)的數(shù)字化修復(fù)和重現(xiàn)（圖3）。此外，結(jié)合數(shù)字人重建和VR/AR技術(shù)，將為參觀者構(gòu)建更加真實(shí)的沉浸式互動(dòng)體驗(yàn)，提升文化遺產(chǎn)保護(hù)效果和公眾參與度。
子課題4：文化遺產(chǎn)傳承
負(fù)責(zé)人：計(jì)算媒體與藝術(shù)學(xué)域、數(shù)據(jù)科學(xué)與分析學(xué)域曾偉助理教授旨在構(gòu)建一個(gè)能夠統(tǒng)一展示文本、圖像和三維模型的多模態(tài)數(shù)據(jù)可視化系統(tǒng)。利用數(shù)字化傳播手段和教育推廣，推動(dòng)文化遺產(chǎn)的廣泛傳承。本課題通過(guò)研究多類型的原始數(shù)據(jù)整合，提取多模態(tài)數(shù)據(jù)的核心特征，并利用多模態(tài)嵌入技術(shù)將特征統(tǒng)一映射到同一空間，實(shí)現(xiàn)不同模態(tài)間的對(duì)齊。其次，在語(yǔ)義層面，該課題通過(guò)構(gòu)建知識(shí)圖譜關(guān)聯(lián)文本、圖像和三維模型中的信息，并借助多模態(tài)注意力機(jī)制實(shí)現(xiàn)跨模態(tài)融合（圖4）。增強(qiáng)多模態(tài)數(shù)據(jù)的表達(dá)和互操作性，提升對(duì)文化遺產(chǎn)的數(shù)字化保護(hù)和傳播能力。
項(xiàng)目負(fù)責(zé)人，兼子課題2負(fù)責(zé)人：張康，教授，計(jì)算媒體與藝術(shù)學(xué)域主任
張康教授獲得多項(xiàng)國(guó)家級(jí)和省級(jí)人才稱號(hào)，目前擔(dān)任香港科技大學(xué)(廣州)信息樞紐計(jì)算媒體與藝術(shù)學(xué)域主任和教授，同時(shí)也是美國(guó)德克薩斯大學(xué)達(dá)拉斯分校計(jì)算機(jī)科學(xué)榮譽(yù)教授和中國(guó)美術(shù)學(xué)院文創(chuàng)中心客座教授。被列入2023/2024年斯坦福大學(xué)全球前2%頂尖科學(xué)家(World’s Top 2% Scientists)終身科學(xué)影響力榜單。他曾是Fulbright Distinguished Chair，在英國(guó)、澳大利亞和美國(guó)任教35年。發(fā)表過(guò)8本論著、120多篇國(guó)際期刊論文和200多篇國(guó)際會(huì)議論文。張康教授共直接指導(dǎo)并畢業(yè)了20多名博士和數(shù)十名碩士研究生。他的研究跨越計(jì)算機(jī)、心理學(xué)、建筑、管理、藝術(shù)和設(shè)計(jì)等學(xué)科，應(yīng)邀在多個(gè)計(jì)算機(jī)科學(xué)、藝術(shù)、設(shè)計(jì)、圖書館學(xué)和管理科學(xué)國(guó)際會(huì)議上發(fā)表主旨演講?，F(xiàn)任VINCI國(guó)際會(huì)議的指導(dǎo)委員會(huì)主席，多個(gè)國(guó)際期刊副主編和編委。
子課題1負(fù)責(zé)人：許丕文，副教授
許丕文博士在加拿大滑鐵盧大學(xué)獲得了電子與計(jì)算機(jī)工程博士學(xué)位。目前在香港科技大學(xué)(廣州)擔(dān)任計(jì)算媒體與藝術(shù)副教授，博士生導(dǎo)師，研究興趣集中在人工智能和多媒體在藝術(shù)、媒體、文化和人類創(chuàng)造力方面的應(yīng)用。他曾在卡塔爾博物館擔(dān)任訪問(wèn)藝術(shù)家，其藝術(shù)作品曾在卡塔爾、阿聯(lián)酋、韓國(guó)、澳大利亞、泰國(guó)、中國(guó)和其他國(guó)家展出。他還擔(dān)任ACM多媒體計(jì)算、通信與應(yīng)用期刊(2014年至今)和IEEE多媒體期刊(2015-2023)的副主編。他在多媒體、人工智能藝術(shù)和媒體、社交計(jì)算、媒體和交互系統(tǒng)、媒體藝術(shù)和應(yīng)用等領(lǐng)域發(fā)表了50多篇頂級(jí)IEEE/ACM期刊論文、60多篇會(huì)議論文，其中有2篇在頂級(jí)會(huì)議中獲得了最佳論文獎(jiǎng)。許博士在將研究成果應(yīng)用到產(chǎn)生實(shí)際影響力的諸多領(lǐng)域成果頗豐，他策劃了13個(gè)藝術(shù)展覽，擁有11項(xiàng)專利，開發(fā)了2項(xiàng)軟件和硬件。受邀擔(dān)任多個(gè)國(guó)際會(huì)議主席和編委，如ACM Multimedia、IEEE ICME、ACM VINCI、IEEE SocialCom和IEEE PhoneCom等。
子課題3負(fù)責(zé)人：王澤宇，助理教授
王澤宇，香港科技大學(xué)(廣州)信息樞紐計(jì)算媒體與藝術(shù)學(xué)域、人工智能學(xué)域助理教授，香港科技大學(xué)新興跨學(xué)科領(lǐng)域?qū)W部、計(jì)算機(jī)科學(xué)與工程系聯(lián)署助理教授，創(chuàng)意智能協(xié)同實(shí)驗(yàn)室(Creative Intelligence and Synergy Lab)負(fù)責(zé)人。于耶魯大學(xué)計(jì)算機(jī)科學(xué)系獲得博士學(xué)位，于北京大學(xué)智能科學(xué)系獲得榮譽(yù)學(xué)士學(xué)位。研究方向?yàn)橛?jì)算機(jī)圖形學(xué)、人機(jī)交互、人工智能、數(shù)字文化遺產(chǎn)，已在包括TOG, SIGGRAPH, TVCG, CHI, CVPR, VR在內(nèi)的重要國(guó)際期刊和會(huì)議上發(fā)表40余篇學(xué)術(shù)論文。擔(dān)任Eurographics等國(guó)際會(huì)議的程序委員，CCF-CAD&CG, CCF-VRV, CSIG-3DV等專委會(huì)和GAMES執(zhí)行委員。入選國(guó)家級(jí)高層次人才計(jì)劃青年項(xiàng)目、CCF-騰訊犀牛鳥基金、Adobe研究基金，并獲得最佳論文獎(jiǎng)、多項(xiàng)最佳提名獎(jiǎng)等榮譽(yù)。
子課題4負(fù)責(zé)人：曾偉，助理教授
曾偉博士，香港科技大學(xué)(廣州)計(jì)算媒體與藝術(shù)學(xué)域、數(shù)據(jù)科學(xué)與分析學(xué)域助理教授，博士生導(dǎo)師，新加坡南洋理工大學(xué)計(jì)算機(jī)專業(yè)本科(2011)和博士(2015)學(xué)位。研究聚焦于交互式數(shù)據(jù)可視化方法，融合人工智能與人類認(rèn)知推理能力，研究成果廣泛應(yīng)用于智慧城市和AIGC等領(lǐng)域。發(fā)表論文80余篇，包括30余篇CCF A/B類和20余篇IEEE/ACM Transactions一作/通訊高水平論文，曾獲VINCI、ChinaVis、ICIV最佳論文獎(jiǎng)及提名獎(jiǎng)?，F(xiàn)任The Visual Computer、Visual Informatics編委，VINCI 2023國(guó)際會(huì)議程序委員會(huì)主席，并長(zhǎng)期擔(dān)任IEEE VIS、ChinaVis、VINCI等國(guó)際會(huì)議的程序委員會(huì)委員。
營(yíng)輪播大圖-e1745892750165-1024x500.jpg)
