記者 任娜 通訊員 王格
“上傳一張缺損的永樂宮《朝元圖》諸神朝拜局部圖,短短5秒,缺損處便被精準補全,肉眼難辨修復痕跡!”近日,在西安電子科技大學人工智能學院實驗室,焦李成教授團隊研發的“絲路逸旅:文旅資源修復與生成基礎模型”現場演示,讓古代壁畫“一鍵煥新”。這一兼具文物修復與智慧文旅服務的AI創新成果,正為陜西文旅高質量發展注入科技新動能。
智能“診療+精準補全”
為數字化修復開“藥方”
對于毫無歷史、考古等專業背景的團隊來說,在沒有高質量原圖參考的情況下,如何將壁畫修補正確且具有歷史性、藝術性,是面臨的第一個難題。
要想修補得好,首先就得對壁畫有正確的“診斷”。據介紹,為解決傳統病害勘察依賴人工、效率低且診斷難的痛點,“絲路逸旅”模型搭載了端到端“壁畫病害檢測與分析”方案,從壁畫病害的檢測、分析到修復方案的生成,全過程都可實現無人工干預的自動化智能處理。
這個大模型怎樣為壁畫做“診斷”呢?團隊成員、博士二年級的高子涵把有所殘缺的《唐惠妃武氏墓山水屏風》和《韓休墓山水圖》電子版依次上傳到系統中,便可一鍵生成圖文并茂的文物“體檢報告”。在這份“報告”中可以很清晰地看到系統用藍色、紫色、白色和黑色在原圖中標注出的代表剝落、褪色、霉斑、裂縫等病害,對相應區域給出壁畫病害類別定義、病害程度分析,并提出“霉斑去除”、“補充線條”等對策,甚至可給出使用何種礦物顏料進行填補的精細化建議。高子涵邊演示邊說,“這個方案以視覺分割網絡和多模態基礎模型為內核,能夠實現對裂縫、剝落等病害區域的像素級精準識別,并通過知識檢索增強技術關聯考古文獻,給出分析和應對建議,不僅為數字化修復開出‘藥方’,還能為現實中的壁畫修補提供一定的輔助”。基于這樣一份全面的“體檢報告”,系統不僅能對因病害而導致的褪色、模糊等問題進行修復,還可對缺損的部分進行補全。
“不同歷史時期的壁畫、器物等都具有不同的歷史特征,我們前期花費了大量的時間用于數據和信息的收集,整個過程需要反復驗證,以保證修復后的準確度”,團隊成員、博士二年級的王子韜介紹道,“對于壁畫文物中無法考證的缺失部分,我們聯合相關單位提出了基于生成式大模型知識引導的壁畫補全方法”。通俗來講,生成式大模型就像一位善于學習的優秀學生,可以廣泛涉獵、準確理解學習到的歷史文獻和考古資料,并把所學到的內容進行結構化梳理,應用到模型對壁畫的修補過程中,從而確保補全內容在藝術風格、器物形制等方面均符合歷史事實與審美規范。
定制服務+多維交互
讓智慧文旅有料更有趣
在進行壁畫“查-修-補”的過程中,團隊成員開始越來越多地了解陜西歷史文化,也開始思考如何能讓游客擁有更好的文旅體驗。
“請幫助我搜集信息給出完整的旅游規劃,我想在西安安排三天的旅游行程,我患有三高,同時有兩個孩子,我又想在西安這個碳水之城盡可能的玩得痛快,我應該如何安排我們的飲食呢?并且通過協調的路徑規劃安排適當又不累,同時孩子也可以接受的城市City?walk ,然后讓文化體驗、科技體驗都拉滿。”輸入這樣一段需求,“絲路逸旅”大模型不僅會從行程總覽、飲食建議、行程特色、交通建議、注意事項等方面生成一份定制的旅行攻略,“我們相比于其他大模型會更精準一些,因為我們是跟當地文旅部門合作的,獲取到的信息更加全面準確”,團隊成員、博士二年級的張潔解釋道,“除了可以用文字提問,也可以上傳照片,我們的模型都可以為大家進行多語種的解答”。
上傳一張某游戲中的“瓊漿道具”的圖片,模型即可通過圖片檢索,發現其類似來通杯,指出在陜西歷史博物館中有相似展品“鑲金獸首瑪瑙杯”,定位出其珍藏于博物館負一層四號并給出路徑規劃建議,還可對來通杯的歷史來源進行問答和講解。這一模型將“人找信息”變為“信息找人”,為游客提供高質量的定制化伴隨化的智能服務,“經過與陜旅集團深度合作,我們面向游客需求,不斷地更新模型,不僅可以為游客旅行前和旅行中提供攻略、文博知識講解,還與西安市漢服文化協會、陜西國博政通信息科技有限公司聯合打造AI古風換裝、AI盲盒設計等服務”,團隊指導老師劉旭介紹道。
基于團隊在智能感知與影像解譯方面30余年的積累,“絲路逸旅”模型的研發不僅有著扎實的技術支撐,還匯集了文化遺產保護專家、旅游規劃專家等提供文博專業領域知識支持,經過兩年多持續的調研、分析、研發、優化,這一模型從最初的構想終于落地應用。未來,團隊將立足陜西文旅資源稟賦,聚焦文化傳承與智慧文旅需求,依托AI、大數據等技術,深耕歷史文化遺產數字化保護、智能推薦、沉浸式體驗等領域創新。通過科技與文化深度融合,拓展政企合作,以“西電方案”助力陜西智能化文物修復與國際級智慧文旅示范高地建設,推動優秀歷史文化創新傳播與可持續發展。
編輯: 陳戍
以上文章僅代表作者個人觀點,本網只是轉載,如涉及作品內容、版權、稿酬問題,請及時聯系我們。電話:029-63903870