8月16日，抖音、中國電影資料館、火山引擎在北京舉辦“再續時光-經典香港電影修復發布會”，宣布將對100部香港經典老電影進行4K修復，還原老港片的絕代風華。火山引擎為該計劃提供技術支持，與中國電影資料館一起對電影進行“AI+人工”修復。首批完成的4K精修影片包括《武狀元蘇乞兒》《A計劃》《蜀山·新蜀山劍俠》。
火山引擎首次將視覺大模型應用于老片修復場景，借助其強大的生成能力和豐富的先驗知識，實現修復效果在清晰度、色彩、流暢度和瑕疵消除等方面的全方位提升。
大模型首次用于影視修復
公開資料顯示，電影修復工藝繁雜瑣碎，一位經驗豐富的修復師需要1個月的時間，才可以修復完成一部影片。近些年，通過深度學習等AI技術，大幅提升老片修復的質量和效率成為可能。
“老片修復這件事情，其實我們每天都在做。”火山引擎視頻云技術架構總監王悅說，老片中常見的清晰度低、流暢度低、色彩失真、有瑕疵等畫質問題，在抖音的海量投稿里也廣泛存在。通過服務抖音，火山引擎在老片修復方面已經形成了一套較為完整的智能處理技術方案，曾攜手西瓜視頻和抖音，完成100部國產經典動畫和Beyond經典演唱會的4K修復。
新興的大模型技術也被首次運用到老片修復中。王悅介紹，一方面，大模型生成能力強，修復效果優于之前的算法，畫面細節更自然;另一方面，大模型具有非常強的信息結構化能力，在學習了海量數據對后，可以在其中提煉出大量的知識并“存儲”在模型參數之中，其生成空間更豐富，能夠應對更多的修復場景。
“打個比方，在‘看’過海量狗狗的照片后，大模型能學習并記住狗的樣子，可以更生動形象地‘畫’出一只狗。”王悅說。
但大模型強大的生成能力也是一把雙刃劍，其表現在一些場景下并不穩定，容易生成偽影或者虛假紋理等;以Stable Diffusion為代表的視覺大模型本身大多是基于圖片或者單幀的算法，在視頻這種多幀序列的場景下也存在效果和穩定性的問題。
針對老舊電影修復的特殊場景，火山引擎多媒體實驗室對視覺大模型做了三個層面的算法優化：在圖像生成方面，通過控制模型的邊界條件、強化高質量生成空間等手段，顯著提升大模型的圖像輸出質量;在視頻場景里，通過采用設計時域的自編碼器、光流特征對齊、時域條件約束等技術手段，讓大模型在修復的過程中可以使用前后幀的信息，更好地處理視頻任務;同時，火山引擎還攜手Intel在算法和工程上進行了多項優化，能顯著提升大模型在4K場景下的處理效率并兼顧算力成本。
《武狀元蘇乞兒》修復前后對比
算法助力經典文化傳承
據王悅介紹，對火山引擎多媒體實驗室的工程師來說，老港片修復最大的挑戰不是算法技術，而是如何保留影片原有的藝術風格。
“在很多影片的修復中，中國電影資料館都想方設法邀請當年的主創走入修復實驗室”，中國電影資料館副館長張小光表示，此次4K修復《武狀元蘇乞兒》，就得到了導演陳嘉上的藝術指導。
在這一過程中，火山引擎和中國電影資料館進行了多輪溝通和討論，經過不斷的測試和反復的調優，才達到算法服務于藝術的理想效果。以色偏和色彩的處理為例，此前的AI算法能夠完成和優化一系列客觀上色彩的問題，但對于部分藝術色彩上的還原容易產生偏差，火山引擎此次摸索了一種AI加速藝術修復的方案，能通過學習人工修復片段的數據獲得更理想的色彩方案效果，從而加速修復進程。
“我們在不斷思考，怎么讓過去的老片煥發新生。”王悅表示，“利用大模型算法進一步提升老片的修復質量，無論是從技術實踐還是從文化傳承的角度來看，都是一次有意義的嘗試。”
抖音副總裁陳都燁介紹，未來一年，《喋血雙雄》《阿郎的故事》等100部香港電影的4K修復版，也將陸續在抖音、西瓜視頻上線。
這100部香港電影制作時間集中在上世紀70年代到90年代，涵蓋陳嘉上、徐克、成龍、關錦鵬、周星馳等多位導演作品。中國電影資料館的電影策展人沙丹表示，這個時段正是香港電影的黃金時代。彼時內地正逐漸走向開放，香港電影成為很多內地青年了解世界的窗口。
受限于早期拍攝的設備技術以及膠片存放使用過程中造成的損傷，記憶中的老港片雖然情節鮮活，畫面卻模糊、昏暗、不清晰。對于習慣了高清視頻的觀眾來說，重溫經典的觀影體驗并不友好。
“我們希望通過技術手段讓現在的年輕人也能喜歡上過去的經典，老的觀眾可以重溫曾經的回憶，形成幾代人的共同記憶。”王悅說。
