網站導航
燃爆！奧運8分鐘AI影片火了 巴赫**：感謝中國黑科技
巴黎奧運會上，由阿里巴巴和國際奧委會聯合推出的“奧運 8 分鐘”短片《不失色的她》受到關注。短片用 8 分鐘濃縮了百年奧運史上偉大女性的影響故事，致敬不斷突破和拼搏的女運動員們，如蘇珊·朗格倫、張山、凱瑟琳·斯威策。阿里云運用 AI 修復技術，包含清晰化、上色化、基于生成技術的視頻插幀補幀等步驟，涉及多種技術方案，解決了運動影像修復中的諸多難題，多輪反復修改才呈現終成片，修復團隊也受到女運動員精神的鼓舞。
巴黎奧運會是首屆廣泛應用 AI 技術的奧運會，AI 技術加強了對歷史影像的保護和傳播，云計算也替代衛星成為賽事直播的主要方式，云+AI 給全球觀眾帶來新鮮體驗，奧委會巴赫稱贊中國技術力量為奧運會作出寶貴貢獻。
短片名為《不失色的她》（To the Greatness of HER），由阿里巴巴和國際奧委會聯合推出。
百年奧運史上偉大女性的影響故事在此被濃縮在寶貴的8分鐘里，旨在致敬一代又一代在奧運賽場上不斷實現從0到1、不斷突破和拼搏的女運動員們。
值得關注的是，這支8分鐘短片不僅用上AI為歷史時刻重賦色彩，其中還有大模型、AIGC技術的加持。
頒獎時刻，分獲銀牌和銅牌的對手將張山高高扛起。一張經典照片也有中國射擊隊另一位傳奇——許海峰當場記錄下來。
該項目主要包含三大處理步驟。
清晰化：借助圖像超分辨率技術，將低分辨率的老照片轉化為高分辨率的清晰圖像。
上色化：通過先進的圖像上色技術，為黑白照片添加逼真的色彩。
基于生成技術的視頻插幀補幀。
具體涉及的技術方案，包括基于生成對抗網絡和卷積神經網絡的圖像上色、圖像去噪和超分辨率，以及可控圖像生成技術等。
《她》背后的AI技術
聽上去，老照片、視頻修復并不是什么新鮮事，但實際上當修復的對象變成運動影像，背后的技術難度就較大增加了。
舉個例子，蘇珊·朗格倫的照片拍攝于100年多前，效果是這樣的：
一方面，人臉已經看不太清楚了。
另一方面，背景觀眾眾多，增大了修復的復雜性。
阿里云修復團隊想到的解決方案，是利用大模型+Stable Diffusion等生成式AI技術，加入文本引導，讓AI發揮想象力的同時，對這種想象加以控制，使之不脫離歷史本身。
具體來說，技術人員先利用擴散技術對人物面部進行重繪。在重繪過程中，為了保留原始人物信息，會結合真實的史料信息作參考，并采用ControlNet等技術，對人物面部的線條、深度等都進行了控制。
對于復雜的背景，由于透看關系，本身就比較模糊。修復團隊采用的方案聚焦照片中的重點人物、元素進行修復，對背景則只進行小范圍的修復，后再將前后景拼接起來。
為了讓色彩更加自然，阿里云修復團隊還結合了歷史學家的專業意見，通過對歷史色彩庫的學習，讓AI上色的準確率達到了80%以上。
另外，在超分辨率方面，阿里云的技術方案能在1秒內把640p分辨率圖像超分到4k分辨率，清晰度提升25倍。
視頻修復方面，阿里云修復團隊主要解決了視頻前后一致性和連續性問題。
運動影像還有一個特點，是運動變化很快。對此，阿里云修復團隊基于生成技術，對老視頻進行了插幀補幀，以達到更好的連續性效果。
事實上，由于修復的難度，后我們看到的巴奧這8分鐘的成片，是在多輪反復修改后呈現的。
在這個過程中，修復團隊一遍又一遍耐心地揣摩，甚至“已經看不出哪一張更像本人了”，重要原因，是在修復的過程之中，技術人員自身也受到了女運動員們的鼓舞：
希望能通過修復這組照片，讓更多人了解到歷史上的這些重要事件。同時也希望通過修復技術，讓凱瑟琳女士等打破障礙、提高競技標準的女性的精神激勵更多人。
公司信息
我要咨詢
每日熱詞
