人工智能為電影修復(fù)帶來了什么
近日啟動的“經(jīng)典香港電影修復(fù)計劃”,計劃將100部香港老電影修復(fù)至4K版本。
電影修復(fù)流程繁雜瑣碎。過去,一位經(jīng)驗豐富的修復(fù)師需要1個月的時間,才可以修復(fù)完成一部影片,而這次修復(fù)百部香港老片將使用深度學(xué)習(xí)等人工智能技術(shù),這將極大地提升電影修復(fù)效率,同時進(jìn)一步優(yōu)化影片的畫質(zhì),為觀眾帶來超高清的觀影沉浸感。
傳統(tǒng)的修復(fù)方法更多關(guān)注光影、色彩、美學(xué)等,而人工智能修復(fù),可以從清晰度、流暢度等方面提升老片的畫面質(zhì)量。那么,人工智能是如何介入電影修復(fù)的?
(資料圖片僅供參考)
由于拍攝設(shè)備、存儲方式等方面的限制,老電影往往帶有嚴(yán)重的膠片噪聲且分辨率較低。此外,由于拍攝年代和拍攝方式等的不同,老電影的畫面質(zhì)量也參差不齊,很多畫面模糊不清。
提升影片的清晰度,須修復(fù)模糊的畫面。去模糊的難點在于,模糊的類型多種多樣。在拍攝、儲存、拷貝翻印、膠片數(shù)字化以及壓制導(dǎo)出的過程中,都可能產(chǎn)生模糊損傷,這導(dǎo)致模糊問題成因復(fù)雜,修復(fù)人員通常難以獲得精準(zhǔn)的“模糊核”。
利用人工智能技術(shù),可以從低質(zhì)數(shù)據(jù)中抽取不同程度的模糊視頻,利用相關(guān)統(tǒng)計方法進(jìn)行真實的“模糊核”估計,并通過主觀驗證進(jìn)一步篩選“模糊核”的類型。同時,在自建的高清影視數(shù)據(jù)集上,生成“模糊—清晰”匹配數(shù)據(jù)對來訓(xùn)練機(jī)器學(xué)習(xí)從低質(zhì)到高清的潛在的映射關(guān)系。這樣就能快速分辨出不同影片、不同畫面模糊的原因,進(jìn)而提升修復(fù)效率。
在老電影修復(fù)中,電影中的人像需要重點關(guān)注和優(yōu)化。利用人工智能技術(shù),使用基于生成式的人像修復(fù)模塊,在保持人像真實特征的前提下,可以進(jìn)行高清五官重建。對低分辨率、多次壓縮損傷以及拍攝環(huán)境(如暗場景和拍攝過程抖動)等造成的模糊、失焦、噪聲、馬賽克等畫質(zhì)損傷,都能有效解決。
在這次100部經(jīng)典港片的修復(fù)中,人工智能還為我們提供了老舊人像修復(fù)和人像超清化等不同的人像解決方案。對于低質(zhì)量的人像,我們優(yōu)化了人像模型在時域上的清晰度和穩(wěn)定性,對不同大小的人臉(近景/中景/遠(yuǎn)景)、不同姿態(tài)角度的人臉(側(cè)臉/俯視/仰視)、不同遮擋程度的人臉都有較好的修復(fù)增強(qiáng)效果。對于一些中高質(zhì)量的人像,我們使用人像超清模塊,優(yōu)化五官清晰度,最大限度還原睫毛、眉毛、發(fā)絲和膚質(zhì)等臉部細(xì)節(jié),修復(fù)結(jié)果更有質(zhì)感。
很多老電影由于膠片保存不當(dāng)出現(xiàn)褪色情況,畫面存在色偏。為解決這一問題,需要對其進(jìn)行色彩校正,還原符合電影美學(xué)風(fēng)格的色彩。借助人工智能技術(shù),修復(fù)人員可以設(shè)計出符合電影美學(xué)標(biāo)準(zhǔn)的色彩校正方案。具體做法是,對影片內(nèi)容進(jìn)行場景分割,使用深度學(xué)習(xí)方案逐幀學(xué)習(xí)其色彩校正矩陣;針對幀間一致性問題,則按場景計算出色彩校正矩陣的均值;對同一場景,使用同一套色彩校正矩陣進(jìn)行處理,從而得到穩(wěn)定的校正結(jié)果。
利用人工智能技術(shù)還能提升老電影的流暢度。比如,一些武打片中,有很多人物快速運動的場景。當(dāng)畫面幀與幀間運動較大,超過一定范圍時,光流就會估計不準(zhǔn)確,容易產(chǎn)生拖影。利用智能插幀算法,通過對前后幀的內(nèi)容進(jìn)行光流估計,并根據(jù)光流信息將前后幀像素都轉(zhuǎn)換到中間幀,然后進(jìn)行整合,生成中間幀,提升視頻幀率,這樣就可以減少觀眾觀看時的卡頓感。
一些老電影的膠片,由于保存不當(dāng),容易出現(xiàn)臟點、污漬和霉斑,呈現(xiàn)在畫面上就是大塊不規(guī)則形狀的陰影,既破壞了畫面的完整性,也會影響觀眾的觀影體驗。對于這些瑕疵,可以首先用去噪點和去劃痕等算法批量處理,同時輔以人工二次校驗,對誤傷畫面的部分進(jìn)行優(yōu)化,這既提高了修復(fù)處理的速度,同時也保證了修復(fù)的精準(zhǔn)性。
此外,受限于拍攝時的設(shè)備和技術(shù),早期的香港武打片會有不少穿幫鏡頭,如畫面出現(xiàn)威亞線。以往這種情況,只能依賴手工逐幀消除,而人工智能算法可以自動識別到威亞的位置并進(jìn)行擦除。
值得一提的是,在這次100部港片修復(fù)項目中,我們首次使用了AIGC(生成式人工智能)視覺大模型。在更廣闊的數(shù)據(jù)規(guī)模、更龐大的模型參數(shù)、更豐富的算力的加持下,大模型顯示出遠(yuǎn)超以往算法的生成能力,生成內(nèi)容的紋理細(xì)節(jié)更逼真、效果更自然。
針對老片修復(fù)的具體場景,我們還對AIGC視覺大模型進(jìn)行了生成質(zhì)量、視頻任務(wù)和推理效率方面的算法優(yōu)化,有效提升了修復(fù)質(zhì)量。相信隨著大模型技術(shù)的持續(xù)發(fā)展,人工智能將在老電影修復(fù)以及經(jīng)典文化傳承方面發(fā)揮更大作用。
《光明日報》(2023年08月23日?13版)
關(guān)鍵詞:
相關(guān)文章
電腦電源改可調(diào)電源最簡單的方法(電腦電源改可調(diào)電源)
1、PC電源改造可調(diào)電源,會受原電路設(shè)計原理、結(jié)構(gòu)、技術(shù)指標(biāo),及使用
日本福島核廢水預(yù)計24日排海,準(zhǔn)備工作進(jìn)入最后階段,日本漁業(yè)界仍然反對
日本福島核廢水預(yù)計24日排海,準(zhǔn)備工作進(jìn)入最后階段,日本漁業(yè)界仍然反
精彩推送
錦屏縣敦寨鎮(zhèn):“多措并舉”筑牢農(nóng)村消防安全防線
為進(jìn)一步改善和提高農(nóng)村消防安全環(huán)境,持續(xù)提升農(nóng)村群眾消防安全意識,
宏川智慧(002930.SZ)子公司福建港豐能源擬向鄭商所申請甲醇指定交割倉庫資質(zhì)
智通財經(jīng)APP訊,宏川智慧(002930 SZ)發(fā)布公告,公司控股子公司福建港豐
田徑世錦賽丨男子鐵餅:瑞典選手斯塔爾破賽會紀(jì)錄奪冠
當(dāng)?shù)貢r間8月21日,在匈牙利布達(dá)佩斯舉行的2023世界田徑錦標(biāo)賽男子鐵餅
御“風(fēng)”而上,風(fēng)電發(fā)展大有可為
御“風(fēng)”而上,風(fēng)電發(fā)展大有可為,風(fēng)能,風(fēng)機(jī),風(fēng)電場,風(fēng)力發(fā)電,風(fēng)電發(fā)展,
陜西:推動新就業(yè)形態(tài)勞動者廣泛入會 到2025年發(fā)展會員超過30萬人
近日,陜西省總工會印發(fā)深入推進(jìn)新就業(yè)形態(tài)勞動者工會工作三年行動方案
生態(tài)環(huán)境部:長三角地區(qū)41個城市7月平均優(yōu)良天數(shù)比例為94.2%
【生態(tài)環(huán)境部:長三角地區(qū)41個城市7月平均優(yōu)良天數(shù)比例為94 2%】7月,
沈陽鐵西區(qū)房交會:可享契稅補(bǔ)貼50% 團(tuán)購5套享9.5折優(yōu)惠
據(jù)介紹,在房交會期間購買參展企業(yè)新建商品住房且完成登記備案的市民,
《戰(zhàn)錘西格瑪時代:毀滅國度》11月18日發(fā)售 預(yù)購開啟
開發(fā)商FrontierDevelopments宣布,即時戰(zhàn)略游戲《戰(zhàn)錘西格瑪時代:毀滅
中遠(yuǎn)海運國際(00517)發(fā)布中期業(yè)績 股東應(yīng)占溢利3.36億港元 同比增加102.86% 擬派發(fā)中期股息每股22.5港仙
智通財經(jīng)APP訊,中遠(yuǎn)海運國際(00517)發(fā)布2023年中期業(yè)績,該集團(tuán)期內(nèi)取
我拿出實力,你拿出倉位,咱們一起共贏,關(guān)注我給你實際進(jìn)場策略,現(xiàn)價1895多!
我拿出實力,你拿出倉位,咱們一起共贏,關(guān)注我給你實際進(jìn)場策略,現(xiàn)價
產(chǎn)業(yè)民生齊步走 “汽車城”嘉定疾馳高質(zhì)量發(fā)展賽道
上海嘉定是滬寧發(fā)展軸上重要的長三角綜合性節(jié)點城市,也是上海的產(chǎn)業(yè)重
山西陽泉嚴(yán)厲打擊互聯(lián)網(wǎng)銷售酒類醋類侵權(quán)假冒商品行為
轉(zhuǎn)自:中國質(zhì)量報中國質(zhì)量報訊(記者秦海峰)近日,山西省陽泉市市場監(jiān)
中遠(yuǎn)海科8月23日盤中漲幅達(dá)5%
以下是中遠(yuǎn)海科在北京時間8月23日10:17分盤口異動快照:8月23日,中遠(yuǎn)
新加坡總統(tǒng)候選人:美應(yīng)抵制短期利益誘惑,與中國打交道時著眼長遠(yuǎn)
【環(huán)球時報駐新加坡特約記者辛斌】據(jù)香港《南華早報》21日報道,新加坡
信息動態(tài):猜一猜一個噴嚏可以打多遠(yuǎn) 9月12日螞蟻莊園今日問答
互聯(lián)網(wǎng)可以使學(xué)生變成老師;互聯(lián)網(wǎng)可以使名不見經(jīng)傳的人聞名天下;互聯(lián)
蘭考縣桐鄉(xiāng)街道:創(chuàng)新“15135”工作法 推動“五星”支部創(chuàng)建走深走實
蘭考縣桐鄉(xiāng)街道堅持以“五星”支部創(chuàng)建作為全面推進(jìn)鄉(xiāng)村振興的總抓手,
愛滿京城 相約幸福 石景山魯谷街道七夕主題演出給您不一樣的甜蜜暴擊
為傳承七夕經(jīng)典,宣揚中華民族的傳統(tǒng)節(jié)日,8月22日上午,石景山魯谷街
電腦電源改可調(diào)電源最簡單的方法(電腦電源改可調(diào)電源)
1、PC電源改造可調(diào)電源,會受原電路設(shè)計原理、結(jié)構(gòu)、技術(shù)指標(biāo),及使用
內(nèi)蒙古能源集團(tuán)100萬千瓦風(fēng)儲項目(標(biāo)段二)完成首臺風(fēng)機(jī)吊裝
北極星風(fēng)力發(fā)電網(wǎng)訊,8月19日,內(nèi)蒙古能源集團(tuán)東蘇巴彥烏拉100萬千瓦風(fēng)
1-7月全國造船完工2409萬載重噸 同比增長15.6%
中新網(wǎng)8月23日電中國船舶工業(yè)行業(yè)協(xié)會微信公眾號23日發(fā)布2023年1-7月船
富瑞特裝(300228):技術(shù)指標(biāo)出現(xiàn)看漲信號-KDJ 低位金叉(08-23)
摘要:2023年08月23日富瑞特裝(300228)主力資金凈流入28 44萬元,占
水粉顏料調(diào)色表圖片(水粉顏料調(diào)色表)
導(dǎo)讀1、手繪丙稀顏料調(diào)色方法及顏料調(diào)色表2、一、顏料調(diào)色方法:3、說明
蔣介石與戰(zhàn)時外交研究(關(guān)于蔣介石與戰(zhàn)時外交研究簡述)
,你們好,今天0471房產(chǎn)來聊聊一篇介石與戰(zhàn)時外交研究,介石與戰(zhàn)時外交
8月23日F5G概念板塊跌幅達(dá)2%
8月23日9點53分,F(xiàn)5G概念板塊指數(shù)報點,跌幅達(dá)2%,成交億元,換手率%。
支付寶怎么取消好醫(yī)保自動續(xù)費(怎么取消好醫(yī)保自動續(xù)費)
好的醫(yī)療保險自動關(guān)閉續(xù)保方法如下:1 打開手機(jī)登錄支付寶,進(jìn)入好醫(yī)保
國創(chuàng)醫(yī)藥毛利率連續(xù)下滑:研發(fā)偏弱,市場推廣費遠(yuǎn)超凈利潤
近日上海國創(chuàng)醫(yī)藥股份有限公司(以下簡稱:國創(chuàng)醫(yī)藥)沖刺IPO,擬于深
再創(chuàng)新高!豆粕ETF(159985)大漲2.8%,資金連續(xù)凈買入
截至2023年8月18日,豆粕ETF近1周累計上漲4 08%,6月以來累計大漲近35%。
電吹風(fēng)非選某森?SYLPH仙如便攜高速吹風(fēng)機(jī)小巧便捷、速干、護(hù)發(fā)
人們隨著生活水平的逐漸提高,對于各類用品的需求逐步從實用向享受轉(zhuǎn)變
wifi上網(wǎng)流量是什么意思(wifi上網(wǎng)是什么意思)
來為大家解答以上問題,wifi上網(wǎng)流量是什么意思,wifi上網(wǎng)是什么意思很
無障礙環(huán)境建設(shè)法將施行 助力降低殘疾人老年人便捷上網(wǎng)門檻
無障礙環(huán)境建設(shè)法將于9月1日起施行。就如何貫徹落實該法,中國工業(yè)和信