老动画修复主要是图像、视频等(děng)底(dǐ)层多媒(méi)体任(rèn)务,比如(rú)降噪(zào)、超分(fèn)、色彩(cǎi)增强等,其中很(hěn)多(duō)环(huán)节(jiē)结合AI的深度学习算(suàn)法(fǎ),能够(gòu)大幅提升修复(fù)效率和(hé)质量。以往人工处理耗时较(jiào)长的(de)一些修复过程(chéng),例如消除画面划痕、噪点等瑕疵,专业(yè)师傅每天只(zhī)能修复一两百(bǎi)帧,AI算法结合强大的算力可(kě)以(yǐ)加速数万倍(bèi)。
一边是褪色、卡(kǎ)顿、画(huà)面失帧的老动画,一边是新兴(xìng)的计(jì)算机算法(fǎ)。旧的与(yǔ)新的,就这样结合在(zài)一起。修(xiū)复(fù)技术,已经可以让老动画呈(chéng)现4K效果。让传统动画以高清、流畅的面(miàn)貌(mào)再次唤(huàn)醒(xǐng)观众的(de)儿时记忆。
“不管是修复动画片,还是修(xiū)复老影(yǐng)像,并(bìng)不只(zhī)为提(tí)高(gāo)它的清晰度。归根到底,我(wǒ)们(men)想要修复的是这(zhè)些内容背后的记忆和几代人因为这些记(jì)忆而隔空产生的情感共鸣。”西瓜视频总裁任(rèn)利锋接受(shòu)科(kē)技日报记者采(cǎi)访时说。
不久(jiǔ)前,《哪吒传奇》《葫(hú)芦兄弟》《黑猫警长》等6部经典动画(huà)作品(pǐn)的4K修复(fù)版由西瓜视频平台修(xiū)复完毕并上线西瓜视频。加之经典动画(huà)大片《天书(shū)奇谭》的4K纪念版已于11月5日(rì)在全国院(yuàn)线公映,承载几(jǐ)代中(zhōng)国人共同记忆(yì)的传统动画片正以崭(zhǎn)新面貌悄然走来。
AI技术为动画修复提供更多可能
提到动画修复,人们的刻板印象是工(gōng)作室(shì)内修复师对胶片进行清洗、扫描(miáo)、调(diào)色,一整套修(xiū)复流程走完,往往需要(yào)几个月,甚至半年、数年之久。
在过去,储存电影包括动(dòng)画片的介质主要是胶片,早期(qī)胶片都(dōu)采用硝酸片基,这(zhè)是(shì)一(yī)种比纸更易(yì)燃的物质,虽然在1960年之后硝酸片(piàn)基基本被醋酸(suān)片基(jī)、涤纶片(piàn)基(jī)取(qǔ)代(dài),但不管(guǎn)是哪种(zhǒng)片基(一种塑料薄膜,是感光胶(jiāo)片的支持体),都(dōu)很难在常温下(xià)保存很久。
为了更安全的保存(cún)老动画(老影片),以及(jí)抢救和还原(yuán)那些损伤的胶片,动画修复技术也在不断革新。随着深(shēn)度学(xué)习(xí)和AI算法的(de)兴起,“老(lǎo)片”修(xiū)复逐渐从(cóng)人工转(zhuǎn)向了人工+智能的修(xiū)复模式。
“传统(tǒng)的人工修复多是去(qù)掉胶片上的脏点、划痕、抖(dǒu)动等,它只是让画面更干净(jìng),相当于给(gěi)画面‘洗(xǐ)脸’,是一种(zhǒng)锦上添花(huā)的处理方式。而AI技(jì)术却可以做(zuò)到‘无中生有’,填充画面缺(quē)少的细节(jiē),它(tā)的效率更高、手段(duàn)更丰富,也为动画(huà)修(xiū)复提供了更多可能。”火山引擎多媒体实验室研究员赵世杰告(gào)诉记者。
以人们耳熟能详的《葫芦兄弟》为例,赵世(shì)杰(jié)向记者展示,该片为水墨和剪纸的组合,难点在于修复类(lèi)型的多(duō)样化——既要保证人物锐利(lì),同时又要兼顾水墨背景的艺术效果。因此(cǐ),需要AI技术准确识别(bié)好前景和后景,运用(yòng)超分辨(biàn)率和智能(néng)插帧(zhēn)算法,完成视频从低清到高清的(de)转换并生(shēng)成中间帧内容(róng)。
此外,老动画片修复主要是图像(xiàng)、视频等底(dǐ)层多媒体任务(wù),比如降噪(zào)、超分、色彩增强等,其中很多环节结合AI的深度学习算(suàn)法,能够大幅提升修复效率和质量(liàng)。“以往(wǎng)人工处理耗时较长的一(yī)些修复过程,例如消(xiāo)除画(huà)面(miàn)划(huá)痕、噪(zào)点等(děng)瑕(xiá)疵,专业师(shī)傅每天只(zhī)能修复(fù)一两百帧,AI算法结合强大的算力可(kě)以加速数万倍。”赵世(shì)杰说(shuō)。
在技术与(yǔ)艺术之间找到平衡点
“尽管有AI技术的加持,修复经(jīng)典老动画仍是一项繁(fán)重且艰(jiān)难的任(rèn)务,其中最大的难(nán)题是保留原动画的艺术风格和美(měi)感。”赵世杰说。
影像胶片的损伤(shāng)主要包(bāo)括划痕、噪波、霉斑等6种类型。修复工(gōng)作是要消除(chú)和矫正胶片上的这些问题,同时尽(jìn)可(kě)能还原和提高胶片原(yuán)始(shǐ)的质感,做到“修旧如旧”。
在《葫芦兄弟》的(de)修复过(guò)程中(zhōng),既要提升前景的清晰度(dù),又要兼顾水墨背景的(de)艺术效果,让(ràng)山(shān)水保持朦胧的艺术感。赵世杰坦(tǎn)言,修复《葫芦兄弟》时,他们多(duō)次(cì)与(yǔ)制片方讨论方(fāng)案,经过(guò)反复测(cè)试和调优才(cái)达到理想(xiǎng)效果。
为了防(fáng)止(zhǐ)“误(wù)伤”艺术效果(guǒ),消(xiāo)除瑕疵的算法通常不会(huì)设置(zhì)很高的强度,因(yīn)此会漏(lòu)掉一部(bù)分瑕(xiá)疵,需由人工辅助标注。对损伤严重的(de)老片来说,彻底消除瑕疵需(xū)要投(tóu)入更多人(rén)力。
赵世杰告诉科技日(rì)报记者,目前而言(yán),AI技(jì)术还无法完全代(dài)替人(rén)工。一(yī)方面,老(lǎo)动画(huà)的修(xiū)复并不是一(yī)味提升画质就(jiù)可以(yǐ)了,修复过程需要(yào)有(yǒu)专业的艺术指导和(hé)人(rén)工辅助,才能实(shí)现理想的(de)艺(yì)术效果;另(lìng)一方面,修复在色彩增强(qiáng)等环节,还会使用一些(xiē)无需AI介入的多媒体处理技术,并不(bú)是所(suǒ)有技术手段都要用(yòng)到(dào)AI的算法(fǎ)。
《葫(hú)芦兄弟》的修复只是(shì)一个(gè)典型个例,火(huǒ)山引擎修复(fù)数据显示(shì),算法能(néng)够直接消除95%以上的瑕疵,剩下的要辅以人工标(biāo)注,再调整(zhěng)算法(fǎ)做二次优化。
业内专家曾对此表示,经典作品凝结了老艺术家的智慧与精神,在技术赋能与保持艺术效果之间(jiān)找到平衡点,是老动画修复工(gōng)作必(bì)须解答好的关键一题。
老片(piàn)修复正在走进寻(xún)常百姓家
2014年(nián),上海国际电(diàn)影节首创4K修复单元后,4K修复走进大众视野(yě)。随后中国电影资(zī)料馆、中影数字基地等专业机构,陆(lù)续(xù)发起4K修(xiū)复计(jì)划(huá)。
有别于电影、电(diàn)视剧(jù)等(děng)冗长内容修复,《葫芦(lú)兄弟》《猴子捞月》《小蝌蚪找妈(mā)妈》等传统(tǒng)动画(huà)片(piàn)每集(jí)时(shí)长仅十余分钟,且叙事完整,修(xiū)复的工作量相对要少。
公开资料(liào)显示,上海美术电影制片厂成立(lì)至今,摄制(zhì)的500多部动画片中(zhōng)30分(fèn)钟以内(nèi)的动画片(piàn)占比超(chāo)过80%,这意味着在现有修复(fù)技术条件下,大(dà)量传统动画片可以“重生”。
“按照(zhào)计划,未来1年(nián),《哈哈镜(jìng)花缘(yuán)》《舒克和贝塔》等100部传(chuán)统动画片的4K修复版(bǎn)将陆续在西瓜视频上线。”任(rèn)利锋透露。
为何互联网视频(pín)平台要进行老动画(huà)的修复(fù)工作?赵(zhào)世(shì)杰表(biǎo)示,画质问题同样影响(xiǎng)着海量投稿的视(shì)频平台,“为了提升用户(hù)体(tǐ)验,视频平台(tái)需要对低画质投稿做(zuò)优化,这其中人工智能等技术恰好能用在经(jīng)典老电影(yǐng)及老动画的修(xiū)复中。”赵世(shì)杰说。
据(jù)了解,基(jī)于技(jì)术与能力的积累,火山引擎等科技公司已推出“智能处理(lǐ)”工具包,通过AI算法实现增强视频(pín)画质的(de)效果(guǒ),并已应(yīng)用于视频(pín)创(chuàng)作平台上。
“技术已然(rán)成熟,各(gè)视(shì)频平台也(yě)将开放修复入口,为普通用户(hù)免费提供(gòng)AI修复支持,并对有史(shǐ)料(liào)价(jià)值的历史影像,进行免费修复(fù),为公(gōng)众(zhòng)珍(zhēn)藏(cáng)的视频作品旧貌换新颜。”赵世杰说。