多媒体制作技术:从抠图到AI生成,这行当彻底变天了
干这行十年了,以前给人做片子,先学的是怎么抠像。绿幕、蓝幕,一堆灯,然后去After Effects里磨啊磨,一个头发丝儿的边缘能调一晚上。现在呢?AI一上手,啪,几秒钟就给你抠得干干净净。说实话,有点恍惚,但这恍惚是幸福的,因为省下来的时间能多摸几次鱼。
但是你先别高兴太早。AI这玩意儿,看着厉害,实际上背后全是科学家的头发换来的。就说前阵子看到的那个扩散模型插帧的论文,你猜他们是怎么让模型理解运动规律的?硬生生用几十万个小时的视频喂出来的。结果呢?生成一帧要几十毫秒,虽然离线渲染能用,但实时还是没戏。
一、AI视频生成与修复:从科研到实操
说到AI视频生成,现在最火的就是Diffusion那一套。以前做老片修复,得靠人工一帧一帧去补划痕、去噪点,一条片子下来眼睛都快瞎了。现在呢?直接丢给模型,它能自动补齐缺失的部分,毛刺也给你抹平了。但有时候它也会自作主张,把人的脸改得跟原来不一样。你说是惊喜还是惊吓?
还有那个光流法插帧,还真是个好东西。以前拍慢动作,必得用高速摄影机,一天租金好几万。现在呢,拍一遍普通24帧,后期一插,直接变成240帧的丝滑慢动作。虽然偶尔运动边缘会有点鬼影,但绝大多数情况下,客户根本看不出来。有时候甚至觉得比原片更有“呼吸感”——你听听,这词儿让AI给带坏了。
AI视频生成关键帧插值技术流程图
不过嘛,AI也不是万能救世主。你让它处理复杂的遮挡关系,比如一群鸟飞过树枝,它有时候就把树枝给糊成面条。这时候你还得手动一帧帧去修。所以啊,工具再猛,人还是得有判断力,不然翻车了都不知道咋回事。
二、编解码与存储:被忽略的幕后英雄
二、编解码与存储:被忽略的幕后英雄
很多人觉得,编解码不就是压缩文件吗?有什么好聊的。呵呵,你要是这么想,那你肯定没体会过给甲方传4K原始素材的绝望。一个片子几十个GB,上传速度断断续续,传到天荒地老。这时候你要是懂一点H.265或者AV1,码率压一半,画质几乎无损。甲方看得顺溜,你也能早点睡觉,多好。
这几年AV1是真的猛,这背后是一群科学家在抠数学细节。你看那个H.266的块划分树,复杂得像老树根,但就是能再省20%的码率。说实话,看着那些公式我头皮发麻,但人家就是能让文件更小、画质更好。服不服?服。
但编解码这玩意儿也不省心。新格式出了,老播放器不认,剪辑软件不支持,你还得转码。上次我导出AV1,结果甲方那破烂笔记本一播就卡成狗。最后又转回H.264。你说气不气人?可这就是行业现实——新技术普及,总得磨几年。
三、实时渲染与虚拟制片:从离线到实时
再说说实时渲染,这可是这几年翻天覆地的变化。以前做建筑漫游,渲染一张图要等四十分钟,客户在旁边喝茶,你心里那个急。现在用虚幻引擎直接实时漫游,你推着摄像头在场景里跑,客户“哇”一声,你还得装作很淡定。其实心里爽翻了。
这背后是啥?是实时全局光照和光线追踪降噪算法的大规模落地。那些论文里的什么路径追踪、降噪滤波器,看着像天书,但成果是真香。现在甚至能在手机上搞AR实时渲染了,虚拟物体光影跟真环境一模一样。牛不牛?牛。
实时渲染光线追踪反射效果对比图
但是呢,显卡再强悍,也有吃瘪的时候。显存照样爆,画面照样崩。比如一个玻璃水杯放夕阳下,你得多摆几个反射探针才能看到通透感?不知道,只能试。有时候你想偷个懒,结果引擎给你算出来的画面黑不拉几的。最后你还得手动补光。所以说,别指望工具全自动,你脑子里得有物理常识。
四、工作流与AI协作:人类和工具的博弈
四、工作流与AI协作:人类和工具的博弈
我觉得最让人头大的,不是软件本身,而是它们之间的互不认账。你在Nuke里做好了一个Roto,导出EXR给Premiere,一读颜色全变了,又要调色管理。或者同一个工程文件,不同版本打不开,同事直接崩溃。这种破事天天有,真的想砸电脑。
好在现在很多团队开始尝试云端协作,素材放云端,大家实时编辑,效率确实高。但网络一抖,你就只能眼看着进度条转圈,那个心情啊,真不如自己硬抠。
说到底,多媒体制作技术这些年进步得飞快,AI、编解码、实时渲染,每个方向都在变着法地折腾。你作为从业者,必须得跟上,不然只能被拍在沙滩上。但也不用太焦虑,该学学,该玩命玩命,至少现在是越来越好用——对吧?技术变好用了,人反倒更容易犯懒——这是好事还是坏事,谁知道呢?
行,就聊到这儿。我得去导出成片了,希望甲方别磨叽。