数字媒体技术:藏在日常内容里的科研新突破
你上次刷到的老照片动态修复特效,逛商场碰到的裸眼3D大屏,甚至网上能一键生成的AI海报,全是数字媒体技术在撑着。别觉得这玩意儿离你远。它早就钻到你每天刷的手机里了。
数字媒体技术轻量化NeRF运算实验室场景
说实话,前两年AI生成内容刚火的时候,大部分人只看到能画图能写文案,没人注意到底层数字媒体技术的迭代。之前做一张1080P的3D AI渲染图,顶级显卡要跑几个小时,对吧?去年清华大学多媒体实验室发的成果,把轻量化动态NeRF的模型体积压缩了72%,推理速度提了三倍,普通手机的芯片就能实时跑动态渲染。我去年在一个行业展上试过样机,对着自己拍一张照片,十几秒就能生成可以360度转动的半身模型,画质比我几年前在工作室用万元显卡跑的还好。惊了。
很多短视频平台的动态特效早就用上这套技术改的方案了。你玩的那个把静态照片变成立体动效的玩意儿,核心就是这个。不过话说回来,很多用户用的时候根本不知道这是数字媒体技术的科研成果,只觉得“哦这特效好神奇”。
数字媒体技术版权零水印验证界面
去年中科院自动化所数字媒体研究组发了新的零比特率嵌入式零水印技术,说直白点就是,你不用给图片视频加个突兀的水印,也不用改原文件的任何画质,就能把版权信息嵌到内容的特征里。哪怕你把图片截一半,调个亮度,转成webp再存一遍,甚至打印出来再拍回去,都能准确验出原版权信息。准确率能到99.7%。
现在国内某头部内容平台已经拿这个技术做内测了,几千个原创作者已经用上了免费的版权存证。我跟一个做插画的朋友聊过,她之前被盗图到国外网站,找了三个月都没拿出有力的证据,要是这个技术全面铺开,这种事根本不算事。吐槽一句,之前的版权保护技术要么贵,要么不好用,能做到这个份上,真的是解决了创作者的心头大患。
跨界的惊喜:数字媒体技术早就往线下跑了
很多人对数字媒体技术的印象还停留在做视频剪动画,错了。现在国内很多科研团队都在往实体行业扎。你去博物馆看的沉浸式展览,汽车里的车机交互界面,服装店的AR试衣镜,全是数字媒体技术的活儿。
上个月我去看一个文创展,有个地方博物馆用了浙传团队做的可交互裸眼3D文物展示,不用戴眼镜,观众伸手就能把文物转过来,还能拆开看内部结构,比放个玻璃柜里只能看个外壳有意思太多。原来这种展示一套设备要几十万,只有国家级博物馆用得起。现在用数字媒体技术的算法校正,普通的投影就能做,成本砍到原来的五分之一,很多地级市的博物馆都能装得起。
还有房地产的VR样板间,原来要团队去现场拍好几天,现在用数字媒体技术的重建算法,无人机飞一圈,几个小时就能出可交互的样板间,效果比之前的还好还便宜。很多小的中介门店都能用上,不用再印一大堆厚厚的宣传册。
你看,数字媒体技术从来不是实验室里飘着的概念。它就是一点点改着我们看内容、做内容、甚至逛展买东西的方式。再过两年,说不定你楼下开的新咖啡店,都能有一块互动大屏,点单的时候就能玩个沉浸式的主题小游戏。想想就挺有意思的,对吧?
从实验室走出来的生成式技术突破
数字媒体技术轻量化NeRF运算实验室场景
说实话,前两年AI生成内容刚火的时候,大部分人只看到能画图能写文案,没人注意到底层数字媒体技术的迭代。之前做一张1080P的3D AI渲染图,顶级显卡要跑几个小时,对吧?去年清华大学多媒体实验室发的成果,把轻量化动态NeRF的模型体积压缩了72%,推理速度提了三倍,普通手机的芯片就能实时跑动态渲染。我去年在一个行业展上试过样机,对着自己拍一张照片,十几秒就能生成可以360度转动的半身模型,画质比我几年前在工作室用万元显卡跑的还好。惊了。
很多短视频平台的动态特效早就用上这套技术改的方案了。你玩的那个把静态照片变成立体动效的玩意儿,核心就是这个。不过话说回来,很多用户用的时候根本不知道这是数字媒体技术的科研成果,只觉得“哦这特效好神奇”。
解决没人愿意碰的老痛点:AI时代的内容版权
生成式内容火了之后,侵权问题吵了快两年,各种扯皮。有人拿别人的作品训练AI,有人直接盗AI生成的内容改改就发,原作者维权难上天。你知道现在数字媒体技术领域的科研方向,早就盯上这个问题了吗?
数字媒体技术版权零水印验证界面
去年中科院自动化所数字媒体研究组发了新的零比特率嵌入式零水印技术,说直白点就是,你不用给图片视频加个突兀的水印,也不用改原文件的任何画质,就能把版权信息嵌到内容的特征里。哪怕你把图片截一半,调个亮度,转成webp再存一遍,甚至打印出来再拍回去,都能准确验出原版权信息。准确率能到99.7%。
现在国内某头部内容平台已经拿这个技术做内测了,几千个原创作者已经用上了免费的版权存证。我跟一个做插画的朋友聊过,她之前被盗图到国外网站,找了三个月都没拿出有力的证据,要是这个技术全面铺开,这种事根本不算事。吐槽一句,之前的版权保护技术要么贵,要么不好用,能做到这个份上,真的是解决了创作者的心头大患。
跨界的惊喜:数字媒体技术早就往线下跑了
跨界的惊喜:数字媒体技术早就往线下跑了
很多人对数字媒体技术的印象还停留在做视频剪动画,错了。现在国内很多科研团队都在往实体行业扎。你去博物馆看的沉浸式展览,汽车里的车机交互界面,服装店的AR试衣镜,全是数字媒体技术的活儿。
上个月我去看一个文创展,有个地方博物馆用了浙传团队做的可交互裸眼3D文物展示,不用戴眼镜,观众伸手就能把文物转过来,还能拆开看内部结构,比放个玻璃柜里只能看个外壳有意思太多。原来这种展示一套设备要几十万,只有国家级博物馆用得起。现在用数字媒体技术的算法校正,普通的投影就能做,成本砍到原来的五分之一,很多地级市的博物馆都能装得起。
还有房地产的VR样板间,原来要团队去现场拍好几天,现在用数字媒体技术的重建算法,无人机飞一圈,几个小时就能出可交互的样板间,效果比之前的还好还便宜。很多小的中介门店都能用上,不用再印一大堆厚厚的宣传册。
你看,数字媒体技术从来不是实验室里飘着的概念。它就是一点点改着我们看内容、做内容、甚至逛展买东西的方式。再过两年,说不定你楼下开的新咖啡店,都能有一块互动大屏,点单的时候就能玩个沉浸式的主题小游戏。想想就挺有意思的,对吧?