边缘智能技术:躲在云端背后的隐形玩家
上周去苏州工业园区逛了一家做智能安防的创业公司,进门就被眼前的演示惊到了。断网状态下,摄像头准确识别出翻围栏的“入侵者”,三毫秒触发闸门落锁,本地联动声光报警。全程没碰云端半分数据。
我之前一直以为,所有厉害的AI都跑在大厂的云服务器集群里。没想到现在,AI都已经往下沉,沉到你家门锁、手机、路边摄像头里面去了。
边缘智能技术云端边缘计算分工对比图
就拿智能门锁举例子。早年的联网门锁,刷个指纹还要把你的指纹数据传到千里之外的云端算,算完再把结果发回来。万一小区断网,你站在门口吹十分钟冷风都进不去。急不死人?现在用了边缘智能,指纹匹配全在门锁本地的芯片上算,几百毫秒出结果,断网也能开门,爽不爽?
隐私这块更重要。你的人脸、指纹数据根本不用出你的家门,全程本地处理,不会传到厂商服务器存着,也就没了数据泄露的风险。就这点,已经足够戳中很多人的痛点了。
工业流水线边缘智能次品检测设备实拍图
我去年接触东莞一家做五金配件的工厂,原来次品检测全靠工人肉眼看,一天看八个小时,眼睛都花,漏检率还高。后来换了边缘智能的检测设备,摄像头直接装在流水线上,本地实时识别,几毫秒出结果,不合格的直接分拣出去。老板说,换了设备之后,次品率降了三成,原来二十个人的检测组,现在只要三个人维护设备就行,一年省出几百万人力成本。
不是炒概念。是已经真金白银产生价值了。
边缘智能接下来要啃的硬骨头
不过话说回来,现在边缘智能也不是完美无缺,还有一堆坑要填。
第一个坑就是适配太麻烦。现在市面上物联网芯片那么多种,不同厂家的架构不一样,你这个模型在A芯片上跑的顺顺当当,放到B芯片上就卡成PPT,开发人员要一遍一遍调,光是适配就要花几周时间,成本太高。
第二个坑是能耗。边缘设备很多都是电池供电,比如野外的监控摄像头,一装就是一两年不用换电池。AI模型再小,跑起来还是费电,本来能用一年的电池,现在三个月就耗完了,换电池的人工成本都够买新设备了。
还有一个绕不开的就是安全。边缘设备散的到处都是,你家的摄像头,路边的路灯,工厂的机械臂,每个都是一个网络节点,好多设备本身的防护能力就弱,要是被黑客攻破一个,整个集群都可能被当成肉鸡拿去挖矿,这个问题现在还没找到低成本的通用解决方案。
但你要说这些问题能挡住边缘智能的发展?不可能。今年清华团队发了个自动化模型适配工具,能根据不同芯片的架构自动剪枝压缩,把原来几周的适配时间压缩到几个小时,这不就是往前走了一大步嘛。
未来几年,物联网设备的数量会突破千亿级,所有数据都往云端传,别说带宽扛不住,电费都扛不住。把计算放在离数据最近的地方,本来就是天经地义的方向。
你现在每天都在碰边缘智能,只是你没察觉而已。手机刷脸解锁,停车场自动抬杆,智能音箱语音唤醒,甚至你开车用的ADAS辅助驾驶,全都是边缘智能在干活。
它不会像大模型那样天天上热搜,就是安安静静躲在云端背后,一点点把我们的生活变顺,把行业的成本变低。是个闷声干大事的主儿,对吧。
别被学术名词唬住,边缘智能本质很简单
很多科普文把边缘智能说的玄乎,又是分布式又是异构计算,其实说白了一句话:把原本要放到云端跑的AI计算,放到网络边缘的本地设备上跑。 核心优势,说破大天就是三个:省带宽、降延迟、保隐私。
边缘智能技术云端边缘计算分工对比图
就拿智能门锁举例子。早年的联网门锁,刷个指纹还要把你的指纹数据传到千里之外的云端算,算完再把结果发回来。万一小区断网,你站在门口吹十分钟冷风都进不去。急不死人?现在用了边缘智能,指纹匹配全在门锁本地的芯片上算,几百毫秒出结果,断网也能开门,爽不爽?
隐私这块更重要。你的人脸、指纹数据根本不用出你的家门,全程本地处理,不会传到厂商服务器存着,也就没了数据泄露的风险。就这点,已经足够戳中很多人的痛点了。
边缘智能技术的落地,比你想的快多了
说实话,放在五年前,边缘智能还真就是实验室里的概念。那时候AI模型一个比一个大,随便一个图像识别模型就几个G,根本塞不进小设备的芯片里。 这两年变化太大了。顶会里一半的AI方向论文,都在聊怎么把大模型做小。模型剪枝、量化、蒸馏这些技术玩出花了,原来几个G的大模型,压缩到几MB之后,准确率还能保持95%以上。离谱。 行业跟进的速度也快得吓人。联发科今年推出的新一代物联网芯片,全系列都自带了专门给边缘AI用的NPU,算力够跑十几个小模型。国内家电厂商出的新款智能电视,语音唤醒早就做到本地了,以前喊“小爱同学”“小度小度”半天没反应,多半是云端卡了,现在喊一声就应,体验差了不是一点半点。
工业流水线边缘智能次品检测设备实拍图
我去年接触东莞一家做五金配件的工厂,原来次品检测全靠工人肉眼看,一天看八个小时,眼睛都花,漏检率还高。后来换了边缘智能的检测设备,摄像头直接装在流水线上,本地实时识别,几毫秒出结果,不合格的直接分拣出去。老板说,换了设备之后,次品率降了三成,原来二十个人的检测组,现在只要三个人维护设备就行,一年省出几百万人力成本。
不是炒概念。是已经真金白银产生价值了。
边缘智能接下来要啃的硬骨头
边缘智能接下来要啃的硬骨头
不过话说回来,现在边缘智能也不是完美无缺,还有一堆坑要填。
第一个坑就是适配太麻烦。现在市面上物联网芯片那么多种,不同厂家的架构不一样,你这个模型在A芯片上跑的顺顺当当,放到B芯片上就卡成PPT,开发人员要一遍一遍调,光是适配就要花几周时间,成本太高。
第二个坑是能耗。边缘设备很多都是电池供电,比如野外的监控摄像头,一装就是一两年不用换电池。AI模型再小,跑起来还是费电,本来能用一年的电池,现在三个月就耗完了,换电池的人工成本都够买新设备了。
还有一个绕不开的就是安全。边缘设备散的到处都是,你家的摄像头,路边的路灯,工厂的机械臂,每个都是一个网络节点,好多设备本身的防护能力就弱,要是被黑客攻破一个,整个集群都可能被当成肉鸡拿去挖矿,这个问题现在还没找到低成本的通用解决方案。
但你要说这些问题能挡住边缘智能的发展?不可能。今年清华团队发了个自动化模型适配工具,能根据不同芯片的架构自动剪枝压缩,把原来几周的适配时间压缩到几个小时,这不就是往前走了一大步嘛。
未来几年,物联网设备的数量会突破千亿级,所有数据都往云端传,别说带宽扛不住,电费都扛不住。把计算放在离数据最近的地方,本来就是天经地义的方向。
你现在每天都在碰边缘智能,只是你没察觉而已。手机刷脸解锁,停车场自动抬杆,智能音箱语音唤醒,甚至你开车用的ADAS辅助驾驶,全都是边缘智能在干活。
它不会像大模型那样天天上热搜,就是安安静静躲在云端背后,一点点把我们的生活变顺,把行业的成本变低。是个闷声干大事的主儿,对吧。