【导读】视频正于成为AI时代最主要的数据进口。据统计，跨越80%的AI模子练习及推理数据来历在视频，视频不仅是毗连物理世界与数字世界的主要前言，同样成为智能汽车、呆板人、安防、XR等运用获取情况信息的焦点载体。

因为视频分辩率从4K到8K及10K，视频分辩率于不停晋升，使患上海量数据需要压缩。此时，专用在视频编解码处置惩罚的VPU已经成为各种视频运用的焦点引擎。

VPU也是安谋科技这家公司“All in AI”的主要一环。于本年WAIC上，安谋科技首度揭秘新一代 玲珑 VPU产物—— 武当 ，并分享AI端到端视频编码技能。安谋科技VPU研发总监黄鑫向EEWorld具体先容了这款产物的细节。

AI正于打开视频压缩的新维度

黄鑫暗示，跟着AI技能快速成长，视频正于履历从“办事人类不雅看”到“办事呆板理解”的改变，视频压缩技能也迎来了新的成长标的目的。

已往，传统视频重要解决手机存储、社交分享及收集传输等问题，焦点方针是满意人眼的主不雅视觉体验。但跟着AI与视频深度交融，视频正于成为AI体系感知及理解实际世界的主要数据来历。从人形呆板人、呆板狗，到主动驾驶及各种视觉感知装备，年夜量AI运用都需要经由过程视频数据完成练习及推理。于这一历程中，视频再也不只是内容的载体，而成为AI的“输入数据”。

黄鑫认为，视频作为毗连物理世界及虚拟世界的桥梁，其数据质量直接影响AI模子的练习效果及推理精度。假如视频压缩历程中孕育发生过量信息丧失，将影响整个AI体系的机能。是以，将来VPU的设计理念也需要发生转变，从已往办事人眼视觉，转向办事呆板视觉，AI正于打开视频压缩的新维度。

基在这一趋向，玲珑VPU正于鞭策视频编码技能演进。传统视频编码重要依靠CPU举行节制，VPU按照指令完成编码使命。而新一代VPU则最先交融轻量级AI算子，经由过程内容感知能力实现越发智能的视频压缩。

“武当”有甚么纷歧样

本年3月，安谋科技正式发布首款AI VPU产物“峨眉”，并初次吐露下一代产物代号“武当”。于本届WAIC上，安谋科技进一步揭开了“武当”VPU的技能细节，展示了其面向AI视频运用的新一代视频压缩能力。

作为新一代产物， 武当 周全继续了上一代CAE（Content Adaptive Encoding，内容自顺应编码）技能上风，于连结行业领先编码画质的基础上，PPA（机能、功耗、面积）综合指标较上一代晋升跨越40%，同时进一步完美编码器规格，可以或许笼罩越发富厚的视频运用场景，为智能终端及边沿AI提供更高效的视频处置惩罚能力。

黄鑫解析，CAE位在视频编码流程前端，于数据搬运历程中同步完成图象处置惩罚及语义解析，并将阐发成果通报给后续编码模块。经由过程这类方式，VPU可以或许按照差别视频场景举行动态优化，例如航拍、游戏、监控等场景都可以得到差别水平的码率节省。

除了此以外，于“峨眉”的基础上，下一代“武当”VPU进一步举行了周全进级。

第一，于机能及能效方面，“武当”撑持8K 30fps视频编码，可以或许满意更多AI运用场景需求，同时芯单方面积比拟上一代降低约40%。

第二，于视频格局撑持方面，“武当”进一步扩大了编码能力，撑持YUV422专业视频格局，并撑持Raw Data压缩，可以削减数据转换环节，更好办事AI练习及专业视觉运用。同时，其撑持最高1Gbps码率，可满意人形呆板人等Physical AI运用对于在高质量视觉数据的需求。

第三，“武当”继承继续“峨眉”的智能感知编码能力，于编码质量方面进一步晋升，并撑持矫捷配置差别编码档位。今朝，其最高配置已经经可以或许到达软件编码的程度。于面向AI运用的非法则体育场景中，比拟传统方案还有可以实现分外5%至10%的编码质量晋升。

全新的AI VPU端到端练习框架

黄鑫暗示，玲珑VPU的技能线路其实不会止步在内容感知编码，而是正于向端到端AI视频编码标的目的演进。

将来的视频编码技能将缭绕两个标的目的连续成长：一个标的目的是从当前基在CAE的局部优化，进一步拓展到端到端全局优化；另外一个标的目的是从已往重要针对于人眼视觉体验的编码方针，扩大到针对于差别AI使命的专项优化。

今朝，玲珑VPU正于摸索基在AI练习的视频编码框架。于练习阶段，经由过程引入前处置惩罚收集、VPU虚拟编码器、详细AI使命模子，经由过程结合练习及反向流传优化编码计谋，使压缩效果与AI使命精度到达最好均衡。

于部署阶段，前置收集将进一步优化，并与玲珑VPU编码器举行深度交融，使AI VPU成为真正具有使命感知能力的视频编码器。

这一思绪带来了显著的现实收益。测试成果显示，于方针追踪使命（Ostrack/ViT-Base）中，AI编码方案可以或许实现18.3%的码率节省；于动作辨认使命（SlowFast）中，可实现12.0%的码率节省。这象征着，于包管AI辨认精度基本稳定的条件下，体系可以或许进一步降低视频传输带宽及存储成本，为边沿AI部署带来更高的效率。

黄鑫暗示，将来玲珑VPU不仅但愿优化传统视频不雅看体验，更但愿针对于差别AI运用实现数据压缩及使命精度的双向优化。经由过程引入多模态参数配置、先后端AI收集，玲珑VPU但愿实现“人眼看患上清”及“AI看患上懂”的同一。

“假如说将来AI需要拥有近似人类的视觉能力，那末视频就是毗连AI与真实世界的主要窗口。玲珑VPU但愿成为AI视觉引擎，让人类看清世界，也让AI真正理解世界。”黄鑫暗示。

从“峨眉”到“武当”，安谋科技的方针更远了

回首已往，“玲珑”已经推出六款产物：2021年的V5/V7重要增长了AVS 2.0的Decoder，H.26四、H.265的编码质量提高了15%；2022年 “玲珑”V6/V8增长了AV1的Decoder，H.264的编码质量比拟V5/V7提高了10%；2024年 “玲珑”V510/V710增长了H.266的编码器及解码器；2025年 “玲珑”V520LE是专门为监控打造的编解码一体产物；2026年3月推出代号为“峨眉”的V560/V760，成为面向AI运用的新一代视频处置惩罚器IP。

回首“玲珑”VPU的成长，每一一次迭代都缭绕三个焦点方针睁开：让编码尺度更进步前辈、让编码质量更优异、让单核机能更高效。“武当”V620/V820作为第七款产物，一样也于缭绕这三个方针睁开事情。

从更久远来看， 玲珑 VPU的成长方针已经经再也不局限在传统视频编码器。基在全新的AI练习框架，安谋科技正于鞭策AI端到端视频编码技能连续演进。