践行All in AI战略,安谋科技发布新一代VPU IP,代号“峨眉”

问AI · AI与视频应用的双向奔赴如何依赖VPU技术?

国内领先芯片IP设计与服务提供商安谋科技(中国)有限公司(以下简称“安谋科技”)近日在上海举办开年技术大秀《玲珑·视界》。在本次活动上,安谋科技正式发布了面向AI应用的新一代VPU(视频处理单元)IP——“玲珑”V560/V760(内部代号“峨眉”)。

据悉,作为安谋科技“All in AI”战略下的最新自研成果,该产品目前已在服务器、视频转码等领域完成首批客户授权,备受市场认可。

解码VPU:应对AI时代的海量视频数据挑战

在智能设备的算力架构中,大众对CPU(中央处理器)和GPU(图形处理器)耳熟能详,而VPU的战略地位正随着视频分辨率的爆发式增长而日益凸显。

安谋科技多媒体产品线研发负责人周华在现场解释了VPU的必要性:“随着视频分辨率从1080P走向4K、8K,数据量急剧增加。一帧8K视频包含约3300万像素,一秒钟的数据量高达数个GB。如果全部交由CPU来处理,必然会挤占庞大的系统资源。因此,我们必须打造专用的硬件视频IP(VPU)来负责视频的编解码工作。”

VPU的核心任务包括原始视频数据的按需预处理(如缩放、旋转)、编码压缩(便于存储和传输)以及解码呈现。目前,VPU已被广泛应用于个人电脑、无人机、机器人以及汽车电子等众多领域。

安谋科技深耕VPU IP赛道,将自研VPU产品线命名为“玲珑”。周华表示:“‘玲珑’寓意八面玲珑、玲珑剔透。我们希望它能全方位覆盖万千应用场景,让视频处理既精巧又不失性能,既稳定又不失灵活。”作为“玲珑”系列的第五款产品,“峨眉”正是为了在AI时代为客户提供更极致的视频体验而生。

双向奔赴:AI与视频应用的高度协同

AI与视频应用之间究竟是怎样的关系?安谋科技VPU产品总监汪奕磊给出了深刻的行业洞察。

“首先,AI引领了视频应用的变革。从传统的机器拍摄,到如今火爆的文生视频、图生视频,AI已经成为视频的生产者、加工者和最大消费群体之一。”汪奕磊指出,人类80%以上的信息来源于视觉,AI同样如此——AI训练的庞大数据中有80%以上来自视频数据。在AI从虚拟世界向物理世界演进的过程中,视频无疑是最关键的桥梁。

随着大模型和AI应用的蓬勃发展,视频应用变得前所未有地复杂。AI应用不仅加速了视频分辨率和画质的提升,还对处理延迟提出了更苛刻的要求(端云结合需要极低延迟以保障用户体验)。这也呼唤着性能更强、编码质量更高、延迟更低、安全性更好的VPU产品。

代号“峨眉”:“六边形战士”化解多媒体碎片化挑战

为了满足上述苛刻需求,“玲珑”V560/V760应运而生。它采用了创新的内容感知编码技术,单核即可实现4K@60FPS的编码或8K@30FPS的解码,并全面支持H.266等主流编解码标准,堪称VPU领域的“六边形战士”。

图片

具体而言,该产品集六大核心特性于一身:

· 高性能:相比上一代,单核解码性能提升100%,多核运行并行度极高。

· 高鲁棒性:具备强大的错误处理能力,在丢包率高达20%的极端网络环境下仍可纠错解码。

· 高质量低码率:同等画质下码率平均降低20%(特定场景最高降80%);同等码率下画质平均提升20%。

· 低延时:引入条带级编解码控制技术,将延时骤降至一帧的1/20,控制更为灵活。

· 多OS支持:驱动全面兼容
Linux/Android/Windows/RTOS,硬件原生支持多操作系统及虚拟化应用。

· 信息安全:支持TrustZone内容保护,配合高级Mosaic功能提供完善的隐私保护壁垒。

面对云、边、端视频场景的多样化需求,安谋科技VPU研发总监黄鑫博士补充道:“‘玲珑’V560/V760的核心优势在于其灵活可配置的架构与‘积木式堆叠’的研发特色。这一设计对于高度碎片化的多媒体技术市场尤为重要,能够完美支持客户按需配置与敏捷创新。”

图片

针对数智前线VPU产品在具身智能的落地中将扮演怎样的角色?汪奕磊认为,对于具身智能而言,当前落地最难的一环确实是数据的采集和算法的演进。在这其中,视频数据占据了相当庞大的比重。这些海量的视觉感知数据,无论是为了实时处理、本地存储,还是为了传输到云端进行大模型的训练,都必须通过VPU来完成前置处理。

具体到具身智能的应用场景,对VPU提出了两个非常苛刻的核心要求:

应对多数据源头的强算力需求: 具身智能设备(如人形机器人)通常搭载多个摄像头和传感器。面对多路并发的视频数据源头,要求VPU必须具备极其强大的并发计算与处理能力。

赋能云端训练的极高编码质量: 对于后端的云端算法训练来说,前置输入的图像质量越高、精度越准,最终训练出来的模型效果和能力基数就越高。因此,VPU必须在压缩数据的同时,尽可能保留极高的图像精度。

从技术逻辑和应用场景来看,具身智能与智能驾驶其实有许多相似之处,都高度依赖高质量的视觉处理。安谋科技的新一代“玲珑”VPU,正是为了解决这些痛点而打造的底层技术基石。