/ 中存储网

虎贲T618 VDSP处理器强在哪里?高要求边缘视觉和AI处理需求“一招过”

2020-05-28 10:59:47 来源:半导体联盟

智能终端的图像功能日益丰富,各种好玩的、有趣的图像效果层出不穷。不可避免的,复杂的图像处理算法以及AI深度学习功能的集成,对手机性能和续航能力的要求也越来越高。

紫光展锐2019年8月发布的4G移动平台虎贲T618,8核架构,集成了视觉信息处理器(以下简称VDSP),将更好的满足高要求的边缘视觉和AI处理需求。

多个VDSP,有啥不一样?VDSP不仅能针对图像和AI处理任务加速运算,为性能加速,同时会显著降低终端的功耗。

先来张简洁明了的规格表重温下虎贲T618:

可以看到,AI的参数一栏,虎贲T618配置了具有强大运算能力的专用VDSP,可以更好的解决复杂的Camera视觉和AI处理任务。

VDSP最重要的特性是支持宽向量的SIMD(单指令多数据),VDSP能通过一条指令来并行处理大量的数据流,图像处理、视频处理、计算视觉、虚拟现实、增强现实等功能的实现都需要用到这一点。在获得高性能计算的情况下,VDSP还具有低功耗优势,与ISP(图像信号处理)结合,可获得更多差异化的性能体验,比如HDR(高动态范围图像)和FDR(全动态范围图像)。

通过专门的VDSP通过CPU来处理图像和视频等大数据流,两者能有多大差异?速度和功耗两方面都有显示优势。以经典轻量级图像语义分割模型deeplabV3模型为例,(这是一种非常先进的基于深度学习的图像语义分割方法,可对物体进行像素级分割)。

输入分辨率为512×512,实测VDSP和CPU的不同功耗及性能数据如下:

从测试数据可以看出,对密集乘加运算:4个 CPU核心全速运行带来的功耗,大约是1个VDSP核全速运行的4倍。VDSP处理模型速度快2.5倍。能效比上,VDSP是CPU 4核的10倍!

虎贲T618不仅针对AI应用,在HDR、实时美颜、语义分割等应用上,性能上有更好的提升。虎贲T618提供的实时人像背景替换,满足了趣味换景、视频会议滤除换景等个性化需求。

虎贲T618由VDSP加持可提供实时美颜,满足短视频实时美颜需求,再加上HDR/FDR算法加速,可以拍出高动态、高清晰度的超高画质图像。