新闻资讯NEWS

虎贲T618 VDSP高要求边缘视觉和AI处理需求“一招过”

发表时间:2020-06-04 04:35:23  作者:利民彩票-利民彩票官网-利民彩票app-利民彩票下载  来源:利民彩票-利民彩票官网-利民彩票app-利民彩票下载  浏览量:3

  智能终端的图像功能日益丰富,各种好玩的、有趣的图像效果层出不穷。不可避免的,复杂的图像处理算法以及

  紫光展锐2019年8月发布的4G移动平台虎贲T618,8核架构,集成了视觉信息处理器(以下简称VDSP),将更好的满足高要求的边缘视觉AI处理需求。

  多个VDSP,有啥不一样?VDSP不仅能针对图像和AI处理任务加速运算,为性能加速,同时会显著降低终端的功耗。

  可以看到,AI的参数一栏,虎贲T618配置了具有强大运算能力的专用VDSP,可以更好的解决复杂的Camera视觉和AI处理任务。

  VDSP最重要的特性是支持宽向量的SIMD(单指令多数据),VDSP能通过一条指令来并行处理大量的数据流,图像处理、视频处理、计算视觉、虚拟现实、增强现实等功能的实现都需要用到这一点。在获得高性能计算的情况下,VDSP还具有低功耗优势,与ISP(图像信号处理)结合,可获得更多差异化的性能体验,比如HDR(高动态范围图像)和FDR(全动态范围图像)。

  通过专门的VDSP相比通过CPU来处理图像和视频等大数据流,两者能有多大差异?速度和功耗两方面都有显示优势。以经典轻量级图像语义分割模型deeplabV3模型为例,(这是一种非常先进的基于深度学习的图像语义分割方法,可对物体进行像素级分割)。

  输入分辨率为512×512,实测VDSP和CPU的不同功耗及性能数据如下:

  从测试数据可以看出,对密集乘加运算:4个 CPU核心全速运行带来的功耗,大约是1个VDSP核全速运行的4倍。VDSP处理模型速度快2.5倍。能效比上,VDSP是CPU 4核的10倍!

  虎贲T618不仅针对AI应用,在HDR、实时美颜、语义分割等应用上,性能上有更好的提升。虎贲T618提供的实时人像背景替换,满足了趣味换景、视频会议滤除换景等个性化需求。

  虎贲T618由VDSP加持可提供实时美颜,满足短视频实时美颜需求,再加上HDR/FDR算法加速,可以拍出高动态、高清晰度的超高画质图像。