DSP上的视频、图像和计算机视觉应用
DSP上的视频、图像和计算机视觉应用
2016-08-24 10:07
集成音频、计算相机、计算机视觉，甚至移动机器学习等特性在Qualcomm® Hexagon™数字信号处理器（DSP）运行时表现更佳、耗电更少。如果您对这些用例有兴趣，可以下载Qualcomm® Hexagon™ SDK 3.0，就能够方便、快速地开启全新的算法之旅。除支持搭载Hexagon DSP的设备外，SDK 3.0还可以让您完全访问Hexagon矢量扩展 (HVX)——Hexagon DSP 大规模并行处理器扩展，可用于图像、视频、计算机视觉（CV）和卷积网络。HVX集成于Qualcomm® Snapdragon™800系列处理器，是一种新的硬件模块，能够在一个时钟周期处理多达1024位数据。OnePlus 3、LG G5、三星Galaxy S7等设备就配备了Snapdragon 820，您将看到更多的虚拟现实（VR）应用、更强大的低光相机性能、更高品质的相机成像和机器学习。谁在使用Hexagon SDK和HVX？超过100位独立软件供应商（ISV）利用Hexagon SDK开发了运行在Hexagon DSP的算法。自从我们去年推出HVX以来，许多厂商一直在为Snapdragon 800系列设备开发CV、图像处理及视频功能，包括：
[*]Almalence的SuperSensor，利用HVX优化分辨率、动态范围和低光性能
[*]Arcsoft的智能成像解决方案，如数字换装、低光补偿和视频稳定器，使用HVX帮助用户拍出出色的照片和视频
[*]BDTI 利用Hexagon SDK为提供商移植VR算法，该提供商的OEM客户预算紧张
[*]IRIDA Labs作为计算成像及计算机视觉供应商参与了Hexagon 开发者网络
[*]Morpho 使用Hexagon SDK开发计算机视觉，运行图像质量增强算法，可以利用移动设备捕捉照片和视频
[*]Pelican imaging 为移动及AR/VR HMD应用开发3D深度感测，已经利用HVX在Snapdragon 820处理器上开发出深度感测解决方案
[*]Streambox 制作了搭载Snapdragon处理器的移动编码器，用于绑定网络视频传输
[*]Light 的图像处理引擎使用HVX将单反品质带到移动摄影，尤其是在富于挑战性的低光场景下
[*]Thundersoft 配备了Hexagon DSP的Snapdragon 650 IP摄像机
[*]Van Gogh Imaging 已经将其VR场景追踪移植到Snapdragon处理器
我们已经为独立软件供应商提供了在SDK 3.0中访问HVX的能力，因为设备制造商正竞相在解决相机相关特性方面添加强大的计算能力。事实上，OEM厂商已经利用HVX集成了自已专有的视频和图像处理算法。为Hexagon SDK 3.0 开发人员准备的新用例超越语音和音频用例，SDK 3.0 为专注于视频、图像处理、CV及机器学习的新一类开发人员开启了异构计算之门。视频：实时，软件可编程后处理——流媒体服务根据订购情况和内容类型按不同比特率发送视频。较低的比特率产生视频块效应及非自然信号，交由后处理解决。解压后，使用HVX的流传输软件可以实时消除空间（单帧跨像素）或时间（ 帧间）上的压缩失真。图像处理：全景拼接——360度摄像头通常是多台广角摄像机拼接在一起。普通处理器要求用户扫描现场一圈，然后等待相机将多张相片拼成球形图像。HVX允许成像软件处理同时接受来自多个摄像头的馈送，并实时拼接。图像处理：计算相机——包括在用户看到图像之前，对像素进行密集数字运算的一种新算法。HVX 使低光相片和录像所需的巨大计算能力成为可能。CV：虚拟现实——VR栩栩如生需要所有六个自由度（6DoF）的动作。这需要跟踪每三度两套动作，然后将它们组合成六自由度运动。利用 HVX，高质量VR所需的实时计算必须跟上移动速度和VR头盔视频帧速率。Next step...搭载Snapdragon 820处理器的设备配备了HVX。领先的OEM厂商正利用HVX使他们产品的相机和视频功能独树一帜。我们也为您准备了大量有关HVX的内容，并且已经发布了Windows和Linux版SDK，请马上就下载Hexagon SDK 3.0，开始加速您的视频、图像处理、CV和机器学习应用。
页:
[1]