查看原文
其他

当APP遇上AI,会创造怎样的新奇体验?AI Boost大揭秘

移动服务平台 OPPO开放平台 2022-05-13
图像视频画质不清晰加载时间长智能识别准确率低用户体验欠佳启动复杂运算时耗费大量手机电量......这些问题AI Boost为你量身打造解决方案先来看看他到底长啥样吧!

『AI Boost早知道』

AI Boost是OPPO自研的面向移动端的AI算法加速框架。借助OPPO终端强大的软、硬件计算资源,帮助开发者轻松将丰富的AI能力及算法快速融入到APP中,最大限度地提升应用性能,降低应用功耗。同时,AI Boost对模型进行保护,防止其被恶意程序窜改、窃取,为APP提供安全舒适的使用环境。




『AI Boost全解读』


01算子支持升级性能降低功耗


目前AI Boost框架提供了600+的算子支持,且支持多种关键通用骨干模型,如MobileNet/ResNet,以及在超分、分割领域的srgan及unet等通用模型,为应用众多使用场景创造高性能、低功耗的计算环境。




02跨平台合作支持提升平台效能


当前在ETH AI-Benchmark芯片评测平台上,通过AI Boost的支持,芯片平台效能可提升20~30%左右,在同芯片平台的产品中优化达到业界领先的效果。




合作案例一:MTK平台


垂直整合OPPO和MTK在CPU/GPU/APU的软硬件技术优势,针对AI性能的调度做了深度优化。以MT6885平台为例,AI性能提升23%。(MT6885平台在AI Bechmark跑分由71.3K提升到93.7K)


合作案例二:Qualcomm平台


OPPO利用高通Hexagon DSP和HTP(Hexagon Tensor Processor)运算资源,对神经网络算子进行优化,提升推理性能。以高通865平台为例,AI性能有31%的提升。



03

4大AI算法加速

识别更精准


OPPO AI Unit是面向移动端的AI算法引擎。搭建视觉、视频、音频、感知四大算法引擎能力,通过开放式人工智能算法API,帮助开发者简单、高效地将AI能力运行到APP中。


例如Reno4中的Always On情景感知能力,借助高效的端侧加速能力,通过前置低功耗传感器感知用户的人脸、手势等状态信息,进而自动化注视不息屏、防偷窥、智能旋转、隔空手势、手势接电话等操作。



04
AR 算法加速让画面更真实


光照估计是感知真实环境的手段之一,通过AI Boost加速框架将光照估计算法快速部署到端侧摄像头中,然后通过摄像头观察到的画面来预测真实环境的光照信息,并利用这些信息来渲染放到真实场景中的虚拟物体,可以使得虚拟物体看起来更加真实。


光照估计的准确率:> 90%;光照估计模型大小:< 100MB;光照估计运行速度:> 20FPS。


『AI Boost上线剧透』


好啦,说了这么多,相信各位开发者们已经按奈不住想要接入AI Boost,在这里欧妹也给大家提前剧透下,目前AI Boost已处于测试阶段,相信很快就会和大家见面。如果各位开发者想要第一时间获取AI Boost的全部能力,欢迎在下方留言区告诉我们。



往期精彩回顾《移动应用程序信息内容乱象专项整治》通知
报名开启!OPPO技术开放日第六期邀您参加
CameraUnit助力打造极致拍摄体验

您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存