2020 OPPO开发者大会召开,全新AIUnit与FusionUnit开放引擎亮相

9月24日 , 2020年OPPO开发者大会正式召开 , 新的ColorOS91正式发表 , 继承了创造无界限的理念 , 给用户带来了更加精彩、多方面的融合、安全方便的会场体验 。在大会上 , OPPOColorOS设计总监陈希宣布 , OPPO系统能力开放引擎将进一步扩展到7个 , 增加AIUnit金和FusionUnit , 帮助开发人员在移动终端部署AI算法 , 同时实现手机与其他设备的快速、稳定、低延迟合作 , 智能、多设备、多场景等

在2020年OPPO开发人员大会的技术能力开放了专业场所 , OPPO对开发人员进一步讲述了AIUit和Fusion两个新系统引擎的能力 , 同时新升级的Hyperboost、CameraUnit和开发人员也正式见面 。

AIUnit应用无限可能 , AI技术全面帮助开发人员

为应用开发人员和从事AI算法开发的研究人员提供更好的支持 , OPPO进行了AI的能力开放 。目前OPPO、AI开放能力主要包括AIUnit算法、引擎、AIBoost模式推理加速框架 。AIUnit帮助应用程序开发人员更好地开发AI功能 , AIBoost帮助开发人员向移动终端部署算法 。

AIUnit , 发动机能力提供了视觉算法、视频算法、音频算法、感知算法四个方向的能力建设 , 可以为应用开发商提供人工智能算法API , 应用开发商可以有效地编写在移动设备上运行的app 。目前 , AIUnit已应用于ColorOS系统相册、视频编辑、音频和感知等相关应用程序 , 如系统相册的旧照片修复、面部聚集能力、视频增强能力、铃声编辑能力等 。

AIBoost作为面向移动终端的AI模型加速框架 , 通过OPPO终端强大的硬件计算资源 , 可以有效地帮助AI算法研究者将算法模型迅速部署到OPPO终端设备中 , 最大限度地提供终端的AI加速能力 。在 ETH 瑞士苏黎世大学 AI Benchmark 的评测平台上 , 借助 AI Boost , 平台效能可提升23-33%;在高通和MTK 同芯片平台的产品中均优化达到了业界最佳表现 , 对标准的模型效能提升了30% 左右 。

FusionUnit的智能连接能力 , 随着科学技术的快速进步 , 用户周围的智能设备越来越丰富 , 但复杂的设备也需要用户更多的时间来理解、配置和使用 。针对用户在多设备使用的场景下 , 如何优化这些设备的管理、协同和联动 , FusionUnit提供了一整套解决方案 。

FusionUnit可以通过重定向技术将用户与系统或应用接口共享当前屏幕或应用接口 , 并与周围或远程朋友共享 , 以实现许多人观看视频或朋友观看和战斗的功能 。同时 , 用户还可以为受益人授予控制权限 , 让对方使用这个应用程序 , 在这个过程中双方的手机都可以离开现在的页面 。在支持设备方面 , 该功能将来复盖手机、PC、电视等终端 。

通过FusionUnit 数据融合能力 , 多端设备可以实现便捷的应用级数据共享 。例如 , 通过手机上的相册应用可以访问同Wi-Fi 下其它所属设备上的照片文件 , 并且提供统一检索、传输能力 , 实现近场多设备数据一致 , 让用户可从任意一端进行统一资源管理 。开发人员可以通过FusionUnit实现跨越终端的连接能力 , 保证用户在多终端使用时的无缝感 。

同时 , FusionUnit支持跨计算资源、跨设备计算能力的提高 , 同时可以调动PU/GPU/book/book等计算机加快运算 。在 AI 相关的实时视频流解析、离线视频处理等任务中 , 可大幅提高 AI 计算能力和应用帧率 , 实现端内多芯片计算协同 。

系统加速发动机

Hyprororororong>Bong>

目前 , 微信、QQ、淘宝、抖音、王者荣耀等头部应用和游戏已经接入HyperBoost系统加速引擎 , 国内市场日均调用次数超过2亿次 。此外 , HyperBoost也积极走向国外 , 国外开发人员可以非常简单地获得这种能力 , 帮助应用的顺利运行 。

在开发适应性方面 , HyperBoost课程已经从系统组件转变为应用组件 , 使很多开发者升级更加方便 。同时 , HyperBoost也引进了云配置管理功能 , 只需在云中进行轻量化的适应 , 开发人员就可以完成访问 。

CameraUnit和MediaUnit , 全面开放系统级影像和多媒体能力

CameraUnit作为OPPO影像能力的开放界面 , 可以消除系统相机能力和三方应用的差距 , 将OPPO相机的强大能力提供给三方应用 。通过简单的API界面调用 , 三方应用程序可以实现双重摄影同开、视频HDR、超颤音、超广角、超夜景等特性 , 实现与OPPO相机相同的摄影效果 , 给用户带来丰富的相机能力和优质的摄影体验 。

现在的颤音、速手等三方应用程序已经访问了Cameraunit的超级颤音和超广角能力 , 访问后可以利用系统本地的多源传感器信息融合和颤音防止场景的智能分析 , 用户在使用三方应用程序拍摄视频时也可以实现超级颤音防止 , 在室外场景下除了

之外 , OPPO智能相册还支持用户在使用时根据时间、地点、人物、模糊语等标签快速找到所需的图像 , 现在的智能相册能力可以复盖80多个场景 。同时 , 相册智能选图推荐服务可以帮助用户根据时间节日、地点图集、精彩回忆等类别进行分类 , 大大提高管理效率 。

值得一提的是 , 包含这么多丰富功能的CameraUnit仅20KB大小 , 三方应用只需要简单配置对应的能力参数即可完成接入 。

MediaUnit支持将硬件级的低时延耳返能力开放给开发者 , 让用户可以自主调节音色、节奏、音准等各种参数 , 获得听唱同步的优质K 歌体验 。另外 , 对于现场直播、视频通话等场景 , 人们关注的是人的脸的表情和手的动作 , 通过提高这些地区的清晰度 , 可以有效地提高用户的主观效果 。通过MediaUnit开放的ROI代码功能 , 开发人员可以控制视频重点关注地区代码率的分配情况 , 削弱背景信息 , 在节省带宽的同时提高视频整体感觉体验 。

【2020 OPPO开发者大会召开,全新AIUnit与FusionUnit开放引擎亮相】OPPO致力于与世界开发人员和制造商合作 , 促进硬件和软件的生态融合 , 提高消费者的使用体验 。迄今为止 , ColorOS开放系统能力达到27个 , 超过100个三方合作伙伴 , 日平均接口调用次数达到3亿人 。未来 , OPPO也将不断提高系统轻松流畅的使用体验 , 同时持续开放系统能力 , 与更多开发商和用户分享技术开放带来的便利 。

    推荐阅读