Misa|Rokid 何以引领 XR 未来交互?

去年 1 月 Rokid Open Day 活动上 , Rokid 为新开张的「若琪科技馆」带来了新一代 AR 眼镜 Rokid Glass 2——分体式结构 , 可折叠设计 , 支持语音+触控双重交互 , 以及强大的扩展能力 , 让它在当天的「馆藏」参观和介绍中 , 应用自如 。
Rokid Glass 2 并没有停留在「秀肌肉」、「做展品」的阶段 。 这款在 2020 年初发布的眼镜 , 至今仍是国内唯一一款规模化量产的光波导眼镜 。
在接下来的 77 天时间里 , 在完成了 30 次产品迭代、超过 50 天的现场实践改进后 , Rokid 将这款「全球首款智能 AR 导览眼镜」带进了同样位于杭州的良渚博物院和良渚古城遗址 , 让它投入到博物馆的实际运营 。
收效也是显著的 , 在 7 天时间内 , 总计接待游客体验数量超过 5000 人次 , 远远超过传统讲解设备的体验人次 。

Misa|Rokid 何以引领 XR 未来交互?
文章图片


Misa|Rokid 何以引领 XR 未来交互?
文章图片


Misa|Rokid 何以引领 XR 未来交互?
文章图片

国内可能还没有哪家厂商 , 可以让一款来自未来的 AR 眼镜 , 如此近距离的走进现实生活 , 让不同年龄、不同行业的普通人 , 能够置身于那些曾出现在科幻电影中的 AR 场景 。
时隔一年 , Rokid 在 2021 年的开放日活动上 , 又发布了全新一代双目 MR 眼镜 Rokid Vision 2 。 借着新品发布的机会 , 深圳湾与 Rokid 创始人祝铭明(Misa)进行了一次深度对话 。
人、真实世界、虚拟世界:我们应该置身于何处? 人工智能让交互发生了质的变化 , 改变了交互对象和交互能力 。 传统人机交互 , 通过简单的指令输入 , 机器输出结果 。
比如我们在旅行中 , 坐在窗边正在欣赏外面的风景 。 我们掏出手机 , 输入想要搜索的旅行地关键词 , 然后通过屏幕 , 看到手机给我们输出的结果 。 但当我们掏出手机的那一刻 , 我们已经错过了太多的风景 。
我们与数字世界(旅行信息)和真实世界(窗外风景)不应该是割裂的 , 应该以更自然、更友好的方式融合在一起 。

Misa|Rokid 何以引领 XR 未来交互?
文章图片

这种对人与数字世界和真实世界的关系的思考 , 也被 Rokid 带进了博物馆参观的场景 。
人们需要在参观的同时获得文物信息 , 而信息获取的途径无非几种:看文物旁边的文字说明 , 但这样信息太单一了;拿出手机搜索文物关键词或者扫展柜上的二维码 , 但这样的话 , 我们明明面前摆着这个陶罐 , 却要盯着手机 , 感觉重点错了 。 无论以上哪种方式 , 一来容易打断我们的浏览过程 , 二来对于老年和小朋友群体不太友好 。
而当博物馆有了 Rokid AR 眼镜 , 体验就不一样了 。 戴上 Rokid Glass 2 参观时 , 眼前不仅有文物 , 还有以 AR 多媒体形式出现在眼前的文物信息 。

Misa|Rokid 何以引领 XR 未来交互?
文章图片

而在户外 880 公顷的良渚古城遗址公园内 , Rokid 通过空间定位和场景识别能力 , 将 5000 年前的历史场景叠加在了如今的遗址公园之上 , 让古代的建筑 , 透过眼镜 , 在眼前的现实世界中呈现 。
这与过去通过手机 AR app 或是 VR 头戴眼镜实现的博物馆体验完全不同 , 在其中游览的游客仿佛置身当年的文明之中 。

Misa|Rokid 何以引领 XR 未来交互?
文章图片

感知、理解、通信、展现:我们用什么与未来交互? Misa 告诉我们 , 当我们把真实世界、虚拟世界和人结合在一起的时候 , 会发生非常有趣的化学反应 。 而这需要全新的面向未来的交互平台来实现 , 它能将人、真实世界、虚拟世界 , 这三个对象融合在一起 。
【Misa|Rokid 何以引领 XR 未来交互?】为此 , 未来交互平台需要具备以下这四个能力:

  1. 感知能力 。 未来的输入能力 , 从过去冰冷的电脑指令变成人与传感器、人与环境的交互;
  2. 理解能力 。 在感知的同时 , 让我们的产品更好地理解用户的意图 , 比如 MR 眼镜的识别功能;
  3. 通信能力 。 紧跟 5G、6G 等技术发展的脚步 , 提供更快更无感的信息传输能力;
  4. 展现能力 。 从过去单调的屏幕呈现方式 , 转移到现实世界中来 , 让人和现实世界融合在一起 。
那么 , 能实现未来交互的革命性终端将会是什么?Misa 的回答是 XR——XR 将「三个对象」、「四大能力」完美地融合在一起 , 将彻底改变人类的工作、生活、学习和娱乐方式 。
基于对未来交互的愿景 , Misa 这样定义 Rokid 公司:
Rokid 不只是一家 AR 眼镜公司 , 而是致力于让人、虚拟世界、真实世界实现融合的交互平台 。
展陈、办公、汽车销售、石油作业、防疫测温:在行业应用场景中探索 XR 的落地 毋庸置疑 , 迄今为止仍没有一款智能眼镜真正量产走向消费者 。 智能眼镜离消费市场还有多远?Misa 去年给出的答案是这样的:
消费者的期待很大 , 与硬件能够达到的能力 , 相差还是很远 。 toC 可能还有 3~5 年的时间 , 就算你拿 100 亿补贴砸进市场也是无济于事 , 消费者还是不会买单 。
正如我们看到的 , 已经量产面世的智能眼镜如微软 Hololens 等 , 无一例外的走向了行业应用领域 。 Misa 很早就断定 , AR 产业空间巨大 , 在爆发节奏上 , toB 硬件将先于 toC 硬件 。

Misa|Rokid 何以引领 XR 未来交互?
文章图片
△ 2019 年第一代 Rokid Vision 于 AWE 2019 发布 , 应用于远程办公场景 。
但与此同时 , 我们还发现 , AR 眼镜正在朝着轻便化、适合日常佩戴的方向发展 。 既然是行业应用 , 智能眼镜为什么一定要「迎合」消费级市场的需求 , 做小、做轻、做得好用呢?Misa 的回答是:
消费者使用的产品 , 不等于消费级市场的产品 。 消费级市场的产品需要「迎合」消费市场的需求和用户体验;而在特定商业和行业场景下 , 产品「迎合」的是用户在特定场景下的使用体验 。
所以 , Rokid 要做的是从用户体验角度出发 , 解决特定商业应用场景中用户的需求 , 让用户需求驱动产品设计 。 而这其中所体现的「产品力」 , 则是 Rokid 最为擅长的 。

Misa|Rokid 何以引领 XR 未来交互?
文章图片
△ Rokid 与奥迪和 Cupra 一起 , 为消费者打造全新的 AR 试车与购车体验 。
去年 8 月 , Rokid 与中石油全资子公司昆仑数智开启合作 , 而合作的第一个场景就围绕着生产作业现场来展开的 。 对于中国石油的作业现场 , Rokid 总结有两个核心要素:一个是作业现场本身 , 另一个是现场的作业人员 。
围绕这两个主题 , 出现了两个发展方向:一个是打造「智能现场」 , 以机器智能来替代人工进行某些领域的工作 , 来突破现有的生产瓶颈;而另一个是打造「超级工人」 , 使企业可以通过智能增强 , 来提高现场作业人员的个人能力 , 从而带来作业效率的提升 。
这两个方向很有趣 , 因为他们表现了人与科技截然不同的两种关系:一个利用愈发强大的软硬件 , 试图取代人类的部分乃至全部工作;另一个则试图利用技术手段 , 弥补人类自身的不足 , 缩小人类在经济、智力和社会地位上的差距 。 这就是所谓的 AI 和 IA 。
Rokid 选择了第二个发展方向 , 利用科技去武装现场的工作人员 , 打造一个智能增强的「超级工人」 。 于是 , Rokid 联合昆仑数智推出的全球首款工业防爆级别的 XR 头环 X-Craft 应「景」而生了 。

Misa|Rokid 何以引领 XR 未来交互?
文章图片


Misa|Rokid 何以引领 XR 未来交互?
文章图片
△ Rokid 与昆仑数智合作的 X-Craft , 助力作业现场的「超级工人」解决问题 。
X-Craft 拥有许多全球首创的新特性 , 比如旋钮式的交互设计、一键报警联动 , 模块化的佩戴系统等等 。
与此同时 , 通过针对性的头环硬件 , 以及深度定制的场景方案 , Rokid 还规范化了作业现场的人员操作 , 通过视觉和语音系统 , 为他们提供智能辅助 , 利用 5G 的高宽带为他们提供了实时的在线专家指导 。
超级工人的成果也很理想 , X-Craft 加上昆仑数智的 XR 解决方案 , 大大提升了工作人员的工作效率 。 目前除了油气行业 , 已经有煤焦、电力、冶金等多个行业的客户准备利用 X-Craft 开发适合他们场景的解决方案 。

Misa|Rokid 何以引领 XR 未来交互?
文章图片

除了 Rokid Glass 2 和 X-Craft 之外 , Rokid 还在去年年初 , 为防疫人员定制了一款便携式的高精度红外测温模组 , 将它组装在 Rokid 的眼镜上 , 做成了一款红外测温眼镜——也是全球首款智能测温 AR 眼镜 。
戴上它 , 筛查人员就像头上戴着一个测温门一样 , 他们可以在安全的距离上 , 检查经过的人群 。

Misa|Rokid 何以引领 XR 未来交互?
文章图片
△ 佩戴全球首款智能测温 AR 眼镜 Rokid Glass 巡检的安保人员 。
四代原型机背后的思考:志在探索和引领 XR 硬件之路 上周的 2021 Rokid Open Day 还有一项重要的宣布——全新一代双目 MR 眼镜 Rokid Vision 2 。
尽管命名为 Vision 2 , 但它已经是 Rokid 推出的第四代 Vision 原型机了 。 从 2019 年 AWE 亮相开始 , 深圳湾也几乎完整记录了 Vision 成长的历程 。

Misa|Rokid 何以引领 XR 未来交互?
文章图片

Rokid Vision 2 采用了轻量级设计使其可以像普通眼镜一样折叠 , 带给使用者超轻的佩戴体验 。 显示方案采用全球领先的衍射光波导技术 , 具备 85% 的透光率和 40 度的视场角(FOV) , 给用户带来相当于 4 米外的 120 英寸的视觉感受 。 高品质双定向扬声器和高性能全语音控制麦克风设计相结合 , 提供了一流的沉浸式影院般体验 。
Rokid Vision 2 拓展了现有的用户界面(包括手机、笔记本电脑、游戏机和平板电脑) , 并兼容 4G 和 5G 网络 。 它将 MR 与现实世界融合 , 提升用户工作效率的同时提供身临其境的体验 , 广泛适用于文旅、展陈、医疗、工业等行业 。

Misa|Rokid 何以引领 XR 未来交互?
文章图片
△ Rokid Vision 2
目前 , Rokid 已经启动了这款原型机的量产评估动作 。 同时 , Rokid 也强调了一点:
相对于一个产品的发布 , Rokid 对 XR 硬件产品的思考 , 对于 Rokid 和正在快速发展的 XR 行业来说 , 更有价值 。
Rokid 希望通过自研产品 , 引领行业 , 探索未来 , 同时 , 通过市场和用户来打磨和检验 Rokid 的能力 。 而 Rokid 自研产品有三条线路:
  • Glass 系列:面向通用型的 AR 工具类产品 。 作为信息辅助工具 , 为用户在特定的操作环境下 , 提供信息提示 。
  • X 系列:工业类 AR 产品 。 它将满足典型的重工业和制造业场景 , 针对特殊行业深度定制 , 凸显特定场景下的核心价值 。
  • Vision 系列:肩负着引领行业 , 探索未来的使命 。 它强调丰富的空间展示能力 , 更强调通用性 , 也代表了 Rokid 向消费级市场努力的方向 。

Misa|Rokid 何以引领 XR 未来交互?
文章图片
△ Glass 系列、X 系列、Vision 系列
Rokid 产品矩阵由此而生 。 同时 , 这也印证了 Rokid 在这些年产品实践中的一个重要发现:XR 这个行业还不具备一个通用产品 , 能够覆盖所有的场景 。
五大标准:定义未来 XR 眼镜 Rokid 希望通过 Vision 这款产品来探索和制定 XR 行业的硬件标准 , 并将它总结为以下五项:
  1. 光学高透光率 。 外界的光线不低于 85% 进入到使用者的眼镜内 , 只有高于这个数字才能让使用者体验到真正的虚拟和现实的结合;
  2. 无遮挡大视野 。 给用户提供 4D-IMAX 影院般的广阔视野体验;
  3. 超长出瞳距离 。 出瞳距离指人眼和显示器的距离 , 超长的出瞳距离给使用者带来更舒适的体验 , 也方便带眼镜的用户使用;
  4. 多模态交互方式及多渠道外界感知能力 。 具备语音、图像、手势和实体按键等交互方式 , 具备光感、距离感应和增强版 IMU 等多种外接感知能力;
  5. 多平台接入能力 。 包括手机端 , 电脑端等多平台接入能力 。
Rokid 硬件开发始终贯彻着以上五个标准 , 并将其融合到产品中 。 甚至还透露了 Rokid Vision 的第五代原型机——已经非常接近消费级市场想要的智能眼镜的样子了 。

Misa|Rokid 何以引领 XR 未来交互?
文章图片
△ Rokid Vision 第五代原型机谍照
XR 的玩家们:Magic Leap 技术路线激进 , Hololens 是微软的「斯巴达 300 勇士」 , 手机和互联网巨头尽管眼馋但还没有真正进入这个行业 , 苹果也不一定有秘密武器…… Rokid Vision 2 打造了全新的应用体验 , 包括虚拟城市、全息影院和奇幻世界等自研应用:
  • 虚拟城市 。 采用了基于单 RGB Camera 实现的 6DoF SLAM 和语音交互等技术 , 可自由移动体验虚实融合;
  • 全息影院 。 采用多模态交互技术 , 利用实时跟随导航和多媒体播放引擎 , 支持 2D、3D、360 度全景视频 , 体验巨幕家庭影院般的视听感受;
  • 奇幻世界 。 利用立体渲染技术打造了 360 度的沉浸空间 , 通过语音、头控、手势等多模态交互技术实现空间内的自然交互 。

Misa|Rokid 何以引领 XR 未来交互?
文章图片

很可惜因为疫情的原因 , Rokid 本来为这次开放日准备的 10 台 Rokid Vision 2 , 无法让我们在现场体验 。
我们和 Misa 的对话最后进入了「玩家」评述的环节 。 尽管 Rokid 还是创业公司 , 但在其他竞争对手面前 , Misa 并没有丁儿点的不自信 。
在 XR 领域 , 大家起跑线是接近的 , 只是各自做各自的取舍 。
Magic Leap 面向娱乐和个人场景 , 追求激进的技术路线 , 迟迟下不了 toB 的决心 , 而 Rokid 则目标明确 , 走的也更稳 。
微软是一头巨兽 , 但在这个相对狭窄的战场上 , 微软也只是投入了「斯巴达 300 勇士」 , 从这一点来讲 , Rokid 和 Hololens 双方的兵力是相当的 , 并且 , 两个团队不约而同地聚焦于 toB 领域 。

Misa|Rokid 何以引领 XR 未来交互?
文章图片
△ 微软联合美国军方研发基于 Hololens 的集成视觉增强系统(IVAS)以提升士兵战斗力
而对于那些国内外纷纷投入到 XR 领域的手机和互联网巨头们 , Misa 认为 ,
目前巨头还没有进入 XR 这个行业 , 尽管有一些眼馋 , 有一些好奇心 , 或是有一些野心 。 但他们短期内没有进入其实是理智的 , 因为 XR 产业还不够成熟 , 还不能拿出成熟的让 C 端用户接受的产品 。
Misa 进一步解释说 , 包括苹果在内的巨头迟迟不能拿出产品 , 是因为他们的目标是既定的 , 比如通用产品 , 一劳永逸的产品 , 不需要为过渡阶段的产品承担探索的成本 , 更不能牺牲用户体验和损害品牌 , 他们的挑战其实是非常大的 。
整个产业链其实并不乐观 , 苹果也不一定有秘密武器 。
而 Rokid 正在步伐稳健的 , 引领我们朝着未来交互的方向 , 越走越近 。
微信号:shenzhenware
主笔:陈壹零 / 深圳湾
编辑:陈述 / 深圳湾

    推荐阅读