2020-05-21

海思发布新一代 XR 芯片平台，支持 8K 解码能力，高达 9TOPS 的 NPU 算力

AR/VR 的市场已经迎来了爆发式的增长，海思的解决方案来了

5 月 21 日，上海海思携手 Rokid 等终端厂家，正式发布 XR 芯片平台。该平台基于一款可以支持 8K 解码能力和高性能 GPU、NPU 为一体的 XR 芯片。

为了更好的适应 AR/VR 场景高分辨率、广视角、低延时的特点，上海海思联手国内领先的 AR 企业 Rokid 共同优化了平台专用的算法和方案，双方对语音、视觉、环境感知等 AI 计算能力做了大量的优化工作，完成了多路视频编解码的高分辨率低延时设计，从芯片规格、系统软件和云端服务多个层面，为 XR 行业提供 AI、交互和多人协同等核心基础能力。

现状：

众所周知，作为产业规模超百亿美金，市场空间年增长率超过 70% 的新兴产业，AR/VR 的市场已经迎来了爆发式的增长。AR/VR 技术会在教育、医疗、娱乐、地产等各个行业得到全方位的应用，但是目前市场上的 AR/VR 终端产品仍然在体验上存在着各种问题：

1、设备分辨率低的问题

以 VR 为例，人眼能达到的理想分辨率大约为 60PPD（每度像素数），一般支持 4KP60 解码能力的芯片能支持的单眼分辨率为 21.3PPD，对应到电视的话只能等效于 480P 的电视显示效果，还远远达不到让人感到舒适和沉浸式的效果。

而海思 XR 芯片平台所提供的 8K 的硬解码能力，可以支持到单眼 42.7PDD，从解码能力上看已经有了大幅的提升，可以支持消费者体验到更清晰的内容。

2、眩晕问题

眩晕问题一方面和人眼的视觉疲劳有关，而显示画质差、纱窗、拖尾、闪烁等过低的画面质量都会引起人眼视觉疲劳，从而造成眩晕，主要还是由于人体视觉感受器，平衡感受器和本体感觉各方面不一致或者冲突时造成的眩晕。

往简单了说就是：眼睛看到动了，但是身体没有感觉到动，或者身体动了，但是眼睛没有看到动。对应到 XR 的场景就是由延迟造成的动作和画面不一致。而延迟的来源一般有两个因素，一是 CPU 处理性能不足，不能及时处理；其次是网络造成的延迟。

海思 XR 芯片平台支持 8 核高性能处理器，强大的 CPU 处理能力能够大幅提高终端设备计算的速度，从而避免延时的产生；同时该平台针对网络性能也有针对性的做了协议上的优化，可以有效降低网口处理数据导致的延迟，从而降低眩晕症的发生。

3、数据分析耗时长、速度慢

AR 产品的一个重要应用场景是人脸识别、车牌识别，这需要对 AR 眼镜摄像头中采集到的视频图像进行实时分析，正确识别出每帧图像中的人脸及车牌，将识别到的结果上传到服务器进行比对，并将比对结果实时显示到眼镜中的屏幕上。

从图像采集、分析、上传到显示，耗时越短，速度越快，用户体验越好，而分析阶段是整条链路中耗时最长的一环，想要做到每分钟上百个人脸、车牌在毫秒级时间内完成分析识别，就需要芯片具备强大的 NPU 算力支持。海思 XR 芯片平台具备独立的海思专有架构 NPU，高达 9TOPS 的 NPU 算力为这一功能的实现提供了强有力的保障。