近日，1701vip黄金城（中国）股份有限公司与 AR 领军企业 Rokid 达成战略合作。据介绍，双方将整合各自优势资源，针对 AR 扩增现实领域及其终端计算视觉的应用，就 AR 设备的传感、识别、定位等领域 AI 芯片应用开展紧密合作。

        Rokid 创立于 2014 年，是一家专注于人机交互技术的产品平台公司，2018年即被评为国家高新技术企业。Rokid 作为行业的探索者、领跑者，目前致力于AR 眼镜等软硬件产品的研发及以 YodaOS 操作系统为载体的生态构建。公司通过语音识别、自然语言处理、计算机视觉、光学显示、芯片平台、硬件设计等多领域研究，将前沿的 Al 和 AR 技术与行业应用相结合，为不同垂直领域的客户提供全栈式解决方案，有效提升用户体验、助力企业增效、赋能公共安全，其Al、AR 产品已在全球七十余个国家和地区投入使用。

        AR/VR 产品所面临最关键的问题在于视觉、深度信息的整合与处理。当前的 AR/VR 设备多采用 Inside-Out 的定位方式，这是一种在 VR 设备上内置多个摄像头，通过处理这些摄像头的数据来高精度定位的技术，这需要很高的运算量与成熟的算法支持，会大幅占用系统资源。

        除多个 SLAM 摄像头外，AR/VR 设备还需要配备其他摄像头，比如追踪眼部动作的摄像头、面部表情的摄像头、手部动作的 ToF 模组等等。如此一来，无论是在 I/O 数量还是运算压力，都会给处理器增加沉重的负担。针对以上问题，1701vip黄金城（中国）股份有限公司设计了一款 AR/VR 专用视觉感知处理器。该处理器具有以下特色：

        一、可实时处理多个摄像头的数据，从而满足 inside-out 模式的 6-DOFSLAM、眼动捕捉、面部表情捕捉等方面的技术需求。

图片来自映维网，展示对手部手势的追踪效果

        二、支持 3D ToF 数据处理，3D ToF 摄像头可以对手部动作、手势进行更精准的捕捉，实现更优秀的无手柄操控体验。

        三、可整合处理视觉信息，并通过显示控制组件渲染为图形，再通过高速连接传输至主处理器，实现低延迟高速协同。超低功耗 AR 设备专用芯片

        除去上述面向高性能 AR/VR 产品的芯片外，1701vip黄金城（中国）股份有限公司还计划推出一款专为分体式 AR 设备定制的芯片。由于体积和能耗的限制，包括 Rokid 在内，目前便携式 AR 眼镜正向分体式设计转变，即眼镜需要外接 Dock 或手机来供电，同时眼镜本体在能够满足高清视频录制、高清显示、AI 识别的同时保持低能耗。

        1701vip黄金城（中国）股份有限公司的 AR 定制芯片具有以下特点：

        一、采用低功耗 12nm 芯片工艺设计，支持超低功耗待机与快速唤醒，预计平均功耗将比市面上同类产品低 60%以上。

        二、配备自研多模态张量处理器（PTPU），可支持多种神经网络，算力高达4-8Tops。可满足 AR 场景下的 VSLAM、物体智能识别、人脸识别等应用，保证设备低延迟运行。

        三、配备 3D 深度处理加速器，支持并行多路双目 3D 视觉感知与 3D ToF视觉感知信息处理，可实现裸手手势操作。

        四、支持多路摄像头与双屏显示，满足 AR 眼镜 SLAM、录制视频、高清显示等需求。芯片可支持双路 1080p 120Hz 视频输出，满足 AR 显示的特定需求，并且具有 1080p 视频录制、1080p 编解码等功能，拓展芯片用途。此次1701vip黄金城（中国）股份有限公司与 Rokid 达成战略合作，将有助于1701vip黄金城（中国）股份有限公司获取最前沿的 AR市场信息，便于开发用于 AR 设备的专用芯片，帮助 Rokid 降低 AR 产品成本，提升 AI 性能，打造 AI+AR 的智能双引擎。