增强现实。提升人类体验
扩展现实 [AR/VR] 开发服务
增强现实 (AR) 和虚拟现实 (VR) 技术正迅速从利基技术过渡到日常消费体验，这主要得益于智能眼镜和沉浸式设备的不断发展，它们体积更小、重量更轻、能效更高。随着 XR 硬件的进步，系统级芯片 (SoC) 有望在严格的移动功耗和散热限制下，提供桌面级的图形和 AI 性能。
要实现真正沉浸式的 XR 体验，需要持续稳定的高帧率（通常为 90 至 120 FPS），以确保视觉保真度、响应速度和用户舒适度，同时避免晕动症。
MulticoreWare 在 CPU、GPU、NPU 和 DSP 架构的架构感知性能优化方面拥有深厚的专业知识，能够帮助 XR 公司在生产硬件上加速实时渲染、AI 推理、模型优化和复杂的传感器处理流程。
XR 技术栈
- 应用和游戏引擎
- 平台 SDK 和服务
- 运行时集成
- 中间件/驱动程序
- 传感器融合与感知
- 操作系统和平台
- 固件和嵌入式系统
- 硬件
XR细分领域及产品
细分领域：
- 平台与传感器
- 模型与框架
人工智能与计算机视觉：
VSLAM算法、OpenCV、目标识别、相机ISP调优
云端 XR
MulticoreWare 通过将 GPU 密集型渲染和场景处理卸载到云基础设施，实现高性能云端 XR，并将渲染帧实时流式传输到轻量级 XR 设备。我们优化了整个云端 XR 流程，包括超低延迟传输、自适应比特率和分辨率控制以及编码器-解码器优化，从而提供沉浸式体验。
平台与传感器：
针对 CPU/GPU/DSP/NPU 的视觉与音频算法实时化优化
针对 CPU/GPU/DSP/NPU 的视觉与音频算法实时化优化
我们优化视觉和音频处理算法，以满足沉浸式 AR/VR 体验对实时性能和延迟的要求。通过智能地将工作负载分配到异构计算单元（CPU、GPU、DSP 和 NPU）上，我们确保计算机视觉、空间音频、跟踪和感知流水线的高效执行，同时保持稳定的帧速率和能效。了解更多
底层指令集架构 (ISA) 特定优化
底层指令集架构 (ISA) 特定优化
传感器/计算组件选型
传感器/计算组件选型
板级支持包 (BSP)、固件和驱动程序开发
板级支持包 (BSP)、固件和驱动程序开发
我们开发并定制板级支持包 (BSP)、固件和设备驱动程序，以确保 AR/VR 硬件稳定、高性能运行。这包括硬件启动、电源管理和低延迟数据路径，从而确保传感器、计算组件和操作系统之间的无缝集成。
了解更多
传感器融合 – IMU、摄像头、深度传感器、环境传感器
传感器融合 – IMU、摄像头、深度传感器、环境传感器
我们设计并优化先进的传感器融合流程，将来自 IMU、摄像头、深度传感器和环境传感器的数据相结合，以实现精准的空间跟踪和环境感知。这些融合算法支持头部跟踪、手势识别、场景理解和低漂移运动估计，这些对于沉浸式 AR/VR 体验至关重要。了解更多
基准测试与性能分析
基准测试与性能分析
摄像头 ISP 调优
摄像头 ISP 调优
模型与框架：
实时交互模型优化：
我们优化 AI/ML 模型，以满足实时沉浸式 XR 体验对延迟、帧速率和功耗的严格要求。这包括模型剪枝、量化和架构调优，从而实现响应迅速的交互，例如手部追踪、眼动追踪、空间映射和物体识别，同时确保视觉保真度和用户舒适度不受影响。了解更多
嵌入和集成 AI/ML 模型
AI 模型库
我们维护并利用精心策划的 AI 模型库，其中包含针对 XR 用例（包括视觉、感知、追踪和场景理解）量身定制的预训练和优化模型。要了解更多关于我们模型库的信息，请阅读更多内容
优化推理流水线
我们优化端到端推理流水线，以降低延迟、提高吞吐量并最大限度地减少内存带宽占用。通过简化数据传输、高效调度工作负载以及利用硬件加速，我们能够实现稳定的帧速率，这对于沉浸式、舒适的 AR/VR 体验至关重要。了解更多
框架赋能
我们支持并优化主流 AI 框架在 XR 平台上的运行，确保其在操作系统、设备和芯片供应商之间的兼容性、性能和可扩展性。这包括框架调优、后端优化和自定义扩展，以充分利用底层硬件功能，同时简化部署和长期维护。 了解更多
GET IN TOUCH
Our team is happy to answer your questions. Please fill out the form and we will be in touch with you as soon as possible.
相关文章
