AI眼镜解决方案及AI+AR的可能性探讨-舜为科技-罗敏文
报告摘要
浙江舜为科技有限公司成立于2021年,总部位于杭州,依托舜宇集团在光学和光电领域的技术积累,聚焦XR行业发展,致力于成为全球领先的XR系统方案解决商。公司具备行业领先的研发能力、全生命周期质量管理及卓越制造交付能力,整合虹软、网新等软件算法资源,形成覆盖光学、音频、眼动等核心领域的技术体系。
智能眼镜解决方案演进路径分四阶段:初期以音频赋能为核心,通过多麦克风阵列(2-5颗)实现降噪、远场拾音、语音交互等功能;随后引入摄像头,实现第一视角拍照、AI识人识物及多模态识别;进一步融合光学显示与眼动交互技术,提升AR虚实融合能力及交互效率;最终通过轻量化设计和端侧AI模型部署,构建多信息获取维度的智能终端。
关键技术包括:
- Camera技术:采用12MP高分辨率传感器,优化畸变控制与边缘解析力,结合HDR和多帧合成技术提升动态场景与低光环境拍摄效果。支持拍摄直播、AI识人识物等场景,需兼顾硬件性能与算法优化。
- 音频技术:集成降噪麦克风阵列(支持近场/远场降噪)、立体声录音及漏音保护功能(隔离度40dB@50cm)。通过SmartPA和钢琴音优化实现高质量音频输出,支持通话、音乐及空间音频导航等场景。
- 眼动交互技术:利用单IR相机与RGB场景相机组合,实现滑移补偿、佩戴检测、视线深度输出等功能。通过凝视目标分析提升交互效率,减少对语音和触控的依赖,适用于菜单选择、物体识别等场景。
AI+AR应用潜力主要体现在:
- 导航与出行:结合空间音频和AR显示,提供沉浸式导航体验。
- 健康与日常辅助:如视障人群的视觉补偿、医疗场景的心理分析(通过微表情捕捉)。
- 实时翻译与跨语言交流:利用AI多模态能力实现精准语言转换。
- 物体识别与户外直播:通过摄像头与算法协同,支持场景化信息获取和内容创作。
当前AI+AR方案仍面临挑战:
- 功耗与续航:需平衡高性能硬件与低功耗设计,延长佩戴时间。
- 近眼显示技术:需突破光学模组小型化与显示清晰度限制。
- 交互准确性:提升眼动追踪与语音识别的稳定性,适配复杂环境。
- 设备轻量化:优化结构设计,降低重量以增强用户舒适度。
舜为AI智能眼镜解决方案关键参数:
- 硬件配置:超广角高清RGB摄像头(12MP,支持1080P+EIS录像),集成环境光传感器、距离传感器、IMU六轴模块及3颗麦克风。
- 显示技术:采用衍射波导与MicroLED方案,视场角30°,瞳距64mm,确保清晰视觉体验。
- 系统性能:搭载高通AR1平台,配备4GB LPDDR4X+32GB eMMC存储,支持Wi-Fi6/6E和蓝牙5.3。
- 设计特点:轻薄化眼镜形态(重量<80g),IPX4防尘防水等级,Type-C与Pogo Pin接口,220mAh电池及充电盒支持。
总结指出,舜为科技通过整合光学、音频、眼动等技术,构建了面向多场景的AI智能眼镜解决方案,但需进一步优化功耗、显示技术及交互稳定性以实现商业化突破。
展开完整摘要
试读结束,高清完整版pdf/doc/ppt,请点下载