慧鲤基于不同的应用场景,提供了多样的RGB ToF 3D解决方案。
Spot iToF/Spot dToF深度补全方案:通过融合RGB和ToF点阵信息,构建高完整度、低噪声的深度图像。该方案SNR提升了15dB,深度图像分辨率提升了100倍、深度测量距离和MPI具有较大提升,为视频虚化、3D Mesh、AR、拍照等多种应用提供完整的深度信息,构建元宇宙的第三维度。
iToF AI深度感知方案:在ToF raw域上通过AI概率回归模型去除sensor固有噪声以及因拍摄距离和场景材质引入的噪声,能够较好地保持深度的准确度和细节。应用领域:人脸解锁,手势识别等。
dToF 单光子片上解决方案:解决存储、带宽需求大的问题,充分提取数据信息,降低TDC采样率需求。应用领域:机器人,AR,车载激光雷达等。
高通8系列、MTK
慧鲤的RGBToF解决方案构建了高完整度、低噪声的RGBD图像,该方案SNR提升了15dB,同时深度图像分辨率提升了100倍、深度测量距离和MPI也有较大提升。此外,慧鲤的RGBToF方案还具有实时性高(可支持30fps视频),功耗低(最低功耗<230mw)等优势
根据深度获取的渠道,包括双目、单目、ToF,智能选择合适的算法组合(包括AI立体匹配、AI单目深度、AI-ToF、AI RGBD Fusion)进行深度估计
在ToF raw域上通过AI概率回归模型去除sensor固有噪声以及因拍摄距离和场景材质引入的噪声,能够较好地保持深度的准确度和细节
智能判断场景特征,融合RGB场景信息,将缺失的深度进行补全,包括对spot深度进行补全,以及对大片缺失深度进行补全