慧鲤Avatar虚拟人产品,依托自研深度学习平台和轻量化渲染引擎,提供拍照一键生成不同风格的虚拟形象,通过手机端摄像头进行面部表情、肢体动作及手势动作的捕捉,并利用语音驱动、文本驱动等能力,并实时驱动Avatar,让每个人都能拥有在元宇宙里的虚拟化身。
1. 千人千面,快速成像:仅需一张照片即可快速生成各种的虚拟形象
2. 我的风格,我做主:精确定位面部特征和轮廓,精准迁移人物表情,支持多种风格形象驱动
3. 肢体关键点检测跟踪:实时定位人体位置,捕捉人体动作
4. 超快处理速度;主流手机 5 毫秒/帧实时处理速度。架构灵活,集成便捷,高效高速
慧鲤通用重建解决方案,基于多视图几何和深度学习技术开发的三维重建能力,结合多视角图像、视频和深度信息,形成高质量的三维点云、稠密网格和纹理贴图,并在此基础上打造出可视化、可编辑、可驱动的三维模型,旨在实现场景、物体和人得三维数字化。
支持场景三维模型的矢量化建模和纹理贴图,自动生成三维场景的高层次小数据量的结构化表达模型,提供高效的可视化模型基座
支持基于单目RGB摄像头捕捉真人表情、口型、头部姿态、眼神,精准实现表情迁移以及针对虚拟人的驱动,并实时渲染出逼真的3D面部表情
支持基于单目RGB摄像头捕捉真人肢体动作,把每一个细致关节动作精准还原至虚拟人身上
支持海量手势动作识别捕捉,可实现比心、快速挥手、握拳、双手遮挡等复杂场景下的手势捕捉
支持输入文本/语音,驱动虚拟人物实时生成高质量的拟人表情和动作,且渲染画面自然流畅