技术负责人：万波
技术联系人：万波 联系电话：/ 邮箱：wanbo@romani.cn
关键词：3D高斯渲染、人体重建、稀疏视图重建、虚拟现实、
项目概况：
（一）项目背景
本项目聚焦于虚拟会议、远程交互、虚拟现实与数字人等新兴应用领域中，用户“身份抽象化”、“沉浸感不足”以及三维人物建模“成本高、流程复杂”等关键痛点，依托“基于双图像的高斯点渲染与稀疏图像重建融合”核心技术开展攻关，旨在突破传统虚拟会议中人物表示不真实及传统多视角建模对设备与资源的高度依赖等技术瓶颈，实现在低资源条件下快速、高质量地重建用户真实化身。该成果不仅满足元宇宙会议等交互式场景中用户对“具身表达”与“实时控制”的迫切需求，也为数字人生产流程降本增效提供新路径，对提升远程协同效率、推动虚拟现实普及与数字人产业升级具有重要的战略意义和社会价值。
（二）项目简介
本项目“面向虚拟会议的双视图驱动真实化身重建技术”针对仅依赖正面与背面两张图像实现高质量、可动画化的人物重建这一挑战性问题，提出了“位置+颜色”两阶段分离式建模框架，将高斯点渲染技术与传统网格重建结合，显著提升了人物模型的空间一致性与颜色完整性。项目开发出的成果为可控制、可驱动的3D人物模型，已在虚拟现实头显、实时动画驱动等场景中完成验证，显著减少了视角采集数量和硬件依赖，可应用于教育、游戏、远程会议等领域，具备年节约建模成本数十万元、支撑万人级数字化体验的社会示范意义。
（三）关键技术与创新点
本项目采用“网格驱动 + 高斯渲染”技术架构，围绕网格生成、Gaussians绑定、颜色传播三个核心模块展开攻关如图一所示，重点突破以下技术点：
1、关键技术一：正背双视图驱动的三维网格重建网络：利用前后视图图像结合SMPL-X结构预测初始人网格，再通过局部特征和SDF网络细化，实现几何细节恢复。
2、关键技术二：基于Steiner椭圆的Mesh-to-Gaussian映射方法：提出三种映射策略并实验验证其精度与效率，最终采用面中心映射方式以实现高效率、高一致性的高斯点生成。
3、关键技术三：无监督颜色传播算法：利用图像影响程度构建高斯点传播关系，通过KNN算法实现颜色信息从可见区域向遮挡区域的高质量补全。
图一
本项目创新点包括：
1、首次提出“GaussianMesh双阶段人物重建框架”，解决传统稀疏视角下人物重建几何不完整、颜色缺失、姿态不可控等问题
2、系统化集成虚拟会议平台如图二所示，实现3D化身快速部署与多用户并发应用，首创“上传双图 → 自动化真实化身重建”应用流程，解决虚拟会议中人物形象单一、抽象的问题。
图二
技术成果清单：
序号 | 成果类型 | 具体内容 |
1 | | 发明专利名称（专利号） |
2 | 知识产权 | 软件著作权名称（登记号） |
3 | 标准/规范 | 参与制定国家标准/行业标准 |
4 | 其他 | （如：技术秘密、实验数据集） |
技术成熟度：
概念验证 原理样机 工程样机 中试 产业化
合作方式：
联合研发 技术入股 转让 授权（许可） 面议
