金沙JinSha(中国)娱乐网 华为提议3D感知发型挪动框架, 结束大姿态互异下的精确换发

大姿态互异下的精确换发
(映维网Nweon 2026年06月15日)构建确凿、个性化的杜撰化身一直是XR的中枢挑战之一,尤其是发型的动态挪动,现存递次经常因姿态和圭臬互异而产生错位、几何失真或身份丢失。加拿大西蒙菲莎大学和华为加拿大的盘问团队先容了一个名为HairPort的框架,通过显式3D重建与流匹合营成,它不错为XR中的高保真发型挪动提供要道的工夫基础。

HairPort的中枢想象是在职意视点下保合手发型几何一致性,而这不错用于惩处杜撰化身制作中最毒手的姿态泛化问题。
开云体育(中国)官方网站框架包含三个沉寂模块:
光头治愈器:着手将源图像中的东谈主物转动为传神的“光头”版块,排斥原始发型的侵犯。团队构建了Bald 数据集,包含6,000组像素对王人的头发‑光头图像对,涵盖多种发型、肤色、光照和姿态。
3D感知发型挪动:对参考发型进行3D重建(使用Hi3DGen或Ultra3D等递次),然后通过优化camera参数(旋转、平移、焦距)将其对王人到源图像的头部视角。终末纠合头型掩码与面部地标进行仿射变换,开云体育app2026世界杯中国官网下载赢得“源对王人”的参考发型信号。
流匹配发型合成:以光头源图像和对王人后的参考发型为条目,诓骗FLUX.2 [klein] 9B流匹配裁剪器生成最终后果,保留源身份、光照、布景,同期诚挚呈现参考发型的神志、纹理与结构。
量化后果:发型相似度与身份保合手均最初。盘问团队在CelebA‑HQ东谈主脸对王人基准及自建全帧测试集,将HairPort与HairCLIPv2、HairFastGAN、Stable‑Hair、HairFusion等现存递次进行了比拟:
发型相似度:HairPort达到0.83,高于第二名的0.81。
身份保合手:HairPort赢得0.74,金沙JinSha(中国)娱乐网不异最初。
非头发区域一致性:HairPort以0.83显赫优于其他递次。
在用户盘问中,HairPort在发型准确度(76.6%)、无关属性保合手(78.9%)和视觉当然度(74.5%)均赢得最初74%的偏好率,远高于通盘基线。
另外,光头治愈模块在身份保合手和确凿感野心方面优于HairMapper、Stable‑Hair及营业器用(FLUX.2、Gemini 3 Pro Image)。

这项工夫将至极合适以下XR场景:
大姿态变化下的发型一致性:传统2D递次在头部旋转最初一定角度时会产生严重失真。HairPort通过显式3D对王人,可在职意视角下保合手发型与头部的几何匹配,这关于VR外交、全身跟踪化身至关枢纽。
基于参考图像的快速换发:用户只需提供一张参考发型相片,HairPort即可将该发型挪动到我方的杜撰化身上,无需手动建模或老师。
简化实质创作:XR实质建筑者可借助HairPort从确凿肖像中提真金不怕火发型并挪动到3D扮装,大幅缩短高质料发型财富的出产本钱。
固然,现时工夫存在一定的局限,包括对3D重建精度明锐,若参考头发的神志或纹理被失实重建,最终输出会接纳该失实;开动期间较长,单张图像在H100 GPU约需 5–7 分钟(取决于 FLAME 拟合阵势),尚未达到及时交互的要求。
关系论文:HairPort: In-context 3D-aware Hair Import and Transfer for Images
HairPort的代码、预老师模子以及Baldy数据集等请拜谒名堂主页deepmancer.github.io/HairPort金沙JinSha(中国)娱乐网。