TANGLED

“TANGLED” 是一种由上海科技大学、Deemos Technology 和华中科技大学联合研发的创新型3D发型生成技术。这项技术能够从各种风格和角度的图像中生成高质量的3D发丝。通过多样性的 MultiHair 数据集，TANGLED 提供丰富的发型样本，并通过三个核心步骤来实现：首先，利用多样性的 MultiHair 数据集提供丰富的发型样本；其次，借助多视图线稿的扩散框架，通过线稿特征的交叉注意力机制捕捉发型的拓扑结构；最后，采用参数化后处理模块修复复杂发型（如辫子）的细节。TANGLED 提升了发型的真实感和多样性，支持文化包容性数字角色的创建，为动画和增强现实领域带来了新的应用可能。

TANGLED 的主要功能包括多样化发型生成、支持多视图输入、灵活的输入风格、文化包容性和高效集成。该技术支持处理各种复杂发型，能够接受单视图或多视图图像作为输入，并且支持多种输入形式，如照片、手绘草图、卡通和油画。此外，TANGLED 特别关注未被充分代表的发型纹理，致力于生成具有文化意义的发型，并且生成的 3D 发型可以直接嵌入现有的计算机图形流程中，如 Blender 和 Unreal Engine。

该项目的技术原理涉及 NeuraPress MultiHair 数据集、扩散框架和参数化后处理模块。NeuraPress MultiHair 数据集包含457种多样化的发型，通过多视图渲染和线稿提取增强多样性，同时用 GPT-4 生成详细的文本标注。扩散框架基于多视图线稿的扩散模型，通过交叉注意力机制整合线稿特征，并应用在复杂发型的参数化建模和修复技术上。参数化后处理模块利用 Frenet-Serret 框架生成发型几何结构，并通过 Laplacian 平滑技术确保发型的几何连贯性和视觉效果。

TANGLED 的应用场景包括文化包容性虚拟角色创建、动画发型设计、增强现实发型预览、虚拟试妆应用以及基于草图的 3D 发丝编辑。欲了解更多详情，可访问项目官网 https://sites.google.com/view/tangled 或查阅相关 arXiv 技术论文 https://arxiv.org/pdf/2502.06392v1。