LHM模型助力3D人体重建取得重大突破

AI快讯1个月前发布 niko
33 0
AiPPT - 一键生成ppt

阿里通义实验室的创新技术LHM模型,在3D人体重建领域实现重大飞跃。一直以来,从单图像进行可动画的3D人体重建充满挑战,现有研究多聚焦静态人体建模,且训练依赖合成3D扫描,限制了实际泛化能力,基于优化的视频方法也存在诸多不足。

LHM模型创新性架构带来突破。该模型采用多模态变换器架构,借强大注意机制,有效编码人体位置与图像特征,既能精准重建人体几何形状,又能保留服装细节,呈现逼真3D人体模型。

头部特征金字塔编码方案提升细节捕捉。LHM提出的这一方案,聚合头部多尺度特征,增强对头部细节的捕捉,让3D人体模型头部更逼真。而且,其实际应用效率惊人,几秒内就能生成合理动画人体,无需复杂后期处理。

实验验证LHM优势。大量实验表明,LHM在重建精度和泛化能力上超越现有方法,复杂场景和不同光照条件下,都能稳定输出高质量3D人体重建结果。模型地址:https://lingtengqiu.github.io/LHM/

© 版权声明
Trea - 国内首个原生AI IDE