我院23级硕士研究生刘新杰发表论文被计算机多媒体领域顶级会议ACM Multimedia2025录用

近日,我院23级硕士生刘新杰、郑博仑副教授为共同第一作者,杭州电子科技大学为第一单位发表的论文《EHPE: A Segmented Architecture for Enhanced Hand Pose Estimation》被计算机多媒体领域顶级会议ACM Multimedia2025录用。指导老师为我校郑博仑副教授。

近年来,3D手部姿态估计因其在人机交互、虚拟现实及相关领域的应用重要性而备受关注。精确地估计手关节对于高质量的手部姿态估计至关重要。然而,现有方法往往忽视了远端指端(TIP)和手腕在预测总体手关节中的重要性,并常常未能考虑到动作估计中远端关节误差累积的现象,这可能导致某些关节出现更大的误差,进而导致姿态估计的误对齐和伪影,降低整体的重建质量。为了应对这一挑战,我们提出了一种新颖的分割架构,用于增强手部姿态估计(EHPE)。我们执行了TIP和手腕的局部提取,从而减轻了误差累积对TIP预测的影响,并在此基础上进一步减少了所有关节的预测误差。EHPE包含两个关键阶段:在TIP和手腕关节提取阶段(TW阶段),估计TIP和手腕关节的位置,以提供一个初始精确的关节配置;在优先引导关节估计阶段(PG阶段),采用双分支交互网络来细化剩余关节的位置。

图片
图片
图片

实验表明,EHPE拥有优秀的3D手部重建能力,在多个主流公共手部数据集如InterHand2.6M和FreiHAND上都有着SOTA效果。

图片
图片
图片

杭州电子科技大学“智能信息处理”实验室 (HDU IIPLab)主任为颜成钢教授。实验室现有在职教师50余名,含5位国家级人才及多位省级人才。现有硕博生200余名,毕业生多就职于阿里巴巴、腾讯、字节跳动、海康威视、华为、网易等国内知名企业。实验室为学校交叉创新团队,拥有自由开放的学术氛围和国际前沿的研究方向。实验室采用与海内外知名高校、研究所(清华大学、北京大学、中国科学院、美国北卡罗来纳大学教堂山分校、澳大利亚悉尼科技大学等)联合培养制,长期致力于智能信息处理方面的研究,主要研究方向包括:机器学习、模式识别、计算机视觉、计算机图形学、医学影像处理、生物信息学等。


联系我们

联系人:孙老师

电话:0571-86878691

工作电话:0571-86878691

电子邮箱:syq@hdu.edu.cn

智能信息处理实验室

浙江省杭州市杭州经济开发区白杨街道2号大街1158号 杭州电子科技大学