2025年4月9日,由中国图象图形学学会(CSIG)主办,CSIG智能图形专委会和中国科学院计算技术研究所协办的"CSIG图像图形中国行"中科院计算所站活动在北京中科院计算所成功举行。张子豪助理研究员主持本次会议,高林秘书长,胡杏研究员致辞。本次会议以"手势交互方法与应用"为主题,邀请了中科院软件所邓小明研究员、南京大学龙霄潇副教授以及香港科技大学(广州)宋杰助理教授作专题报告,吸引了众多学术界的专家学者参与。
图 1 张子豪老师主持
图 2 高林秘书长致辞
图 3 胡杏研究员致辞
图 4 邓小明研究员作报告
来自中国科学院计算技术研究所的邓小明研究员分享了手物交互技术在机器人领域的应用研究。他首先强调了手物交互是机器人与人类交互的主要途径之一。他介绍了新的手部形状表示方法,并深入探讨了人手和物体交互的重构问题。在机械手抓取和操作策略方面,他详细讨论了多机械手协同工作和复杂环境下的操作挑战。邓研究员特别指出遮挡对手部姿态估计和重构的负面影响,并分享了通过仿真数据进行预训练的解决方案。此外,他还介绍了通过视觉和传感器收集手部操作数据的多种方法,同时探讨了数据标准化面临的挑战。
图 5 龙霄潇副教授作报告
来自南京大学的龙霄潇副教授分享了关于大模型驱动的三维数字内容建模研究。龙霄潇副教授首先深入探讨了当前通用人工智能的发展现状及其瓶颈,特别强调了现有AI系统在物理交互能力方面的不足。他指出,虽然大模型在感知决策和语言相关任务上取得了显著进展,但是因为数据缺少,采集困难,大模型严重缺乏理解物理层面上的知识。针对这一问题,其团队提出了通过图像重建方法获取物体和手的几何信息,并详细讨论了大规模物理知识获取所面临的挑战。他重点介绍了其团队开发的EasyHOI项目,该项目旨在通过图像重建技术高精度地获取物体和手的几何信息及其交互关系。此外,他还全面回顾了三维重建技术的发展历史,从上世纪90年代的基于规则的方式,到2000年的激光雷达扫描,再到2011年的多视角建模,2018年的深度学习与MVS结合,以及2020年提出的最新技术,展示了该领域从重建范式转变为生成范式的重要趋势。
图 6 宋杰助理教授作报告
来自香港科技大学广州的宋杰助理教授分享了他在计算机视觉机器人技术和人机交互领域的研究成果。宋杰博士专注于3D和4D重建、手交互生成和机械手抓取研究,他详细介绍了一套完整的灵巧手框架。该框架通过物理仿真和强化学习,让机器人手在仿真环境中自我探索,生成满足抓取目标的轨迹。宋杰博士指出,与行走不同,手部交互或抓取没有固定的模式,手的自由度非常高,接触也更丰富,这为研究带来了挑战。针对这些挑战,他提出了一种与手结构无关的奖励函数,鼓励稳定抓取,通过这套范式和训练流程,其团队成功实现了对50万种不同物体的稳定抓取,适应不同手形态和抓取方式,在实际机械臂上的实施成功率高达94.6%。
图 7 会议现场
图 8 交流讨论
在互动交流环节,与会者踊跃发言,针对各位专家的研究领域提出了一系列深入而富有洞见的问题。现场讨论氛围热烈,专家们专业而透彻的解答不仅满足了在场学者的学术好奇心,也为参会者开拓了研究视野,让大家对手势交互的最新发展动态有了更加全面而深刻的理解。
Copyright © 2025 中国图象图形学学会 京公网安备 11010802035643号 京ICP备12009057号-1
地址:北京市海淀区中关村东路95号 邮编:100190