彭宇新:細粒度多模態運動分析面臨技術挑戰-新華網
新華網 > > 正文
2024 08/19 09:12:38
來源:新華網

彭宇新:細粒度多模態運動分析面臨技術挑戰

字體:

  新華網天津8月19日電 16日,“大模型與生成式人工智能前沿技術論壇”在天開高教科創園舉辦。本次活動由天津市高校校友會科技經濟融合研究會、天津市浙江商會、天津市先進技術成果轉化&&、天津天開發展集團有限公司、中國産業發展促進會産業創新集群開發分會主辦,天津市人工智能學會、中國計算機學會天津分部、校友(天津)共享科技智庫發展有限公司共同承辦。北京大學二級教授彭宇新帶來題為《細粒度多模態運動分析》的主題報告。

  彭宇新介紹,在大模型技術驅動下,人體動作理解與生成技術在個性化訓練、醫療康復、智能安全監控、社交媒體互動以及虛擬數字形象等領域展現出巨大潛力。彭宇新基於這一背景,指出運動分析的重要性。“運動是生命的基本要素。相較粗粒度、單模態的運動分析而言,細粒度、多模態運動分析技術能夠更加準確描述真實世界,但也面臨着更多技術上的挑戰。”

  他介紹,細粒度多模態運動分析的核心在於綜合利用文本、視頻、3D姿態等多種信息源,實現對目標動作的精準識別、定位、評估乃至重建。“這當中,如何準確辨別時空界限模糊的細微動作,以及如何運用文本信息來實現人體動作的精細化重建,成為了這一領域亟待解決的問題。”

  主題報告中,彭宇新還分享了多篇CVPR 2024論文,涵蓋了團隊在細粒度多模態運動分析的近期工作進展,並對未來發展方向與趨勢進行了展望。

【糾錯】 【責任編輯:岳祥芝】