
面向食品、营养与健康场景的多模态智能研究
面向食物识别、检测分割、成分分析和份量估计等任务,研究细粒度视觉表征与开放场景识别方法。
研究食物图像、食谱文本、营养信息与领域知识的对齐、检索、推理和知识增强学习。
构建面向营养分析、膳食推荐与食品知识服务的智能体,探索领域工具调用、规划和可信交互方法。
面向复杂三维环境的目标理解、空间推理与自主决策
研究面向指定物体类别的环境感知、语义地图、目标推断与路径规划方法,提高未知环境中的导航效率。
研究多个目标之间的搜索顺序、空间关系建模、历史观测利用和长程任务规划,降低重复探索成本。
融合自然语言指令、第一视角视觉和空间信息,研究指令理解、跨模态对齐与语言引导的导航决策。
实验室近期发表的代表性工作