基于环境感知网络发现视频中社会交互组的方法及系统

  • 国民经济行业:信息传输、软件和信息技术服务业/软件和信息技术服务业/软件开发
  • 学科类别:电子、通信与自动控制技术/信息处理技术/图象处理
  • 权利人:上海交通大学

知识产权简介

本申请提供一种基于环境感知网络发现视频中社会交互组的方法,包括:环境感知网络设计两类环境感知视觉线索来表示影响社会交互的因素;场景感知视觉线索,采用3D网络提取输入视频段特征,作为视觉表示,并利用编码器提取空时特征;人类感知视觉线索,利用边界框和感兴趣区域作为心理学中影响交互的姿态开放性、朝向和位置的视觉表示;从边界框中提取距离特征,从感兴趣区域中提取个人特征,距离特征和个人特征作为人类环境的视觉表示;将时空特征、距离特征和个人特征融合,获取高阶的社会交互强度特征,得到人与人之间的交互强度矩阵。本申请借用心理学,能够从更为本质的角度去发现社会交互,实现利用深度学习的方法量化人与人之间的交互强度。

基本信息

权利人 上海交通大学
知识产权类型 专利
意向合作模式 入股,许可,转让
预估金额
联系合作