一种基于双曲空间视觉与语言对齐的果蝇行为识别方法

本发明提供一种基于双曲空间视觉与语言对齐的果蝇行为识别方法，涉及人工智能与行为识别技术领域，本发明获取M个行为类别的描述信息和训练样本集，基于N个行为类别的描述信息和训练样本集对果蝇行为识别模型进行训练，以及根据除N个行为类别之外的M‑N个行为类别的描述信息构建双曲语义参考基准，并整合至果蝇行为识别模型的语义空间中，得到训练完成的果蝇行为识别模型；将待检测的果蝇二维关键点骨架序列输入训练完成的果蝇行为识别模型，输出待检测的果蝇二维关键点骨架序列对应的目标行为类别。本发明训练得到的模型能够刻画行为的层级结构与非线性动态，且能够提升对新行为类别的泛化能力，进而实现零样本场景下的跨域行为迁移识别。