摘要
本发明公开了一种基于多模态数据的区域尺度土壤分类方法及系统。本发明利用数据预处理技术对两种模态数据进行清洗和格式化,确保数据的质量和一致性,此外,引入了滑动窗口机制,构建了一个多模态Transformer架构,结合滑动窗口变换器(SWIN Transformer)和适用于采样点调查数据的多层感知机(MLP),分别对图像和调查数据进行特征提取,接着,引入交叉共注意力机制,捕捉和加强不同模态之间的相互关系,此外,通过多模态模型重构帮助重构图像和结构化数据,利用自编码器保持数据个性,以确保表示具备区分性,进而增强模型对土壤种类的识别能力。