[发明专利]基于多源信息融合的林业生态环境人机交互方法

摘要

本发明涉及一种基于多源信息融合的林业生态环境人机交互方法，属于神经网络领域。该方法围绕林业生态中声音、图像、文字等关键信息综合处理，研究面向多源异构林业生态数据的稀疏特征提取、决策融合分析的共性技术，处理林业生态环境中多源异构信息，通过多模态信息的融合实现对于林业生态信息的多角度理解与分析。本发明融合人工智能在图像、语音识别和自然语言处理中的已有先进成果，面向林业生态典型应用场景，采用“云”到“端”的处理方式，利用视觉、语言、听觉等各种感知所记忆的多通道信息，构建林业生态环境统一语义表达的多模态人机交互平台，丰富林业生态监管手段、提升林业生态管理效率。

主权项

基于多源信息融合的林业生态环境人机交互方法，其特征在于：该方法包括以下步骤：S1：多源异构数据的特征稀疏化提取；S2：多源异构特征统一表示；S3：深度自编码下的多源异构决策信息融合；S4：采用稀疏自编码和卷积神经网络算法，进行多模态数据的深度特征提取，构建基于多源信息融合的深度学习模型；通过选择合适的梯度表示，对学习模型进行交叉验证，检查学习模型是否存在缺陷；S5：深度学习模型优化。