基于多模態情感分析的個性化英語教育系統及方法
本申請提供一種基于多模態情感分析的個性化英語教育系統及方法,其系統包括:用于接收并處理學生的多模態數據的多模態交互模塊、用于對輸入的多模態數據進行情感分析的情感識別模塊、基于學生的歷史學習數據評估該學生的實時學習狀態的個性化模塊、根據情感狀態與實時學習狀態動態調整互動反饋的核心大腦模塊。情感識別模塊包括情感信息融合,情感信息融合采用加權策略,并通過情感一致性約束和沖突修正機制來調整最終輸出的情感狀態。本申請通過情感一致性損失函數、沖突修正機制和基于知識圖譜的超綱控制機制,精準識別學生情感和認知狀態。
廈門大學
2021-01-12