基于多模態(tài)信息融合的用戶連接方法

摘要： 為彌補用戶連接現(xiàn)有工作中存在的以下兩個問題：大部分方法只考慮用戶的文本和網絡結構信息，忽略了圖像等多模態(tài)信息；現(xiàn)有方法大都通過簡單的特征拼接融合不同模態(tài)的信息，忽略了這些信息的互補性、關聯(lián)性和異質性，提出一個基于多模態(tài)信息融合的用戶連接模型MIFUIL。獲取用戶的文本、視覺以及異構網絡的嵌入表示；利用注意力機制學習不同模態(tài)信息間的互補性、關聯(lián)性和異質性，獲取用戶多模態(tài)信息的融合... （共8頁）