《電子技術應用》
您所在的位置:首頁 > 其他 > 設計應用 > 基于混合注意力機制的時間旋轉知識圖譜補全
基于混合注意力機制的時間旋轉知識圖譜補全
網絡安全與數據治理
王璐璐
大連大學信息工程學院
摘要: 針對現有時序知識圖譜補全中捕捉動態關系模式,處理非對稱、臨時和自反關系方面的局限性,提出了一種新穎的融合混合注意力機制與時間旋轉的模型。一方面,通過引入時間旋轉,利用復數空間中的向量來表示隨時間演化的實體與關系,特別是處理時間區間內的關系變化,采用雙復數嵌入方案顯著增強了對時態特性的表達能力;另一方面,通過對知識圖譜引入空間注意力和通道注意力兩個維度分析,能夠更好地聚焦于時序序列中對預測最為關鍵的實體和關系特征,從而在復雜的時間序列中挖掘時序關聯信息。通過在ICEWS14、ICEWS18、YAGO11k和WIKI12k數據集上的實驗評估,模型在MRR、Hits@1、Hits@3和Hits@10上普遍優于基線模型,體現出算法的優越性和強魯棒性。
中圖分類號:TP391.1文獻標識碼:ADOI:10.19358/j.issn.2097-1788.2024.10.007
引用格式:王璐璐.基于混合注意力機制的時間旋轉知識圖譜補全[J].網絡安全與數據治理,2024,43(10):42-48.
Temporal rotation knowledge graph completion based on hybrid attention mechanism
Wang Lulu
School of Information Engineering, Dalian University
Abstract: A novel model that integrates a hybrid attention mechanism with temporal rotation is proposed to address the limitations of capturing dynamic relation patterns, handling asymmetric, temporary, and reflexive relations in existing temporal knowledge graph completion. On one hand, by introducing temporal rotation, we leverage vectors in complex spaces to represent entities and relations evolving over time, especially to handle relation changes within temporal intervals. The adoption of a dual-complex embedding scheme significantly enhances the expressive power for temporal characteristics. On the other hand, by introducing spatial attention and channel attention to analyze the knowledge graph from two dimensions, the model can better focus on the most crucial entity and relation features in the temporal sequence for prediction, thus mining temporal correlation information from complex time series. Through experimental evaluations on the ICEWS14, ICEWS18, YAGO11k, and WIKI12k datasets, the model outperforms baseline models in terms of MRR, Hits@1, Hits@3, and Hits@10, demonstrating the superiority and strong robustness of the proposed algorithm.
Key words : temporal knowledge graph; temporal rotation; hybrid attention mechanism; link prediction

引言

隨著人工智能時代的到來,互聯網中的數據規模也隨之爆發式增長,這些大量的數據中往往包含很多有價值的信息,而知識圖譜[1]作為一種新的組織和存儲海量數據的技術,受到越來越多的關注。知識圖譜早期主要用于搜索結果優化,隨后在系統推薦[2]、智能問答[3]、知識搜索[4]等領域發揮了重要作用。知識圖譜通常是靜態的,以其當前狀態存儲事實。知識圖譜以三元組的形式表示事實:(s:r:o),然而,現有知識圖譜大都采用半自動化結合人工的方式構建,具有不完整性[5]。并且在現實中,實體之間的關系經常隨著時間而變化,即知識具有時效性。為此,時序知識圖譜被引入[6],時序知識圖譜將時間事實表示為四元組:(s;r;o;t),即通過擴展時間為t的靜態三元組,描述此事實在時間為t時有效。時序知識圖譜可以不斷提供和完善時間維度的知識,更具有研究價值。

近年來,盡管靜態知識圖譜補全技術取得了顯著進展,如基于翻譯的模型(如TransE[7])、基于圖神經網絡的方法(如RE-GCN[8])等,但這些方法大多忽視了時間維度對于關系動態變化的深刻影響。為應對這一挑戰,時序知識圖譜補全(Temporal Knowledge Graph Completion, TKGC)應運而生,旨在結合時間序列分析與深度學習技術,挖掘時序模式,捕捉動態關系的演化規律。現有的時序知識圖譜補全模型大多數是TransE和DistMult的擴展,例如TTransE[9]、TA-DisMult[10]、ChronoR[11]等,因此不能完全表達如今的某些關系模式。最新的模型還存在計算資源的分配問題。

本文提出一種新的時序知識圖譜補全模型YiTX,該模型創新性地融合了時間旋轉嵌入與混合注意力機制,旨在更精準地建模實體間隨時間變化的關系,并有效預測圖譜中缺失的實體與關系。混合注意力機制在聚合信息上的優勢和注意力權重的分配,在面對數據的多樣性和復雜性時,仍能實現高效學習和快速推理。通過在四個公開時序數據集上的廣泛實驗,驗證了所提模型在鏈接預測任務上的優越性能。本研究不僅為時序知識圖譜的補全提供了一種新的視角,也為智能信息處理、文本挖掘和信息抽取技術的發展提供了新思路,進而促進知識圖譜在推薦系統、智能問答、事件預測等領域的廣泛應用。


本文詳細內容請下載:

http://m.xxav2194.com/resource/share/2000006195


作者信息:

王璐璐

(大連大學信息工程學院,遼寧大連116000)


Magazine.Subscription.jpg

此內容為AET網站原創,未經授權禁止轉載。
主站蜘蛛池模板: 日本阿v视频高清在线中文| 综合亚洲欧美日韩一区二区| 天天影视色香欲性综合网网站| 久久精品国产精品国产精品污| 狠狠综合久久综合网站| 国产主播一区二区三区在线观看| 2022天天操| 好男人资源在线播放看| 久久久最新精品| 欧美人与物另类| 人人妻人人狠人人爽| 老司机成人影院| 国产成人av三级在线观看| 777久久精品一区二区三区无码| 久久久噜噜噜www成人网| 欧美成人精品第一区二区三区| 公和熄三级中字电影久久| 韩国免费高清一级毛片性色| 国产精品户外野外| japanesexxxxhd熟睡直播| 无码人妻H动漫中文字幕| 亚洲av产在线精品亚洲第一站| 波多野结衣无内裤护士| 午夜视频在线免费| 青青青国产精品一区二区| 国产精品久久久久9999高清| 99热这里只有精品66| 性欧美激情videos| 久久久精品人妻一区二区三区| 欧美不卡一区二区三区| 亚洲精品动漫免费二区| 精品一区二区三区免费视频| 国产一级做a爰片久久毛片99| 欧美日在线观看| 国产自无码视频在线观看| h肉3d动漫在线观看网站| 成人午夜免费福利| 久久一区二区精品综合| 日韩精品视频免费观看| 亚洲人成在线中文字幕| 欧美精品一区视频|