運用混合注意力生成對抗網路於科學論文引用意圖分類

王昱翔、陳昭沂、李龍豪。

In Proceedings of the 33th Conference on Computational Linguistics and Speech Processing (ROCLING’21).

---

Abstract

我們提出一個基於混合力的生成對抗網路模型（簡稱maGAN），應用於科學論文引用分類任務。我們先選擇適合的領域訓練資料，透過提出的混合注意力機制，以及生成對抗網路架構，仙域訓練語言模型，韓漚微調至多元分類任務。我們用 SciCite 資料集比較模型效能，由實驗結果得知 maGAN 模型得到最好的 Macro-F1 0.8532。