Navigation

    Gpushare.com

    • Register
    • Login
    • Search
    • Popular
    • Categories
    • Recent
    • Tags

    KagNet: Knowledge-Aware Graph Networks for Commonsense Reasoning

    语音识别与语义处理领域
    1
    1
    50
    Loading More Posts
    • Oldest to Newest
    • Newest to Oldest
    • Most Votes
    Reply
    • Reply as topic
    Log in to reply
    This topic has been deleted. Only users with topic management privileges can see it.
    • 175****1239
      175****1239 last edited by

      b7ad440d-6bea-4893-8a5c-bc327c9cc4a2-image.png

      亮点

      引入ConceptNet作为额外的知识事实来帮助构建图,通过GCN 和层次注意力。图构建关系,GCN提取特征,层注意力来计算相关性分数进行排序
      fa33ee93-3c79-4b29-9cbc-e1f7feb0a38f-image.png

      方法:

      1. 如何构建图
      2. 基于图如何去实现推理过程

      图的构建

      首先提取QA中的concept,本文采用N-gram的方式,通过采用停用词好词性还原方法去除噪音。
      基于路径搜索的方法找到路径不超过4的路径,这样初步的图就构建完成了。然后使用预训练好的embedding来表示这个图的结点以及关系。
      通过cos来计算两个结点间的关系,进行剪枝
      d1c6a852-c45c-4d36-8e46-147e02d1f7b3-image.png

      推理过程

      通过两层GCN编码

      #启示

      1. 引入外部知识库的方法可以进行领域迁移,代码部分是重点。
      2. 构建图的方法可以迁移到其他领域。
      1 Reply Last reply Reply Quote 2
      • First post
        Last post