学习笔记,仅供参考,有错必究


文章目录

  • GAT
    • 核心思想
    • 具体步骤
      • 使用注意力机制计算节点之间的关联度
      • 利用注意力系数对邻域节点进行有区别的信息聚合,完成图卷积操作
    • 与其他图卷积的比较
    • 思考
    • 举个例子

GAT

GAT中卷积可定义为利用注意力机制(attention)对邻域节点有区别的聚合.

  • 什么是attention?

注意力机制是一种能让模型对重要信息重点关注并充分学习吸收的技术,它模仿 了人类观察物品的方式。核心逻辑就是(从关注全部到关注重点).

核心思想

GAT即GRAPH ATTENTION NETWORKS,其核心思想为将attention引入到图卷积模型中,利用attention机制来建模邻域节点中心节点的关联度。

作者认为邻域中所有的节点共享相同卷积核参数会限制模型的能力。因为邻域内的每一个节

图卷积神经网络(part6)--GAT相关推荐

  1. 图卷积神经网络(GCN)入门

    GCN是从CNN来的 CNN成功在欧式数据上:图像,文本,音频,视频 图像分类,对象检测,机器翻译 CNN基本能力:能学到一些局部的.稳定的结构,通过局部化的卷积核,再通过层级堆叠,将这些局部的结构变 ...

  2. 图卷积神经网络_深度层次化图卷积神经网络

    来源:IJCAI 2019 论文地址:https://arxiv.org/abs/1902.06667 代码地址:https://github.com/CRIPAC-DIG/H-GCN Introdu ...

  3. gcn 图卷积神经网络_复制一文读懂图卷积GCN

    首发于郁蓁的机器学习笔记 写文章 一文读懂图卷积GCN 苘郁蓁 ​ 阿里巴巴 算法工程师 ​关注她 唯物链丶.小小将等 480 人赞同了该文章本文的内容包括图卷积的基础知识以及相关辅助理解的知识点,希 ...

  4. 拉普拉斯算子属于卷积方法吗_论文笔记 - 图卷积神经网络综述

    文献题目:图卷积神经网络综述 文献来源:计算机学报,2019 文献原文:https://kns.cnki.net/kcms/detail/11.1826.tp.20191104.1632.006.ht ...

  5. 深度学习:GCN(图卷积神经网络)理论学习总结

    目录 来源 作用 原理 解释 核心 两种理解 空间域的缺点 图的概念 学习新特征 目标 提出 步骤 图卷积 分类 特点 常见问题 缺点 改进 残差结构与扩张卷积 图注意力网络GAT 邻接矩阵的探索 A ...

  6. 沈华伟老师图卷积神经网络教学视频笔记

    图卷积神经网络 感谢 0. 背景介绍 基于图的应用 node-level graph-level singal-level 数据集介绍 1. Cora数据集: 2. CiteSeer 3. Pubme ...

  7. GCN图卷积神经网络总结笔记

    参考文章:一文读懂图卷积GCN - 知乎 Graph Neural Network(GNN) 图神经网络(Graph Neural Network, GNN)是指神经网络在图上应用的模型的统称.根据采 ...

  8. 图卷积神经网络(GCN)

    2022年10月7日 图卷积神经网络(GCN) 参考:何时能懂你的心--图卷积神经网络(GCN) - 知乎 (zhihu.com) ​ 一文让你看懂图卷积神经网络(GCN)!!! - 知乎 (zhih ...

  9. 深入理解图卷积神经网络(GCN)原理

    深入理解图卷积神经网络(GCN)原理 文章目录 深入理解图卷积神经网络(GCN)原理 前言 一.为什么需要GCN 二.GCN的原理 1.图的定义 2.GCN来了 2.1 矩阵计算公式 2.2 以小规模 ...

最新文章

  1. 测试openstack neutron的网络连通性
  2. install ros indigo tf2
  3. 【Android APT】编译时技术 ( ButterKnife 原理分析 )
  4. 四大价值观和12准则
  5. java中qq中拉伸的文件,delphi中如何实现QQ中的截图并实现拉伸放大移动的功能
  6. 摆放家具-家具类以及创建家具对象
  7. 为多网络请个“交警”
  8. 跨页数据传递的两种方式
  9. java的BASE64Encoder,BASE64Decoder加密与解密
  10. vue项目中对axios的全局封装
  11. 纪念音视频界前辈-雷霄骅
  12. 知识图谱入门视频(二)
  13. IOS开发基础知识--碎片5
  14. Android 驱动(15)---如何修改USB驱动能力
  15. 设计模式之行为型模式
  16. T-SNE可视化实现
  17. matlab pi调节器,pi调节器的输入和输出_pi调节器的传递函数
  18. 如何向你的弱智同学解释区块链
  19. 智课雅思词汇---十六、前缀hyper和hypo是反义词
  20. ASP.NET 有哪些web服务器-

热门文章

  1. 机器学习实战第15章pegasos算法原理剖析以及伪代码和算法的对应关系
  2. 机器学习(三十五)——Actor-Critic, Integrating Learning and Planning(1)
  3. 请求失败或服务未及时响应 有关详细信息_「干货」从零开始的微服务搭建之路...
  4. Activity跳转的数据交换问题---Activity学习笔记(二)
  5. 谈及未来的 AI, 也许你已身处其中 —— 记 InfoQ 对青云QingCloud 联合创始人林源的采访...
  6. Android开发者指南(4) —— Application Fundamentals(二)
  7. 用Helper对类的行为进行修饰以便复用(附:外三篇)
  8. 2015级C++第2周实践项目
  9. mysql事务和锁InnoDB(转)
  10. Android的配置界面PreferenceActivity