论文学习|集成式DGNN|GC-LSTM: 图卷积嵌入LSTM用于动态网络链路预测_gcn+lstm-程序员宅基地

技术标签: lstm  阅读论文  rnn  

提出了一个新颖的将GCN嵌入LSTM的端到端模型,用于动态网络链路预测。其中,LSTM作为主要框架用来学习动态网络时间快照的时间特征;GCN用来捕获节点的局部拓扑特征。

动态网络链路预测可以根据历史信息预测给定网络未来的连接状态。例如,可以根据人们过去的行为、朋友甚至个人属性预测人们在社交网络的未来关系。

在过去,通常将GCN层和LSTM层进行顺序的简单堆叠,而本文中,将GCN嵌入到LSTM,更好地将结构信息进行整合。以此来预测链路出现或者消失。主要思想是使得充分利用GCN在隐藏状态和单元状态来学习图结构,接着使用LSTM来学习时间特征。

  1. 问题定义
    离散图快照序列: G = { G 1 , . . . , G T } G=\lbrace G_1,...,G_T \rbrace G={ G1,...,GT},其中, G t = { V , E t , A t } G_t=\lbrace V,E_t,A_t \rbrace Gt={ V,Et,At}表示在时间 t t t的一张网络。 V V V是指所有的节点, E t E_t Et表示在固定时间间隔中的时间链路。
    思想:通过对之前时刻的图快照演化信息的学习来预测时间点 t t t的所有链路的概率。
  2. GC-LSTM框架
    模型包括一个解码器和一个编码器。编码器是将GCN嵌入到LSTM中,利用GCN来学习每个时刻快照的单元状态 c c c和隐藏状态 h h h的网络结构,使用LSTM来学习每条链路状态的时间信息;解码器是一个全连接层,将提取到的特征映射回原始空间。最终,输出预测网络,实现网络的链路预测。
    在这里插入图片描述
    隐藏状态 h h h用来提取上次的输入信息;细胞状态 c c c用来保留长期信息。
    节点的隐藏状态受到邻居节点隐藏状态的影响;文中使用了两个GCN模型来对上次的单元层状态和隐藏层状态执行卷积操作。
    编码过程:
    ① 考虑之前的单元状态应该丢弃哪些信息,使用了遗忘门来执行,0表示所有信息都遗忘;1表示所有信息都保留。
    f t = σ ( A t W f + G C N f K ( A ~ t − 1 , h t − 1 ) + b f ) f_t=\sigma{(A_tW_f+GCN_f^K(\tilde{A}_{t-1},h_{t-1})+b_f)} ft=σ(AtWf+GCNfK(A~t1,ht1)+bf)
    ② 更新单元状态
    当前输入的单元状态: c ~ t = t a n h ( A t W c + G C N o K ( A ~ t − 1 , h t − 1 ) + b c ) \tilde{c}_t=tanh(A_tW_c+GCN_o^K(\tilde{A}_{t-1},h_{t-1})+b_c) c~t=tanh(AtWc+GCNoK(A~t1,ht1)+bc)
    输入门: i t = σ ( A t W i + G C N c K ( A ~ t − 1 , h t − 1 ) + b i ) i_t=\sigma{(A_tW_i+GCN_c^K(\tilde{A}_{t-1},h_{t-1})+b_i)} it=σ(AtWi+GCNcK(A~t1,ht1)+bi)
    c t = f t ⊙ G C N c K c t − 1 + i t ⋅ c ~ t c_t=f_t \odot{GCN_c^K{c_{t-1}}}+i_t \cdot{\tilde{c}_t} ct=ftGCNcKct1+itc~t
    ③ 最后输出
    输出门: o t = σ ( A t W o + G C N o K ( A ~ t − 1 , h t − 1 ) + b o ) o_t=\sigma{(A_tW_o+GCN_o^K{(\tilde{A}_{t-1},h_{t-1})+b_o})} ot=σ(AtWo+GCNoK(A~t1,ht1)+bo)
    h t = o t ⊙ t a n h ( c t ) h_t=o_t\odot{tanh{(c_t)}} ht=ottanh(ct)
    解码过程:
    Y d ( 1 ) = R e L U ( W d ( 1 ) h t + b d ) Y_d^{(1)}=ReLU(W_d^{(1)}h_t+b_d) Yd(1)=ReLU(Wd(1)ht+bd)
    Y d ( k ) = R e L U ( W d ( k ) Y d ( k − 1 ) + b d ( k ) ) Y_d^{(k)}=ReLU(W_d^{(k)}Y_d^{(k-1)}+b_d^{(k)}) Yd(k)=ReLU(Wd(k)Yd(k1)+bd(k))
    P t = o t ⊙ t a n h ( c t ) P_t=o_t\odot{tanh(c_t)} Pt=ottanh(ct)
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/m0_57369737/article/details/127442289

智能推荐

【部署网站】使用nginx+tomcat部署博客网站_用nignx发布网站和用tomcat部署-程序员宅基地

文章浏览阅读3.1k次,点赞3次,收藏16次。一、什么是静态网站、动态网站?静态网站没有采用任何程序开发,是纯粹使用html语言写出的网站,网页文件名以html或htm结尾。原则上不会受到攻击入侵,但是也无法在网络上实时更新内容,就纯粹的是制作好的页面。动态网站目前的主要开发语言有ASP,JSP,PHP,ASP.NET在制作好之后,都有一个网站管理后台,当以管理员身份登陆时,可以对网站的内容进行增删操作,直接在网上进行这些操作,虽然它可以随时更新,但是速度较慢。并且需要区分的是,动态网站的动态指的是动态实时更新而非网站有动态画面。区分静态网站和动_用nignx发布网站和用tomcat部署

android 实现定时任务,Android 实现定时任务的五种方式的讲解-程序员宅基地

文章浏览阅读3.9k次。1、普通线程sleep的方式,可用于一般的轮询Pollingnew Thread(new Runnable() { @Override public void run() { while (true) { //todo ..._android 定时20个小时

Dr_can模型预测控制笔记与代码实现-程序员宅基地

文章浏览阅读2.7w次,点赞206次,收藏552次。因而我们引入模型预测控制(Model PredictiveControl)的概念,对于一般的离散化系统(因为实际计算机实现的控制系统都是离散的系统,连续系统离散化的方法在此不述)。在k时刻,我们可以测量或估计出系统的当前状态y(k),再通过计算得到的u(k),u(k+1),u(k+2)...u(k+j)得到系统未来状态的估计值y(k+1),y(k+2)...y(k+j);我们将预测估计的部分称为预测区间(Predictive Horizon),将控制估计的部分称为控制区间(Control Horizon)_dr_can

由浅入深!小程序FMP优化实录,已拿offer入职_小程序fmp是指的什么(1)-程序员宅基地

文章浏览阅读569次,点赞25次,收藏12次。其实很简单就下面这张图,含概了Android所有需要学的知识点,一共8大板块:架构师筑基必备技能Android框架体系架构(高级UI+FrameWork源码)360°Androidapp全方位性能调优设计思想解读开源框架NDK模块开发移动架构师专题项目实战环节移动架构师不可不学习微信小程序混合开发的flutterAndroid学习的资料我呢,把上面八大板块的分支都系统的做了一份学习系统的资料和视频,大概就下面这些,我就不全部写出来了,不然太长了影响大家的阅读。

计算带余除法(四种方法)_带余除法怎么写编程-程序员宅基地

文章浏览阅读387次,点赞12次,收藏4次。给定两个整数a和b (0 < a,b < 10,000),计算a除以b的整数商和余数。一行,包括两个整数a和b,依次为被除数和除数(不为零),中间用空格隔开。一行,包含两个整数,依次为整数商和余数,中间用一个空格隔开。示例:输入:15 2,输出:7 1_带余除法怎么写编程

【Maven教程】(九):使用 Maven 进行测试——动态指定要运行的测试用例、包含与排除测试用例、测试报告、运行TestNG测试、重用测试代码 ~_maven和testng怎么用-程序员宅基地

文章浏览阅读1.7k次,点赞2次,收藏3次。本文的主题是Maven与测试的集成,不过在讲述具体的测试技巧之前先实现了背景案例的account-captcha模块,这一模块的测试代码也成了本章其他内容良好的素材。maven-surefire-plugin是Maven背后真正执行测试的插件,它有一组默认的文件名模式来匹配并自动运行测试类。用户还可以使用该插件来跳过测试、动态执行测试类、包含或排除测试等。maven-surefire-plugin能生成基本的测试报告,除此之外还能使用cobertura-maven-plugin生成测试覆盖率报告。_maven和testng怎么用

随便推点

图像修复论文Residual Non-local Attention Networks for Image Restoration阅读笔记-程序员宅基地

文章浏览阅读2.8k次。论文来源:ICLR2019论文链接:pdf (openreview.net)_residual non-local attention networks for image restoration

表达式计算。问题描述:编写程序,计算并输出如下表达式的值:y=其中a,x,y均为float类型,取值为3.1415926。输出结果要求保留小数点后3位。_serialprintln(a)的结果为-程序员宅基地

文章浏览阅读153次。【代码】表达式计算。问题描述:编写程序,计算并输出如下表达式的值:y=其中a,x,y均为float类型,取值为3.1415926。输出结果要求保留小数点后3位。_serialprintln(a)的结果为

android 自定义Toast 吐司-程序员宅基地

文章浏览阅读274次,点赞3次,收藏8次。【Android 详细知识点思维脑图(技能树)】其实Android开发的知识点就那么多,面试问来问去还是那么点东西。所以面试没有其他的诀窍,只看你对这些知识点准备的充分程度。so,出去面试时先看看自己复习到了哪个阶段就好。虽然 Android 没有前几年火热了,已经过去了会四大组件就能找到高薪职位的时代了。这只能说明 Android 中级以下的岗位饱和了,现在高级工程师还是比较缺少的,很多高级职位给的薪资真的特别高(钱多也不一定能找到合适的),所以努力让自己成为高级工程师才是最重要的。

FP-Growth算法之FP-tree的构造(python)_利用fpgrowth算法对其构造一个fptree,树的最大高度-程序员宅基地

文章浏览阅读7.4k次。前言:关于 FP-Growth 算法介绍请见:FP-Growth算法的介绍。 本文主要介绍 FP-tree 的构造算法,关于伪代码请查看上面的文章。上接:FP-Growth算法python实现;下接:FP-Growth算法之频繁项集的挖掘(python)。 正文:tree_builder.py\color{aqua}{tree\_builder.py}文件:#coding=utf-8import_利用fpgrowth算法对其构造一个fptree,树的最大高度

统信UOS linux下opencv应用编译时的头文件和库文件路径查找设置方法_编译时找不到opencv头文件-程序员宅基地

文章浏览阅读1.3k次,点赞25次,收藏15次。本文介绍了在统信UOS 的linux Debian系环境下,通过设置环境变量、编译指令参数指定路径、pkg-config配置等方法设置opencv库的头文件和库文件路径的方法,通过这些方法可以是的gcc或g++编译器能顺利找到opencv的头文件和库文件。_编译时找不到opencv头文件

【论文翻译】HCGN:面向集体分类的异构图卷积网络深度学习模型_hgcn-程序员宅基地

文章浏览阅读1.8k次。HCGN:面向集体分类的异构图卷积网络深度学习模型摘要集合分类是研究网络数据的一项重要技术,旨在利用一组具有复杂依赖关系的互联实体的标签自相关性。随着各种异构信息网络的出现,集合分类目前正面临着来自异构信息网络的严峻挑战,如复杂的关系层次、潜在的不相容语义和节点上下文关系语义。为了应对这些挑战,本文提出了一种新的基于异构图卷积网络的深度学习模型,称之为HGCN,用于对HINs中的实体进行集体分类。我们的工作包括三个主要贡献:1)HGCN不仅通过多层异构卷积从关系复杂的HINs中学习潜在的关系,而且用适当_hgcn

推荐文章

热门文章

相关标签