图注意网络Graph Attention Network

Leaky ReLU 有利于压低负数对结局的影响。

图注意网络Graph Attention Network的流程

输入向量$h_i$乘上权重矩阵W得到对应的向量$h_i^{\ast }$,并将$h_i^{\ast }$计算出对应的$a_i$,从而得到最终对结果向量的贡献。
所以有$h={\sum }_i{h}_i^{\ast }\ast a_i$