1、Feedforward vs Recurrent

李宏毅:Highway Network & Grid LSTM

2、Highway Network

GRU是有reset gate的,而highway network没有reset gate。reset gate是为了忘记之前的input。

李宏毅:Highway Network & Grid LSTM

李宏毅:Highway Network & Grid LSTM

update gate是input gate和forget gate的综合。input gate和forget gate是联动的

李宏毅:Highway Network & Grid LSTM

4、Grid LSTM

李宏毅:Highway Network & Grid LSTM

李宏毅:Highway Network & Grid LSTM

李宏毅:Highway Network & Grid LSTM

 

 

 

 

相关文章:

  • 2021-12-08
  • 2021-07-03
  • 2021-11-20
  • 2021-09-06
  • 2021-12-18
  • 2021-09-02
  • 2021-09-15
  • 2021-05-21
猜你喜欢
  • 2021-09-01
  • 2021-07-17
  • 2021-05-09
  • 2021-04-11
  • 2022-01-17
  • 2021-09-02
  • 2021-08-28
相关资源
相似解决方案