深度神經網路架構的最新發展及回顧:A new kind of deep neural networks

這篇文章主要介紹了除則在相對傳統的神經網路中(Ex LeNet, AlexNet),另一波最新的前向神經網路的的最新發展。這波新的前向神經網路主要有兩個特質:

  1. 具備生成網路分支:這種分之也稱為Decoder,主要是用來將資料在高維度的representation映射回原本資料。
  2. 具備遞回的神經網路層:這種網路架構可以讓神經網路利用前幾個時間點輸入的representation來做下一個時間點的預測(類似RNN但有不同種變形)

作者在文章中做了詳盡的前者和後者的優缺點比較,並從數十篇論文中擷取幾個比較重要的大架構用圖形來說明。在文末,作者也將這種新型態的前向神經網路和近幾年很熱門的GAN做優缺點比較,非常適合想了解近幾年神經網路架構發展的讀者。

更多細節請參考下面的連結:

A new kind of deep neural network

 

Share the joy
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  

近期文章

近期迴響

彙整

分類

其它

kuanchen Written by:

Be First to Comment

發表迴響

你的電子郵件位址並不會被公開。 必要欄位標記為 *