A retropropagação moderna (modo reverso de diferenciação automática) foi publicada pela primeira vez por Seppo Linnainmaa em 1970.
Henry J. Kelley publicou em 1960 um precursor do método de retropropagação através do gradiente.
As primeiras aplicações diretas a redes neurais foram feitas por S. E. Dreyfus em 1973 e P. J. Werbos em 1982.
Métodos de descida de gradiente em redes profundas surgiram já nos anos 1960 com S. I. Amari (1967) e A. Ivakhnenko (1965).
A adoção ampla da retropropagação ocorreu em 1985 com Rumelhart et al. e sua eficácia foi comprovada em 2010 sem pré-treinamento não supervisionado.
Get notified when new stories are published for "Hacker News 🇵🇹 Português"