誰發明了反向傳播(BP)?其現代版本(也稱為自動微分的反向模式)於1970年由芬蘭碩士生Seppo Linnainmaa首次發表。BP的前身由Henry J. Kelley於1960年發表。BP在神經網絡中的首次具體應用由Paul Werbos於1982年描述(但並未在他1974年的論文中提及,這一點有時會被誤傳)。 有些人問:"反向傳播不就是萊布尼茨(1676)的鏈式法則嗎?"不,這是將鏈式法則有效應用於具有可微節點的大型網絡的方式。(也有許多低效的做法。)直到1970年才發表。 請參見反向傳播概述網頁以獲取更多詳細信息: 另請參見《現代人工智慧與深度學習的註釋歷史》(2022):
32.9K