Wer hat die Rückpropagation (BP) erfunden? Ihre moderne Version (auch als umgekehrter Modus der automatischen Differenzierung bezeichnet) wurde 1970 von dem finnischen Masterstudenten Seppo Linnainmaa veröffentlicht. Ein Vorläufer der BP wurde 1960 von Henry J. Kelley veröffentlicht. Die erste NN-spezifische Anwendung der BP wurde 1982 von Paul Werbos beschrieben (aber nicht in seiner Dissertation von 1974, wie manchmal behauptet wird). Einige fragen: "Ist die Rückpropagation nicht nur die Kettenregel von Leibniz (1676)?" Nein, es ist die effiziente Art, die Kettenregel auf große Netzwerke mit differenzierbaren Knoten anzuwenden. (Es gibt auch viele ineffiziente Möglichkeiten, dies zu tun.) Sie wurde erst 1970 veröffentlicht. Siehe die Übersicht über die Rückpropagation-Webseite mit weiteren Details: Siehe auch die "Annotierte Geschichte der modernen KI und des Deep Learning" (2022):