Ostatnio było to zabawne ćwiczenie, aby po prostu otworzyć całkowicie pusty plik i napisać agenta RL od podstaw, nie patrząc na żaden z moich wcześniejszych kodów. Istnieje punkt skali, w którym przepisanie rzeczy od podstaw jest złym pomysłem, ale to błogosławieństwo, gdy możesz to zrobić! Mówiąc "od podstaw", mam na myśli użycie pytorch, i trochę się śmieję, jak kiedyś irytowało mnie, gdy ludzie to mówili, ponieważ uważałem, że to nie jest od podstaw, jeśli nie było w C bez bibliotek, ale teraz to ja jestem nimi.