Foi um exercício divertido recentemente abrir um arquivo completamente em branco e escrever um agente RL do zero, sem olhar para nenhum dos meus códigos anteriores. Há um ponto de escala em que reescrever as coisas do zero é uma má ideia, mas é uma bênção quando você pode! Por "do zero" quero dizer com pytorch, e eu rio um pouco sobre como eu costumava ficar irritado quando as pessoas diziam isso, já que eu considerava que não era do zero se não estivesse em C sem bibliotecas, mas agora eu sou eles.