Нещодавно це була цікава вправа просто відкрити абсолютно порожній файл і написати RL-агенту з нуля, не дивлячись на жоден з моїх попередніх кодів. Є точка масштабу, коли переписувати речі з нуля – погана ідея, але це благословення, коли ви можете! Під "з нуля" я маю на увазі з pytorch, і я трохи посміхаюся про те, як раніше мене дратувало, коли люди говорили це, оскільки я вважав це не з нуля, якщо це не було на C без бібліотек, але тепер я - це вони.