На прошлой неделе я начал курс для наших студентов по специальности "Информатика" о нейронных сетях. Мой план состоит в том, чтобы пройти от ранних классиков (МакКаллох–Питтс, Розенблат) через разработки, связанные со всеми знаковыми статьями, до работы "Внимание — это всё, что вам нужно". Мы строим понимание через очень детальный математический анализ концепций, множество численных экспериментов и практический опыт с каждой концепцией, которую мы определяем. Должен признаться, что не ожидал, что мне будет так весело возиться с весами сетей, усваивая основные принципы и просто экспериментируя. Я уже подготовил первую партию заметок и приложений для первого месяца экспериментов. Предложения и идеи очень приветствуются. Я оставлю свои заметки открытыми для всех, поэтому мне интересно, есть ли какие-либо неточности или очевидные моменты, которые я мог упустить.