Александр Амини, инструктор курса MIT 6.S191 «Введение в глубокое обучение», открывает недельный буткемп, рассказывая о прогрессе в области ИИ за последнее десятилетие: от генерации лиц до больших языковых моделей, таких как ChatGPT и GPT-4, а также о появлении мультимодальных моделей, работающих на периферийных устройствах. Он объясняет фундаментальные концепции: от одного нейрона до глубоких нейронных сетей, функцию активации, прямой и обратный проходы, градиентный спуск и его варианты. Также обсуждаются практические аспекты обучения: переобучение, регуляризация, dropout и ранняя остановка. В конце он анонсирует следующую лекцию о последовательностных моделях и приглашает на практические занятия и соревнования проектов.