https://wikicshse.ru/index.php?action=history&feed=atom&title=%D0%9C%D1%83%D0%BB%D1%8C%D1%82%D0%B8%D0%BC%D0%BE%D0%B4%D0%B0%D0%BB%D1%8C%D0%BD%D1%8B%D0%B5_%D0%BD%D0%B5%D0%B9%D1%80%D0%BE%D0%BD%D0%BD%D1%8B%D0%B5_%D1%81%D0%B5%D1%82%D0%B8_%28%D0%98%D0%9824%2C_6_%D0%BC%D0%BE%D0%B4%D1%83%D0%BB%D1%8C%29
Мультимодальные нейронные сети (ИИ24, 6 модуль) - История изменений
2026-06-09T03:17:19Z
История изменений этой страницы в вики
MediaWiki 1.45.3
https://wikicshse.ru/index.php?title=%D0%9C%D1%83%D0%BB%D1%8C%D1%82%D0%B8%D0%BC%D0%BE%D0%B4%D0%B0%D0%BB%D1%8C%D0%BD%D1%8B%D0%B5_%D0%BD%D0%B5%D0%B9%D1%80%D0%BE%D0%BD%D0%BD%D1%8B%D0%B5_%D1%81%D0%B5%D1%82%D0%B8_(%D0%98%D0%9824,_6_%D0%BC%D0%BE%D0%B4%D1%83%D0%BB%D1%8C)&diff=1486&oldid=prev
imported>Mmustafaeva: Migrated current public revision from wiki.cs.hse.ru
2026-01-21T18:27:09Z
<p>Migrated current public revision from wiki.cs.hse.ru</p>
<p><b>Новая страница</b></p><div>==О курсе==<br />
<br />
Занятия проводятся в Zoom '''по вторникам в 18:10'''.<br />
<br />
<br />
==Контакты==<br />
<br />
Чат курса в TG: [https://t.me/+cjGyzTTECm9jMzg6 Телеграм-чат]<br />
<br />
<br />
Преподаватели: <br />
<br />
Жестков Борис Григорьевич @BoryaZh<br />
<br />
Бурлова Альбина Сергеевна @planqua<br />
<br />
<br />
<br />
{| class="wikitable"<br />
|- <br />
! Ассистент !! Контакты <br />
|- <br />
| Никита || @amapassenger<br />
|- <br />
| Александр || @wolf_golfa<br />
|- <br />
| Данил || @shishiga_ceo<br />
|- <br />
| Игорь || @Igkart<br />
|}<br />
<br />
<br />
<br />
==Материалы курса==<br />
<br />
* [https://youtube.com/playlist?list=PLmA-1xX7IuzDiym85ggco8um6_BOay8JM&si=Z80UaHTYMKZ6c2-U Плейлист курса на YouTube]<br />
* [https://github.com/AlbinaBurlova/hse-fcs-multimodal-course GitHub с материалами курса]<br />
* [https://vkvideo.ru/playlist/-227011779_55 Плейлист курса на VK Видео]<br />
<br />
<br />
{| class="wikitable"<br />
|-<br />
! Занятие !! Тема !! Дата !! Материалы для самоподготовки к семинарам !! Дополнительные материалы<br />
|-<br />
| style="background:#eaecf0;" | '''1''' [[https://vkvideo.ru/video-227011779_456239614]] || [[https://github.com/AlbinaBurlova/hse-fcs-multimodal-course/tree/main/w01_mm_basics Введение]] || 05.11.2025 || || <br />
|-<br />
| style="background:#eaecf0;" | '''2''' [[https://vkvideo.ru/playlist/-227011779_55/video-227011779_456239632?linked=1]] || [[https://github.com/AlbinaBurlova/hse-fcs-multimodal-course/tree/main/w02_clip_clap Контрастивное обучение]] || 15.11.2025 || || <br />
|-<br />
| style="background:#eaecf0;" | '''3''' [[https://vkvideo.ru/playlist/-227011779_55/video-227011779_456239638?linked=1]] || [[https://github.com/AlbinaBurlova/hse-fcs-multimodal-course/tree/main/w03_encoders Энкодеры]] || 18.11.2025 || ||<br />
|-<br />
| style="background:#eaecf0;" | '''4''' [[https://vkvideo.ru/playlist/-227011779_55/video-227011779_456239667?linked=1]] || [[https://github.com/AlbinaBurlova/hse-fcs-multimodal-course/tree/main/w04_fusion Мультимодальное слияние и совместные энкодеры]] || 03.12.2025 || || <br />
|-<br />
| style="background:#eaecf0;" | '''5''' [[https://vkvideo.ru/playlist/-227011779_55/video-227011779_456239681?linked=1]] || [[https://github.com/AlbinaBurlova/hse-fcs-multimodal-course/tree/main/w05_gen Мультимодальные языковые модели]] || 09.12.2025 || || <br />
|-<br />
| style="background:#eaecf0;" | '''6''' [[https://vkvideo.ru/video-227011779_456239691]] || [[https://github.com/AlbinaBurlova/hse-fcs-multimodal-course/tree/main/w06_mllm Q-Former и методы фьюжна ]] || 12.12.2025 || || <br />
|-<br />
<br />
|-<br />
| style="background:#eaecf0;" | '''7''' [[https://vkvideo.ru/video-227011779_456239704]] || [[https://github.com/AlbinaBurlova/hse-fcs-multimodal-course/tree/main/w07_eval Мультимодальные бенчмарки ]] || 16.12.2025 || || <br />
|-<br />
| style="background:#eaecf0;" | '''8''' [[https://vkvideo.ru/video-227011779_456239712]] || [[Генеративные модели для изображений и видео]] || 20.12.2025 || || <br />
|-<br />
}<br />
<br />
<br />
<br />
==Формула оценивания==<br />
<br />
Оценка = 0.3 * ДЗ1 + 0.3 * ДЗ2 + 0.4 * ДЗ3; максимум = 10 баллов<br />
<br />
<br />
== Домашние задания ==<br />
# [https://github.com/AlbinaBurlova/hse-fcs-multimodal-course/blob/main/homeworks/HW1_clip_clap.ipynb ДЗ1. CLAP. Обучение проекции из аудио в текстовое пространство CLIP]<br />
# [https://github.com/AlbinaBurlova/hse-fcs-multimodal-course/blob/main/homeworks/HW2_multimodal_adapter.ipynb ДЗ2. Мультимодальный адаптер к Qwen3-0.6B]<br />
# [https://github.com/AlbinaBurlova/hse-fcs-multimodal-course/blob/main/homeworks/HW3_vqa_challenge.ipynb ДЗ3. VQA Challenge (Kaggle-соревнование)]<br />
<br />
== Литература ==<br />
# <br />
# <br />
# <br />
#</div>
imported>Mmustafaeva