Бесплатная книга «Multimodal Deep Learning»: 272 страницы о мультимодальных нейросетях.
Бесплатная книга «Multimodal Deep Learning» объёмом 272 страницы рассказывает о том, как нейросети объединяют разные типы данных.
Что разбирается в книге
- основы работы с текстом и изображениями;
- преобразование одной модальности в другую;
- совместное обучение представлений, когда данные одного типа помогают лучше понимать другой;
- архитектуры для одновременной обработки нескольких модальностей;
- универсальные мультимодальные модели и генеративное искусство.
Материал вырос из исследовательского семинара. Он подойдёт тем, кто уже знаком с основами глубокого обучения и хочет разобраться в мультимодальных подходах.
Отметим, что книга издана на английском языке. Она опубликована в 2023 году, поэтому полезна для изучения основ, но не охватывает последние поколения моделей.
Ещё новости:
