vit.

vit.

Vision Transformers: всё, что вам нужно — это внимание

Vision Transformers: всё, что вам нужно — это вниманиеСтатья о революционной архитектуре, которая изменила подход к компьютерному зрениюАннотацияС появлением статьи "Attention Is All You Need" закончилось доминирование рекуррентных нейронных сетей (Recurrent Neural Network — RNN). Поскольку трансформеры показывают лучшие результаты на практике по сравнению с RNN, давайте разберёмся, что они собой представляют и как работают в области компьютерного зрения.Краткая история искусственного интеллекта: от истоков до наших дней

продолжить чтение

Часть 2: Vision Transformer (ViT) — Когда трансформеры научились видеть

Обо мнеПривет, меня зовут Василий Техин, и последние 6 лет я живу в мире машинного обучения — от первых шагов с линейной регрессией до экспериментов с современными VLm. Когда я только начинал, мне не хватало материалов, где сложные концепции объяснялись бы без формул на трех страницах и обязательного PhD по математике. Я верил (и верю до сих пор), что любую идею можно разложить на понятные кирпичики — так, чтобы после прочтения у вас в голове складывалась цельная картина

продолжить чтение

Rambler's Top100