Add to Chrome
✅ The verified answer to this question is available below. Our community-reviewed solutions help you understand the material better.
У чому полягає ключова відмінність між однопотоковими та двопотоковими мультимодальними трансформерами?
Dual-stream моделі принципово не здатні виконувати завдання крос-модального пошуку.
Single-stream подає токени обох модальностей в один трансформер для ранньої крос-уваги; Dual-stream використовує окремі енкодери для кожної модальності.
Single-stream працює вдвічі швидше під час інференсу, але підтримує лише роботу з текстовими даними.
Single-stream архітектури використовуються лише для відеоматеріалів, а Dual-stream — для аудіозаписів.
Get Unlimited Answers To Exam Questions - Install Crowdly Extension Now!