Без заголовка
Имхо выход на внеязыковое обучение необходим не потому, что мультимодальность добавляет интеллекта, а потому что необходимо постоянно расширять и уточнять языковую репрезентацию реального мира. Не всё же африканцам размечать датасеты. Чтобы сам увидел, классифицировал, ввёл новое понятие - дополнил языковое и понятийное пространство общественного мышления...