Сергей Николенко, ПОМИ РАН, Neuromation - Понимание мультимодального мира

Мир вокруг нас мультимодален, и мы воспринимаем его посредством комбинации очень разных источников информации: изображений, текста, звука и т.д. Однако последние результаты показывают, что многие существующие подходы всё ещё не достигают “истинной мультимодальности”, при которой модель стала бы больше, чем суммой своих унимодальных частей. В докладе идет речь и о последних результатах в этой области, и о мультимодальных исследованиях, которые происходили в Лаборатории искусственного интеллекта ПОМИ РАН.