falcon perception: новая модель для привязки и сегментации объектов

Институт технологий искусственного интеллекта (TII) выпустил Falcon Perception — трансформер с 600 миллионами параметров, использующий раннее слияние (early-fusion) для решения задач привязки и сегментации объектов на изображениях по текстовым запросам на естественном языке. Модель способна к работе с открытым словарным запасом.