Искусственный интеллект от LG научился составлять текст к изображению

Данный сервис был представлен LG на состоявшейся в Ванкувере конференции по компьютерному зрению и распознаванию образов 2023.

Нейросеть создана с использованием технологии LG AI Research, носящей название Zero-shot Image Captioning, что помогает искусственному интеллекту распознавать и составлять соответствующее описание объектов и сцен. Причем особенность состоит в том, что технология не нуждается в подсказках, ее работа основывается исключительно на имеющемся опыте и знаниях.

Представитель LG пояснил, что их нейросеть отличается, например, от сервиса с искусственным интеллектом Midjourney тем, что последняя составляет новый текст из представленного ей или создает что-то новое на базе полученного от пользователя изображения.

Получаемые при использовании технологии Captioning тексты достаточно простые, однако стоит учитывать, что нейросеть использует визуальный интеллект, чтобы сделать свои выводы о неизвестных ей ранее изображениях. Так, изучив представленный ей пейзаж, нейросеть может определить изображенное на нем место.

Еще одной особенностью представленной LG технологии является способность создавать текстовые описания к более чем 10 тысячам картинок всего за два дня. Такая особенность позволит повысить производственную эффективность тех компаний, которые занимаются управлением значительным объемом изображений.

В создании Captioning совместно с LG AI Research принимала участие крупнейшая в мире платформа визуального контента Shutterstock, известная большим объемом изобретений в направлении захвата изображений.

Как пояснил руководитель лаборатории Vision компании LG AI Research Ким Сын Хван, в планах компании LG стать глобальным лидером в области созданной технологии, поэтому она нацелена на продолжение разработок и сотрудничество с новыми компаниями. Для реализации задуманного дочерние компании LG во время конференции Computer Vision and Pattern Recognition 2023 провели отдельное мероприятие LG AI Day, целью которого был набор новых аспирантов.