Компания Microsoft запустила новый проект в виде приложения CaptionBot, которое автоматически подписывает изображения.
Приложение анализирует фотографии и сети и те, которые загружены с компьютера пользователя. Microsoft будет сохранять все изображения для того, чтобы совершенствовать новую систему.
фото: tjournal.ru
CaptionBot работает с двумя нейросетями. Одна из которых анализирует фотографии, а другая генерирует подписи к ним. Точность анализа системы повышается с количеством залитых фотографий.
Системы уже точно распознает портреты знаменитых людей и достопримечательностей. Также она легко генерирует названия к простым фотографиям животных, птиц и распознает эмоции.
Иногда система ошибается. К примеру, она описала мужчину в футболке как мужчину в галстуке. Девушку, играющую на барабанах, она отправила на кухню.
фото: tjournal.ru