ИИ Facebook помечает фотографии определенными тегами

Сбой, произошедший в крупнейшей социальной сети мира Facebook, продемонстрировал возможность искусственного интеллекта распознавать содержание фотографий и описывать их при помощи тегов. Во время сбоя перед пользователями вместо привычных изображений предстало их краткое текстовое описание.

Оказалось, что ИИ способен достаточно точно описывать ситуацию на фотографиях и определять пол людей, различать домашних животных. Так фотография с праздника описывалась следующими тегами «люди улыбаются, люди танцуют, свадьба и в помещении». Также ИИ способен отличить кота от собаки и определить текстовый формат изображения.

Аналогичная технология с подробным описанием изображения используется в Instagram. Возможно, что для описания фото может применяться и технология распознавания лиц. Работает такая технология с 2017 года и применяется для изображения, на которых не отмечен пользователь.
В Facebook искусственный интеллект с машинным обучением необходимым для распознавания сюжета фотографии применяется с апреля 2016 года. По заявлению компании технология необходима для обеспечения эффективного доступа социальной сети, в частности для пользователей имеющих проблемы со зрением.

В настоящее время не известно используются ли описания фотографий для получения информации необходимой для таргетинга рекламы. Текстовое описание снимков предоставляет информацию о личной жизни пользователей, их увлечения, место проведения отпусков, наличие домашних животных.

Возможность Facebook получать дополнительную информацию непосредственно с фотографий стала неожиданностью для многих пользователей, которые живо обсуждали этот факт в конкурирующей социальной сети Twitter.