Facebook запускает систему описания картинок для незрячих пользователей

Facebook запускает систему, которая прочитывает фотографии и рассказывает людям с ограничениями по зрению о том, что изображено на фото.

Система распознает машины, лодки, мотоциклы, поезда, дорогу, велосипед, автобус, улицу, горы, деревья, снег, небо, океан, воду, пляж, волну, солнце, траву. Из видов спорта она узнает теннис, плавание, соревнования на спортивной арене, баскетбол, бейсбол, гольф. Из еды — мороженое, суши, пицца, десерты, кофе.

Кроме того, система знает, что такое дети, очки, борода, улыбка, украшения, обувь и селфи. Изображения описываются простыми предложениями. Пример: «На изображении два человека, и они улыбаются».

В соцсети предусмотрена возможность самостоятельного добавления описания. Разработал систему бывший инженер Facebook Мэтт Кинг, который сам потерял зрение из-за пигментного ретинита.