«Один мужчина, борода»: во время сбоя Инстаграма и Фейсбука пользователи увидели точные текстовые описания своих фото Статьи редакции
Для многих стало открытием, что искусственный интеллект соцсетей «видит» каждый пост и делает это довольно точно.
3 июля в работе Фейсбука, Инстаграма и WhatsApp произошёл крупный сбой — пользователи на протяжении нескольких часов не могли зайти в приложения и получить доступ к новостным лентам. Также все три сервиса (WhatsApp и Instagram принадлежат Facebook) не открывали изображения и аватарки.
Из-за сбоя пользователи могли наблюдать в Фейсбуке и веб-версии Инстаграма необычную картину — вместо фото появились довольно точные текстовые описания. К примеру, снимок девушки с собакой так и обозначался набором тегов: «На этом изображении может находиться девушка и собака».
Пользователи стали делиться в Твиттере пересказами собственных страниц. На это обратили внимание и читатели TJ.
В соцсетях шутили, что Инстаграм и Фейсбук развивают воображение, а также, что именно так будут работать сервисы при автономном рунете.
Что это за теги вместо фото
Издание The Verge объясняет: если вкратце, то набор тегов — то, как каждую фотографию каждого пользователя видит искусственный интеллект, встроенный в Инстаграм и Фейсбук. Системы машинного зрения анализируют каждый снимок, разбивая его на объекты. В некоторых случаях алгоритмы Фейсбука могут даже точно определить, какой именно пользователь изображён на фото.
Facebook использует систему «чтения» изображений в своих сервисах как минимум с 2016 года. В 2018 году Instagram запустил функцию пересказа содержимого фотографий для слабовидящих — по сути зачитывается набор тегов.
Для тех, кто погружён в сферу технологий, подобные текстовые описания в соцсетях не являются чем-то новым. Программисты даже делали расширения для Chrome, раскрывающие наборы тегов. Но крупный сбой Фейсбука и Инстаграма показал обычно «невидимую» часть работы нейросетей широкому кругу людей.
На фоне скандалов с Facebook и приватностью СМИ и пользователи задались вопросом, для чего в соцсетях могут собирать подобный тип данных. В The Verge предположили, что информацию могут передавать рекламодателям. Журналисты обратились за комментарием в Facebook, но не получили ответа.
При этом редакция издания отметила: «Независимо от того, как используют данные, это увлекательный взгляд за кулисы крупнейшей в мире операции по сбору данных».
Несколько примеров для сравнения
To be fair, "one person, beard" is pretty much a spot-on description of me.
Комментарий недоступен
Уже много месяцев это. Можно смотреть в коде элемента на сайте что инстаграм подумал о вашем фото, они это туда в схему заносят, видимо для SEO продвижения и для своих штук.
Ты читал статью, ало?
Да
Я бы от такой нейронки к подсайту "фото" не отказался. )
Это и сейчас можно посмотреть в браузере к каждой фото
Всем кому интересна тема преобразования картинок в текст, вот что нужно загуглить:
Yolo v3
Все намного проще, чем может показаться :)
Комментарий недоступен
Тут все еще Open CV мне кажется все юзает в продакшене, но я не уверен, с нейронками точно сложнее будет
Комментарий недоступен
Идеально же: ты будешь туда постить свои охуенные истории, но приложение не будет работать и никто их не увидит. WIN WIN SITUATION!
Комментарий недоступен
Ну кроме тегов для рекламы, детектирование объектов можно использовать как сервис для слепых.
так это ж есть в тексте тоже(
точно(
Комментарий недоступен
Комментарий недоступен
Предлагаю еще тупее - вместо текста ставить точки системой Браиля. Вот умора будет.
Бачок с бигдатой потик
Ну это как бы alt-теги, которые по стандарту html должны быть заполнены у изображений, как раз для случаев, когда картинка не загрузилась или документ открывается скринридером
Точнее alt-аттрибуты тега img
Для обывателя, вообще, что то связанное с компьютером, кажется дичайшей магией.
Блин, а где упоминание местного форса этого машинного описания обложки фб Лихачева?
я вот помнил что-то такое, но не нашел
Автор наверно удалился вместе с постом
Комментарий недоступен
Комментарий недоступен
Комментарий недоступен
У AviaSales удивило описание фотки: "Чё-то про Мальту")
Они вообще молодцы)
Тот момент, когда на самом деле это теги под фото для слабовидящих, хех
сбор данных лол
Фото на весь интернет - нормально. Текст описывающий то что изображено на фото - ах уж этот дрянной фейсбук!
Разрабам инсты и фб самим стыдно за это говно, вот и прикрыли описаниями)
Так даже лучше