Нейросеть PIGEON теперь может определить геолокацию объектов на фотографиях

Нейросеть PIGEON теперь может определить геолокацию объектов на фотографиях. Об этом пишет Habr.com.

Аспиранты из Стэнфорда создали программу для определения местоположения на основе изображений под названием Predicting Image Geolocations, или PIGEON, которая показывает точность до 40 километров и способна определить страну с 95-процентной точностью. Идея создания возникла у Лукаса Хааса, Михаля Скреты и Сайласа Альберта, которые вместе увлекались игрой GeoGuessr — в ней участники должны угадать географическое местоположение объекта на фотографии. Игра имеет более 50 миллионов игроков, многие из которых ведут стримы на Twitch и имеют популярные каналы на YouTube.

Для этого они использовали систему анализа изображений CLIP, а также изображения из Google Street View. Собрав данные из 500 тысяч изображений, они создали PIGEON. У неё большой потенциал применения, начиная от определения географического положения на старых фотографиях и заканчивая быстрым анализом изображений (например, для обнаружения инвазивных растений). Однако недостатком является то, что PIGEON может раскрыть информацию о людях, которую они не хотели бы обнародовать. Джей Стэнли, старший политический аналитик Американского союза защиты гражданских свобод, считает, что компании и правительства могут использовать искусственный интеллект для отслеживания маршрутов людей. Кроме того, эта технология может быть использована злоумышленниками для преследования своих целей. В связи с этим удаление геотегов с фотографий не обеспечит полную защиту личных данных.

Аспиранты Стэнфорда, осознавая все риски, связанные с их разработкой, решили не публиковать полную версию модели PIGEON из-за опасений о возможном использовании программы в незаконных целях. В настоящее время компания Google уже использует технологию ИИ для определения геопозиции на фотографии, но в их случае используется только каталог с миллионом известных достопримечательностей, в то время как у PIGEON есть доступ к 220 миллиардам изображений Google Street View. Google заявила, что пользователи имеют возможность отключить данную функцию.