Регламент по защите данных GDPR обязывает юрлица, владеющие интернет-сервисами, получать согласие на обработку персональных данных, выдавать собранные данные субъекту и удалять их по первому требованию, и следить, чтобы данные обрабатывались только в соответствии с целями, которые подтверждены пользователем. Всё это работает уже два года, но через три недели включат санкции за неисполнение. А это, на минуточку, 20 млн евро или 4% от годового оборота, смотря что больше. Именно поэтому вы в апреле получили тонну почтовых уведомлений от твитера, гугля, фейсбука и других популярных сервисов.

Бдительные немцы начали обсуждать применимость регламента к OpenStreetMap ещё в марте прошлого года. Тогда на немецкой конференции внезапно всплыла тема приватности в контексте сайта «How Did You Contribute» Паскаля Найса. Мол, все эти пакеты правок и даты в открытом доступе — хорошо, но если их анализировать, можно вытащить слишком многое. Например, сайт Паскаля довольно точно отображает ваш район, часы активности и интересы. Из-за этого автор даже получал угрозы с требованием удалить личные данные.

Результатом стало требование залогиниться для просмотра профилей HDYC. Последовавшие споры в почтовой рассылке talk@ разбились о твёрдость немцев. Но спустя полгода Паскаль, всё-таки, позволил открывать свои профили.

Наступил апрель

Две недели назад Саймон Пул опубликовал 24-страничную резолюцию LWG по GDPR, результат полугода работы активистов OSMF с привлечением внешних консультантов. Зная принципы работы Совета, рекомендации юридической рабочей группы, скорее всего, будут приняты без изменений. Вот что советуют в техническом плане:

• убрать метаданные из выгрузок данных (планеты), диффов и вывода OSM API для незарегистрированных пользователей;
• под метаданными понимаются логин и числовой идентификатор пользователя, номер и атрибуты пакетов правок, и вероятно — метки времени у объектов;
• сделать кнопку для полного удаления профиля (без геоданных) и предоставлять список удалённых пользователей сторонним обработчикам данных;
• обновить и заставить пользователей подписать условия использования, ограничивающие способы обработки данных;
• авторы сервисов, анализирующих данные, должны будут подписать договор с OSMF, либо самостоятельно разбираться с еврокомиссией.

Фредерик Рамм подготовил список изменений для каждого метода OSM API. Как видно, незарегистрированные пользователи не смогут получать информацию о пакетах правок, пользователях, заметках, GPS-треках и блокировках. Кроме того, придётся прикрутить авторизацию к сайту planet.osm.org, чтобы разделить его на две части: публичную с обрезанными данными и приватную с полным содержимым.

Запрос /map к OSM API традиционно используется для получения данных в заданной области. В 2016 году этот и другие запросы стало можно делать, передавая заголовки аутентификации: в этом случае не применятся ограничения по частоте запросов. После внедрения вышеупомянутых изменений разница будет более существенной, так как данные начнут разниться в зависимости от наличия аутентификации. Один из авторов Overpass API заметил, что сайт OpenStreetMap не передаёт эти заголовки при экспорте данных. Очевидно, похожие задачи придётся решать и авторам других веб-приложений для работы с данными OSM. Редактор iD уже готов.

Как готовятся другие

Роланд, автор Overpass API, бунтует: в мае прошлого года он написал заметку с фразами, апеллирующими к «1984» и «451°F»: мол, переписывание истории — это подрыв доверия к данным. Он считает, что пользователей с данными связывают только идентификаторы и логины: так давайте не прятать метаданные пакетов правок, а защищать пользователей. То есть, позволять им плодить сколько угодно новых user id, вручную или автоматически, чтобы размыть свой след в базе. Хотя едва ли это поможет тем 99% пользователей, которые не задумываются о приватности.

Сервис Overpass API работает без регистрации, и многие картографы пользуются им для редактирования карты. В будущем релизе 0.7.55 нет ограничений на метаданные.

Компания Geofabrik разделила свой сервер с выгрузками на два: для получения полных данных нужно зарегистрироваться на «osm-internal» и качать файлы из браузера, а на старом сервере пропали исторические дампы (*.osh.pbf) и вырезаны метаданные из обычных выгрузок. Там нет логинов и идентификаторов пользователей и пакетов правок, но метки времени сохранены. От этого файлы pbf похудели примерно на 10%.

Выгрузки от BBBike не содержат никаких метаданных, даже меток времени. «Идите на osm.org или заплатите 99 евро в месяц». Остальные сервисы регулярных выгрузок, включая французский, швейцарский или наш гис-лаб, не вносили никаких изменений в процесс: метаданные как были, так и остались.

Сервисы для анализа правок и поведения пользователей OpenStreetMap, не считая HDYC, всё ещё не требуют входа через OSM и не планируют сделать его обязательным. Как я понимаю, частных лиц регламент GDPR не касается, поэтому сервисы типа Who’s That, явно нарушающие приватность пользователей, не пострадают. Разве что придётся их подкрутить, чтобы скачивать диффы с сервера OSM под логином автора.

В октябре в редакторе iD появились снимки: пункт «наложение фотографий» в меню подложек. Они всплывут, если навести курсор на оранжевые маркеры. Откуда берутся эти картинки и куда их загружать?

Мысль централизованно хранить снимки, собранные на картопрогулках, воплотилась ещё в 2009 году в проекте OpenStreetView. Это просто архив геопривязанных через EXIF фотографий, отображаемый на карте OpenLayers. Долгое время он был заброшен, сейчас какое-то движение вокруг сайта заметно, но он безнадёжно устарел. Обычная кладовка снимков — неблагодарная затея: мапперы возвращаются с прогулок с сотнями, иногда тысячами фотографий, ценность которых падает до нуля после обработки. Гигабайты снимков будут лежать мёртвым грузом, потому что улицы рассматривать куда удобнее через гугло- или яндекс-панорамы (последние нам можно использовать, а вот Street View — нежелательно).

В 2013 году появилась альтернатива. Шведско-американская команда программистов сделала Mapillary: приложения для смартфонов, которые отправляют снимки на сервер, плюс веб-сайт для их домашнего просмотра. В отличие от проприетарных решений, здесь многое возложено на пользователей: не только съёмка, но и контроль размытия лиц и номеров, поворот и перенос точек съёмки, редактирование цепочек. Mapillary не требует панорам (хотя с сентября умеет их делать и отображать): можно загружать даже серийные фотографии с GoPro. Это Street View и Panoramio в одном.

Лицензионный вопрос решили весной: сначала снимки были под лицензией «только для некоммерческого использования». Это очень хитрое условие, потому что не перечисляет запрещённые операции явно. 5 марта немецкий суд постановил, что запрет на некоммерческое использование фактически разрешает только личное пользование. 29 апреля мы убедили авторов Mapillary, что NC не нужен, и теперь снимки публикуются под CC-BY-SA 4.0, плюс специальный пункт в условиях явно разрешает использовать данные (снимки и треки) в OpenStreetMap.

Levente Juhasz сделал карту сравнения покрытий Street View и Mapillary. Последнее отстаёт: в центре Петербурга, например, на равномерную голубую сетку гуглопанорам накладываются корявые ошмётки красных маршрутов Mapillary. Московские осмеры, в частности, Артём Светлов, активно наполняют базу: по сути, для себя работаем. Авторы сервиса подтвердили, что в него можно сгружать тонны фотографий с картопрогулок. Они с энтузиазмом отнеслись и к загрузке записей с видеорегистраторов, вот только привязать последние к трекам нетривиально. Есть инструкции для GoPro и скрипт геотегирования — в обоих случаях понадобится разрезать видео на фотографии (и достаточно одной в секунду). Замечу, что kastellano с русского форума когда-то экспериментировал с привязкой роликов YouTube к трекам — но для картирования это бесполезно.

Плагин для JOSM пока никто не написал, но есть другой способ загрузить фотографии в редактор. Откройте эту страницу, найдите нужный район и нажмите «Download GPX». Если повезёт, полученный файл в редакторе покажет все фотографии, открывающиеся по клику. У меня не сработало, ждём программистов: теперь есть, откуда списывать взаимодействие с API.

Инициативы нашего правительства уже давно вызывают удивление пополам с горечью, как недавняя угроза «отключить станции GPS», которые на поверку оказались даже не наземными станциями коррекции (которых в России нет), а научными станциями IGS, для обработки сигнала с которых требуются дорогие специализированные устройства.

Вчерашняя новость от «Известий» порадует тех, кто безуспешно пытался объяснить новичкам, почему нельзя обрисовывать космоснимки гуглояндексов:

Легальным продавцам фотографий участков Земли из космоса будет проще защитить свой бизнес от пиратов. Минэкономразвития подготовило законопроект, признающий такие изображения охраняемым результатом интеллектуальной деятельности.

<...> Чтобы распространить [институт исключительного права] на данные ДЗЗ и производные материалы, необходимо их отнести к охраняемым результатам интеллектуальной деятельности. Такой подход соответствует общемировой практике и сложившимся традициям делового оборота.

— Если данные дистанционного зондирования Земли будут включены в Гражданский кодекс как объекты интеллектуальной собственности, их нельзя будет использовать без согласия собственника, — отмечает юрисконсульт ЗАО «Геоцентр Консалтинг» Екатерина Алешина.

— В процессе создания интеллектуальной собственности вы должны проявить творчество. Здесь же вы не имеете права его проявить — у вас есть четкие критерии, по которым производится съемка, — считает президент Ассоциации содействия развитию рынка геоинформационных технологий и услуг Сергей Миллер.

— Элемент творчества присутствует в выборе режимов, моментов и территорий съемки, — возражает соучредитель ИТЦ «СканЭкс» Владимир Гершензон. Доказывая, что сделанный автоматом снимок может быть творческим, он приводит пример всемирного конкурса Wildlife Photographer. В 2009 году первое место на конкурсе фотографий природы занял ночной снимок волка, сделанный автоматически, по срабатыванию инфракрасного датчика.

Алекс Антонов в фейсбуке комментирует: «так и до творческого союза недалеко. Союз геоинформатиков и дистанционных фотографов». А наши спутники ДЗЗ, получится, не отстают от американских, а просто развивают отдельное направление изобразительного искусства.

Derick: «I don’t see the OSM attribution?» — chippy: «Derick, you have to click the tiny mystery meat fuck-you-osm-community „i“ button»:

MapBox очень долго пытались сократить текст упоминания авторства OpenStreetMap, им противостояли участники сообщества, и в начале этого года они просто запихнули копирайт под маленький значок «i», на который нужно нажимать. Мы были недовольны уже тогда, но когда 6 мая AngiG88 показал, что в новой версии библиотеки Mapbox.js название компании значительно превосходит размерами даже этот кружочек, участники OSM рассердились и призвали MapBox к ответу. Некоторые — нецензурно.

Отсутствие упоминания OpenStreetMap — обычная для нас проблема. В отличие от карт Google и Яндекс, которые не только требуют обязательного, безальтернативного упоминания источника при использовании их карт (в условиях использования, которые никто не читает), но и запрещают пользоваться чужими картографическими библиотеками, мы выдаём тайлы, не обременённые какими-либо запретами. И их очень легко вставить в свой сайт или программу. Единственное требование — написать «Карта © OpenStreetMap» — забывается, или «забывается». Это непросто понять: неужели так сложно, пользуясь плодом безвозмездной работы сотни тысяч человек, отблагодарить их выводом на экран двух слов? Тем не менее, тема «Они используют OSM» каждый день полнится ссылками с двойственным эффектом: вроде, и здорово, что нас выбрали, но где же название проекта?

И нет, прятать «OpenStreetMap» под интерактивную кнопку или на отдельную страницу нельзя. Особенно когда в итоге карта получается под копирайтом кого-то другого. Мы даже не требуем ставить большой логотип, как Google, или длинную строку всех-всех участников, как ESRI. Конечно, многие нарушают условия по незнанию, и после письма исправляют ошибку. MapBox убрали сокрытие копирайтов через два дня после бури претензий. Их библиотеку использует новая версия набирающего популярность поисковика DuckDuckGo, и при поиске карты сразу заметна строка «© OpenStreetMap».

А с теми, кто считает упоминание авторов используемых данных недостойным уважаемой компании, Стив Кост предлагает взаимодействовать публично: после месяца ожидания ответа в личной переписке публиковать списки, связываться с новостными лентами. Подождём и мы.

Если вы не только смотрите телевизор, но и читаете интернет, то знаете, что статус Крыма всё ещё неясен, и никто, кроме России и нескольких африканских стран, не признал его отделение от Украины. Значит, он представляет головную боль для картографов: цветом какой страны его ни закрасишь, найдутся сотни миллионов недовольных. Хуже всего русским картопровайдерам: есть заказ сверху, и не выполнить нельзя.

Первыми подсуетились карты Mail.ru: полуостров отделён от Украины линией государственной границы, по стилю отличающейся от прочих границ, и при клике всплывает надпись «Крым, Россия». Википедия отображает Крым как спорную территорию, хотя война правок идёт третий день. Американские издатели карт не перекрасят полуостров в цвета России, хотя National Geographic может пойти на лёгкую уступку, затенив его территорию как спорную. В прошлую среду редактор NG добавил, что после ратификации договора Думой Крым обозначат как русскую территорию, не снимая затенения. На сайте NG все карты отражают состояние до 15 марта, а издатель НатГеоУкраина передаёт, что уступок не будет и в печатных картах. Яндекс опубликовал пресс-релиз, где под видом заботы о соответствии карт окружающей действительности пользователей объявил о разделении карт на русские и украинские, где Крым отмечен в составе разных стран.

Ввиду моратория на изменение границ, многие русскоязычные мапперы и пользователи карт OpenStreetMap негодуют. Кто-то втихую переводит названия отдельных городов на русский, кто-то неумело пытается поменять отношения границ или входящие в их состав линии. Больше не нужно этого делать: из данных OSM получается отличная политическая карта с названиями на правильном языке: osmz.ru/political. Никаких двух почти одинаковых сайтов, никаких спорных территорий. Делитесь этой ссылкой с недовольными, и приглашайте их картировать то, что действительно важно: улицы, дома, магазины и кафе, школы и больницы.