86 заметок с тегом

источники

DigitalGlobe наш

На снимке — село Большие Тиганы в Татарстане. На его карте почти нет домов: неудивительно, там нет ни снимков Bing, ни снимков Mapbox. Но теперь мы можем их обклацать, пользуясь подложкой на иллюстрации. Кевин Баллок сдержал обещание, которое мы обсуждали месяц назад.

Вчера в трёх основных редакторах появились два новых спутниковых слоя. В JOSM нужно зайти в настройки снимков, выбрать две строчки с «DigitalGlobe» и нажать «Активировать». В iD жмите кнопку со слоями справа, в P2 — на кнопку «Подложка» вверху. Слои такие:

  • DigitalGlobe Standard: разрешением 30-60 см, покрывает 86% суши, больше с каждым годом. Обновляется дважды в год в США, Западной Европе и Австралии, раз в два-пять лет в остальных регионах. В Москве, например, он удивительно стар: примерно от 2013 года, в других местах бывает свежее остальных. Аналогичен слою «Recent Imagery», доступному пользователям DG Maps API.
  • DigitalGlobe Premium: аналог слоя «Premium Imagery» или «+Vivid», доступного только корпоративным подписчикам DG. На нём чуть больше качественных снимков, но многие старее, чем у альтернатив. Пишут, что слой обновляется чаще, особенно в специальных регионах, типа Хельсинки. В России таких специальных регионов нет. Очень часто нет разницы между этим слоем и Mapbox: те же зимние снимки и отсутствие оверзума.

Свежесть снимков пока определяем на глаз. Кевин пишет, что через пару недель слоям добавят метаданных с датами фотографирования и публикации. Пока можно пользоваться картой свежести для Standard и Premium (включите галочку «Mapbox» справа вверху). Доверять им сложно, учитывая видимую разницу между слоями, но карта в целом отсутствием прямоугольников цвета 2016 года отражает впечатление от слоёв. DigitalGlobe также публикует квартальные планы на съёмку поверхности.

Точность привязки плавает. Слой Standard примерно аналогичен Bing с его искажениями в гористой местности. Впрочем, Санкт-Петербург плоский как стол, а искажения присутствуют и там. Premium, как Mapbox, привязан лучше. Подключайте слой треков и пользуйтесь базой смещений. Официально у слоёв точность 10 метров по CE90: для 90% замеров отклонение будет в пределах десяти метров.

Условия использования подложек DigitalGlobe явно разрешают их обрисовку для OpenStreetMap и только для него. Снимки нельзя скачивать и использовать для иных целей. DG не несёт ответственности за сломанные глаза и разбитый лоб от фейспалмов во время оценки качества подложек. На той же странице упоминается аналогичное разрешение от Mapbox, которое включает изумительное ограничение: «если вы подписаны на план Premium, то можете обрисовывать наши снимки ещё и в коммерческих целях, но не более 100 точек, линий или полигонов в год».

Обсуждаем новые слои на форуме. Там сначала радуются подложкам, затем разочарованно обнаруживают, что они либо дублируют Bing или Mapbox, либо невыносимо старые. Новые снимки закрыли немало дыр и дополнили сложно читаемые зимние снимки летними: упоминают Саратовскую и Ульяновскую области, Мордовию и другие регионы. Кевин просит помнить, что новые снимки добавляются постоянно, с большими обновлениями раз в квартал, как у Bing. Претензии и просьбы пишите в его тему на английском.

10 мая   источники

Крадущийся Facebook, затаившийся DigitalGlobe

На прошлом State of the Map US сотрудники Facebook рассказали о том, как они натравили алгоритмы машинного обучения на спутниковые снимки, чтобы найти на них дороги. Затем люди проверяют эти дороги и склеивают их с данными OpenStreetMap. Поразительно по двум причинам: Facebook дорисовывает OSM! И скоро никому не нужно будет обклацывать спутниковые снимки!

Правки сотрудников фейсбука начали появляться в Египте и Таиланде и их, конечно, быстро удалили. Как это обычно бывает с автоматическими массовыми правками: вместо улучшения геометрии удаляли нарисованное и заливали заново, причём с косяками (оставались узлы); качество было сомнительным, особенно на дефектах снимков, которые определялись как дороги; классы дорог очищали и тегировали всё как residential. Причём это началось ещё в мае, последующие попытки мы замечали в июле и августе. Откатили почти всё, фейсбук затаился.

В феврале тайские мапперы нашли страницу в вики, которая документирует процесс автоматического распознавания дорог фейсбуком. Неужели они решили соблюсти инструкцию по импорту и автоматическим правкам? Увы: на форуме быстро заметили, что сотрудники компании продолжают портить данные в Таиланде. Способы разнообразны и всегда печальны, тема читается как история неудач, «33 несчастья» по-осмерски. В субботу осмеры и фейсбуковцы в Таиланде встретились за чашкой чая и договорились об открытости процесса.

Иллюстрации из письма Facebook в рассылку imports@.

Главное, впрочем, в мелочах: немногие, кто возмущался новой попыткой фейсбука импортировать нам дороги, прочитали их вики-страницу до конца. Во-первых, фейсбук классифицирует снимки DigitalGlobe. Но не те обрезки, что доступны нам из Bing и Mapbox, а улучшенное покрытие +Vivid без облаков и стыков. А в конце они приводят разрешение DG на импорт производных от снимков данных в OSM и ссылки на тайлы с классифицированными дорогами, которые можно сравнить со спутниковой подложкой, где она есть.

Осмеры, конечно, спросили: а нельзя ли нам заодно и исходные спутниковые снимки? Вы знаете, как оно бывает: спросили, вместе посмеялись, вздохнули и разошлись. Но не в этот раз: Кевин Баллок из DigitalGlobe 16 марта ответил:

Рад сообщить, что мы приближаемся к отличному решению, которое позволит DG опубликовать спутниковый слой специально для трассировки в OpenStreetMap. Эту работу спонсируют несколько организаций, и она сделает слой +Vivid доступным для зарегистрированных редакторов OSM. Надеюсь, это позволит вам проверить импорт команды Facebook. Срок — примерно 4-8 недель. Объявим о результатах, пожалуй, в новой теме, а не в обсуждении импорта.

Так что ждём в мае третий глобальный слой спутниковых снимков для обрисовки, лучший из всех.

5 апреля   импорт   источники

Весь покрытый снимками

Это пустыня Симпсона в центре Австралии. Крупнейшая в мире песчано-дюнная пустыня с длиннейшими в мире дюнами. В ней нет городов, реки и озёра пересыхают, а летом туда даже запрещён въезд: нерадивые водители терялись. Нет ни единой причины покупать детальные космические снимки пустыни для публикации в интернете. Но Bing Maps купил. Можно обрисовывать дюны в редакторах OpenStreetMap.

Месяц назад Katpatuka посетовал в твитере на возраст снимков Bing. Прошло время, когда мы искали новые каждый квартал. Внезапно, ему ответил Рики Брандритт, старший менеджер Bing Maps: «мы обновляем наши снимки по всему миру, и через пару месяцев закончим».

Спустя пять дней в их блоге появилась заметка про 8,5 миллионов км² снимков для Бразилии. Если заглянуть в википедию, это ровно площадь страны. Второго февраля в новой заметке объявили об ещё 10 миллионах км²: свежими снимками покрыли всю площадь Австралии и Индии.

Как полагается большой компании, Bing Maps не раскрывает своих планов заранее. Но эти новости дают надежду каждому осмеру: вдруг их город или деревня попадут в следующее обновление? 17 миллионов км² России — неподъёмная площадь даже для российских заказчиков, но если Bing Maps хотят быть первым порталом с детальными снимками на всю площадь суши, им придётся её осилить. И лучше не думать о том, как часто они смогут всё это обновлять.

2017   источники

Англия ночью

Грант Слейтер вчера вечером добавил на свой сервер космоснимков кучу чёрных тайлов. Их предоставила организация UK Environment Agency, и ценность их в том, что местами — в Лондоне, Суиндоне, Бирмингеме, Питерборо — среди тьмы можно найти фонари и освещаемые ими дороги, здания, парковки и вокзалы. Можно оценить ночную загруженность дорог, можно замапить lit=yes/no с указанием цвета, а то и отметить каждый фонарь. Но прежде всего, это невероятно красиво.

Помимо поддержки серверов OpenStreetMap, Грант (известный вам как Firefishy) собирает карты и снимки больших территорий и добивается разрешения на их обклацывание. Он периодически обновляет тайлы открытых данных Ordnance Survey, а сейчас обговаривает условия открытия ортофотосъёмки Кейптауна разрешением 3-5 сантиметров на пиксель.

2016   источники

Открытая Москва

Московский департамент информационных технологий давно выкладывает открытые данные. Лицензия простая: CC-BY 3.0. Правда, даже она не совместима с нашими «условиями участия»: мы не можем заставить всех пользователей данных добавлять упоминание всех второстепенных источников. Поэтому нам нужно явное разрешение на использование в OpenStreetMap. Требование упоминания мы решаем через список всех источников данных в нашей вики.

По словам Кирилла Бестужева, первые запросы в департамент мы начали слать шесть лет назад. Максим Дубинин постоянно напоминает им про OSM, и поднял тему на последнем совете. Похоже, убедил: вчера в фейсбуке представитель ДИТ подтвердил (копия), что использовать их данные в OpenStreetMap разрешается (и даже приветствуется), и упоминания на странице источников достаточно.

У нашего вопроса был повод: публикация на портале открытых данных 147 тысяч контуров зданий Москвы с адресами. Это почти все дома, что видны на картографической подложке этого портала, но геометрии отличаются, и некоторые здания пропущены. Неточность геометрий и сомнительная актуальность (BushmanK пишет: «я нашёл здания, которые построены год назад, но также нашёл здания, которые снесены больше года назад») — обычная проблема геоданных на этом и других официальных порталах — не позволит импортировать недостающие здания в OpenStreetMap, но теперь мы можем расставить остаток адресов. Как только кто-нибудь напишет валидатор.

2015   источники

Пять лет грунтовок и ручьёв

В ноябре 2010 года в OpenStreetMap было 300 тысяч зарегистрированных пользователей, в восемь раз меньше, чем сейчас. Potlatch 2 заменил на главной первую версию редактора, и Geofabrik первым начал делать выгрузки в новом формате pbf. Стив Кост поступил на работу в Microsoft, и почти сразу нам сказали, что хватит терпеть устаревшие и редкие снимки Yahoo, готовьтесь к новому слою. Ровно пять лет назад нам официально разрешили обрисовывать снимки Bing.

Мы радовались и скролилли казавшиеся бесконечными поля снимков в редакторах. Мы обрисовывали границы снимков и собирали их в отношения. Сделали в вики огромную страницу со списков городов, где есть детальные снимки. Обнаружили смещения снимков, но со временем сделали их базу. Ещё обнаружили облака, много облаков. С 2012 года и эта проблема исчезла: начались ежеквартальные обновления. Сейчас слой бинга — главный источник геоданных в OSM и базовая подложка во всех редакторах. Мы полагаемся на него, как когда-то полагались на снимки Yahoo, и любое ухудшение покрытия воспринимается как удар по проекту.

Спасибо картографическому отделу Microsoft за такой подарок, и спасибо Стиву Косту, чьей несомненной — и, кажется, последней — заслугой стали переговоры об этих снимках. Хотел предложить отметить годовщину, обклацав что-нибудь по бингу, но вы и так делаете это каждый день.

2015   источники

До свидания, снимки

На форуме, в теме про подложку Bing, люди страдают от редких обновлений: удивительно, если вспомнить, когда обновлялись слои Mapbox или IRS в России (подсказка: никогда). А сегодня Ambush в чатике обратил внимание на более серьёзную неприятность: один из первых снимков, на Вырицу Ленинградской области, который мы обклацывали ещё в 2011 году, пропал! Как будто и не было его: только размытый ландсат на 12 масштабе. Но мы-то помним.

Постепенное исчезновение детальных снимков подтверждают SK53 и katpatuka, который мапит по всему миру. Проблему обсуждали в рассылке talk-gb@ в прошлом году. Ambush нашёл снимки на сайте бинга, но только в режиме аэрофото, каковыми они, очевидно, не являются. Что с этим делать — непонятно: конечно, на сайте можно нажать «обратная связь» и сообщить о проблеме, но по опыту, это никогда не работало. Дмитрий AMDmi3: «я два года писал по поводу замены снимка на новый с 90% облачностью, без каких-либо результатов». Помнится, три года назад мы призывали всех искать новые снимки в своей области, теперь пора проверять, где их удалили.

2015   источники

Complementary to «Skybox for Evil»

Год назад компания Skybox запустила в космос свой первый спутник ДЗЗ, SkySat-1. И почти сразу начала приём снимков разрешением около 0,9 м/пк. С компанией поначалу сотрудничала Mapbox, в блоге которой мы видели немало впечатляющих снимков, в том числе космические видеоролики. Первого августа компанию купила Google, и новости от Mapbox иссякли: казалось, всё, этот потенциальный источник снимков закрыт.

23 октября обе компании объявили о программе «Skybox for Good»: по запросам гуманитарных организаций они готовы делать актуальные снимки и публиковать их под лицензией CC-BY-SA 4.0. На карту уже добавлены около 20 снимков со ссылками на скачивание их в формате GeoTIFF. Несколько десятков запросов приняты в работу, включая снимки нефтяных платформ «Приразломная» в Печорском море и «West Alpha» в Карском.

Простой вопрос — можно ли обрисовывать эти снимки для OpenStreetMap — влечёт отрицательный ответ: с нашими условиями участия совместима только CC0, остальные лицензии требуют невыполнимого. Например, упоминание автора для CC-BY и производных не получится сделать для каждого использования карты OSM. Поэтому Mikel Maron, президент HOT, обратился напрямую к сотрудникам Google, и те уточнили: обклацывать снимки можно, при этом обязательно упомянуть Skybox в комментариях к пакетам правок или в теге source нарисованных объектов. Также в Google попросили подумать над механизмом динамической аттрибуции, когда в регионах появляются дополнительные копирайты, как на картах Google и Яндекса. И, кажется, предложили команде HOT запрашивать у Skybox снимки для своей работы.

2014   odbl   источники

Народные панорамы

В октябре в редакторе iD появились снимки: пункт «наложение фотографий» в меню подложек. Они всплывут, если навести курсор на оранжевые маркеры. Откуда берутся эти картинки и куда их загружать?

Мысль централизованно хранить снимки, собранные на картопрогулках, воплотилась ещё в 2009 году в проекте OpenStreetView. Это просто архив геопривязанных через EXIF фотографий, отображаемый на карте OpenLayers. Долгое время он был заброшен, сейчас какое-то движение вокруг сайта заметно, но он безнадёжно устарел. Обычная кладовка снимков — неблагодарная затея: мапперы возвращаются с прогулок с сотнями, иногда тысячами фотографий, ценность которых падает до нуля после обработки. Гигабайты снимков будут лежать мёртвым грузом, потому что улицы рассматривать куда удобнее через гугло- или яндекс-панорамы (последние нам можно использовать, а вот Street View — нежелательно).

В 2013 году появилась альтернатива. Шведско-американская команда программистов сделала Mapillary: приложения для смартфонов, которые отправляют снимки на сервер, плюс веб-сайт для их домашнего просмотра. В отличие от проприетарных решений, здесь многое возложено на пользователей: не только съёмка, но и контроль размытия лиц и номеров, поворот и перенос точек съёмки, редактирование цепочек. Mapillary не требует панорам (хотя с сентября умеет их делать и отображать): можно загружать даже серийные фотографии с GoPro. Это Street View и Panoramio в одном.

Лицензионный вопрос решили весной: сначала снимки были под лицензией «только для некоммерческого использования». Это очень хитрое условие, потому что не перечисляет запрещённые операции явно. 5 марта немецкий суд постановил, что запрет на некоммерческое использование фактически разрешает только личное пользование. 29 апреля мы убедили авторов Mapillary, что NC не нужен, и теперь снимки публикуются под CC-BY-SA 4.0, плюс специальный пункт в условиях явно разрешает использовать данные (снимки и треки) в OpenStreetMap.

Levente Juhasz сделал карту сравнения покрытий Street View и Mapillary. Последнее отстаёт: в центре Петербурга, например, на равномерную голубую сетку гуглопанорам накладываются корявые ошмётки красных маршрутов Mapillary. Московские осмеры, в частности, Артём Светлов, активно наполняют базу: по сути, для себя работаем. Авторы сервиса подтвердили, что в него можно сгружать тонны фотографий с картопрогулок. Они с энтузиазмом отнеслись и к загрузке записей с видеорегистраторов, вот только привязать последние к трекам нетривиально. Есть инструкции для GoPro и скрипт геотегирования — в обоих случаях понадобится разрезать видео на фотографии (и достаточно одной в секунду). Замечу, что kastellano с русского форума когда-то экспериментировал с привязкой роликов YouTube к трекам — но для картирования это бесполезно.

Плагин для JOSM пока никто не написал, но есть другой способ загрузить фотографии в редактор. Откройте эту страницу, найдите нужный район и нажмите «Download GPX». Если повезёт, полученный файл в редакторе покажет все фотографии, открывающиеся по клику. У меня не сработало, ждём программистов: теперь есть, откуда списывать взаимодействие с API.

2014   id   закон   источники

Счастья привалило

Полтора года назад MapBox договорились с DigitalGlobe о поставках снимков всего земного шара до 17-го масштаба. Тогда мы ещё не могли тронуть их слой, лишь помечтали о светлом будущем. Год назад MapBox обратил внимание на другие источники: Skybox и Landsat 8. Его база детальных снимков росла, и мы напомнили о разрешении — нам было позволено обрисовывать только 15-метровый Landsat. Ответа не было. А в августе Том Макрайт вовсе огорчил: мол, нельзя, ждите. Нет — так нет, вздохнули и забыли.

Сегодня Кевин Баллок, старший менеджер в DigitalGlobe, неожиданно заявил: «мы сотрудничаем с MapBox в предоставлении актуальных и релевантных снимков проекту OpenStreetMap, и с этого дня всё покрытие DigitalGlobe, доступное через слой MapBox Satellite, вы можете обводить в популярных редакторах OSM, таких как JOSM и iD». В полночь этот слой чисто формально обновили в библиотеке подложек JOSM: на Европу было обещано покрытие 19-го масштаба, и мы теперь готовы к этому.

Другими словами, с сегодняшнего дня всё, что есть у MapBox, доступно нам для обклацывания через тот же старый слой MapBox Satellite.

Первое, что замечаешь, — огромная площадь покрытия. Почти все места, что ждали от бинга, здесь отсняты. Они явно не врали, когда обещали весь мир на 17-м масштабе: непокрытый город найти непросто. Пикалёво, Остров, Красногородск — всё есть, и без облаков, бича Bing. Кроме обычных цветных снимков, часто натыкаешься на чёрно-белые, но не простые: на картинке вверху и слева, и справа летние снимки, но на правом деревья почти прозрачны и открывают дорожки в парках, а от облаков остаются лишь тени. AMDmi3 предположил, что это канал «near infrared», и для мапперов он — находка.

Недостатки есть: прежде всего, хотя детализация у Bing та же, у него есть оверзум, поэтому на 18-м масштабе обклацывать комфортно. Слой MapBox же при увеличении превращается в пикселизованное месиво (если не будете менять 17 на 19 в настройках TMS, иначе всё закроют крестики на чёрном фоне). Кое-где снимки наложились с ошибками: например, в Волхове и к западу от Лосева на 13-м масштабе видны снимки высокого разрешения, а на 14-м и ниже они пропадают под заглушкой Landsat. Алекс Барт из MapBox сказал, что они уже работают над системой заявок, куда можно будет пожаловаться на подобные недочёты (апдейт: вот она). Над аналогом bingcoverage они тоже думают.

Без сомнения, это крупнейший новый источник снимков с ноября 2010 года, когда Стив открыл для нас Bing. Многое пока неясно, кроме того, что обводить для OpenStreetMap можно. Кевин Баллок обещает рассказать про эти снимки подробнее на конференции State of the Map US, уже послезавтра.

2014   mapbox   источники
Ctrl + ↓ Ранее