84 заметки с тегом

источники РСС

Весь покрытый снимками

8 февраля, 11:21

Это пустыня Симпсона в центре Австралии. Крупнейшая в мире песчано-дюнная пустыня с длиннейшими в мире дюнами. В ней нет городов, реки и озёра пересыхают, а летом туда даже запрещён въезд: нерадивые водители терялись. Нет ни единой причины покупать детальные космические снимки пустыни для публикации в интернете. Но Bing Maps купил. Можно обрисовывать дюны в редакторах OpenStreetMap.

Месяц назад Katpatuka посетовал в твитере на возраст снимков Bing. Прошло время, когда мы искали новые каждый квартал. Внезапно, ему ответил Рики Брандритт, старший менеджер Bing Maps: «мы обновляем наши снимки по всему миру, и через пару месяцев закончим».

Спустя пять дней в их блоге появилась заметка про 8,5 миллионов км² снимков для Бразилии. Если заглянуть в википедию, это ровно площадь страны. Второго февраля в новой заметке объявили об ещё 10 миллионах км²: свежими снимками покрыли всю площадь Австралии и Индии.

Как полагается большой компании, Bing Maps не раскрывает своих планов заранее. Но эти новости дают надежду каждому осмеру: вдруг их город или деревня попадут в следующее обновление? 17 миллионов км² России — неподъёмная площадь даже для российских заказчиков, но если Bing Maps хотят быть первым порталом с детальными снимками на всю площадь суши, им придётся её осилить. И лучше не думать о том, как часто они смогут всё это обновлять.

Англия ночью

11 июля 2016, 10:10

Грант Слейтер вчера вечером добавил на свой сервер космоснимков кучу чёрных тайлов. Их предоставила организация UK Environment Agency, и ценность их в том, что местами — в Лондоне, Суиндоне, Бирмингеме, Питерборо — среди тьмы можно найти фонари и освещаемые ими дороги, здания, парковки и вокзалы. Можно оценить ночную загруженность дорог, можно замапить lit=yes/no с указанием цвета, а то и отметить каждый фонарь. Но прежде всего, это невероятно красиво.

Помимо поддержки серверов OpenStreetMap, Грант (известный вам как Firefishy) собирает карты и снимки больших территорий и добивается разрешения на их обклацывание. Он периодически обновляет тайлы открытых данных Ordnance Survey, а сейчас обговаривает условия открытия ортофотосъёмки Кейптауна разрешением 3-5 сантиметров на пиксель.

Открытая Москва

4 декабря 2015, 12:38

Московский департамент информационных технологий давно выкладывает открытые данные. Лицензия простая: CC-BY 3.0. Правда, даже она не совместима с нашими «условиями участия»: мы не можем заставить всех пользователей данных добавлять упоминание всех второстепенных источников. Поэтому нам нужно явное разрешение на использование в OpenStreetMap. Требование упоминания мы решаем через список всех источников данных в нашей вики.

По словам Кирилла Бестужева, первые запросы в департамент мы начали слать шесть лет назад. Максим Дубинин постоянно напоминает им про OSM, и поднял тему на последнем совете. Похоже, убедил: вчера в фейсбуке представитель ДИТ подтвердил (копия), что использовать их данные в OpenStreetMap разрешается (и даже приветствуется), и упоминания на странице источников достаточно.

У нашего вопроса был повод: публикация на портале открытых данных 147 тысяч контуров зданий Москвы с адресами. Это почти все дома, что видны на картографической подложке этого портала, но геометрии отличаются, и некоторые здания пропущены. Неточность геометрий и сомнительная актуальность (BushmanK пишет: «я нашёл здания, которые построены год назад, но также нашёл здания, которые снесены больше года назад») — обычная проблема геоданных на этом и других официальных порталах — не позволит импортировать недостающие здания в OpenStreetMap, но теперь мы можем расставить остаток адресов. Как только кто-нибудь напишет валидатор.

Пять лет грунтовок и ручьёв

30 ноября 2015, 19:56

В ноябре 2010 года в OpenStreetMap было 300 тысяч зарегистрированных пользователей, в восемь раз меньше, чем сейчас. Potlatch 2 заменил на главной первую версию редактора, и Geofabrik первым начал делать выгрузки в новом формате pbf. Стив Кост поступил на работу в Microsoft, и почти сразу нам сказали, что хватит терпеть устаревшие и редкие снимки Yahoo, готовьтесь к новому слою. Ровно пять лет назад нам официально разрешили обрисовывать снимки Bing.

Мы радовались и скролилли казавшиеся бесконечными поля снимков в редакторах. Мы обрисовывали границы снимков и собирали их в отношения. Сделали в вики огромную страницу со списков городов, где есть детальные снимки. Обнаружили смещения снимков, но со временем сделали их базу. Ещё обнаружили облака, много облаков. С 2012 года и эта проблема исчезла: начались ежеквартальные обновления. Сейчас слой бинга — главный источник геоданных в OSM и базовая подложка во всех редакторах. Мы полагаемся на него, как когда-то полагались на снимки Yahoo, и любое ухудшение покрытия воспринимается как удар по проекту.

Спасибо картографическому отделу Microsoft за такой подарок, и спасибо Стиву Косту, чьей несомненной — и, кажется, последней — заслугой стали переговоры об этих снимках. Хотел предложить отметить годовщину, обклацав что-нибудь по бингу, но вы и так делаете это каждый день.

До свидания, снимки

16 ноября 2015, 17:46

На форуме, в теме про подложку Bing, люди страдают от редких обновлений: удивительно, если вспомнить, когда обновлялись слои Mapbox или IRS в России (подсказка: никогда). А сегодня Ambush в чатике обратил внимание на более серьёзную неприятность: один из первых снимков, на Вырицу Ленинградской области, который мы обклацывали ещё в 2011 году, пропал! Как будто и не было его: только размытый ландсат на 12 масштабе. Но мы-то помним.

Постепенное исчезновение детальных снимков подтверждают SK53 и katpatuka, который мапит по всему миру. Проблему обсуждали в рассылке talk-gb@ в прошлом году. Ambush нашёл снимки на сайте бинга, но только в режиме аэрофото, каковыми они, очевидно, не являются. Что с этим делать — непонятно: конечно, на сайте можно нажать «обратная связь» и сообщить о проблеме, но по опыту, это никогда не работало. Дмитрий AMDmi3: «я два года писал по поводу замены снимка на новый с 90% облачностью, без каких-либо результатов». Помнится, три года назад мы призывали всех искать новые снимки в своей области, теперь пора проверять, где их удалили.

Complementary to «Skybox for Evil»

6 ноября 2014, 14:42

Год назад компания Skybox запустила в космос свой первый спутник ДЗЗ, SkySat-1. И почти сразу начала приём снимков разрешением около 0,9 м/пк. С компанией поначалу сотрудничала Mapbox, в блоге которой мы видели немало впечатляющих снимков, в том числе космические видеоролики. Первого августа компанию купила Google, и новости от Mapbox иссякли: казалось, всё, этот потенциальный источник снимков закрыт.

23 октября обе компании объявили о программе «Skybox for Good»: по запросам гуманитарных организаций они готовы делать актуальные снимки и публиковать их под лицензией CC-BY-SA 4.0. На карту уже добавлены около 20 снимков со ссылками на скачивание их в формате GeoTIFF. Несколько десятков запросов приняты в работу, включая снимки нефтяных платформ «Приразломная» в Печорском море и «West Alpha» в Карском.

Простой вопрос — можно ли обрисовывать эти снимки для OpenStreetMap — влечёт отрицательный ответ: с нашими условиями участия совместима только CC0, остальные лицензии требуют невыполнимого. Например, упоминание автора для CC-BY и производных не получится сделать для каждого использования карты OSM. Поэтому Mikel Maron, президент HOT, обратился напрямую к сотрудникам Google, и те уточнили: обклацывать снимки можно, при этом обязательно упомянуть Skybox в комментариях к пакетам правок или в теге source нарисованных объектов. Также в Google попросили подумать над механизмом динамической аттрибуции, когда в регионах появляются дополнительные копирайты, как на картах Google и Яндекса. И, кажется, предложили команде HOT запрашивать у Skybox снимки для своей работы.

Народные панорамы

3 ноября 2014, 17:05

В октябре в редакторе iD появились снимки: пункт «наложение фотографий» в меню подложек. Они всплывут, если навести курсор на оранжевые маркеры. Откуда берутся эти картинки и куда их загружать?

Мысль централизованно хранить снимки, собранные на картопрогулках, воплотилась ещё в 2009 году в проекте OpenStreetView. Это просто архив геопривязанных через EXIF фотографий, отображаемый на карте OpenLayers. Долгое время он был заброшен, сейчас какое-то движение вокруг сайта заметно, но он безнадёжно устарел. Обычная кладовка снимков — неблагодарная затея: мапперы возвращаются с прогулок с сотнями, иногда тысячами фотографий, ценность которых падает до нуля после обработки. Гигабайты снимков будут лежать мёртвым грузом, потому что улицы рассматривать куда удобнее через гугло- или яндекс-панорамы (последние нам можно использовать, а вот Street View — нежелательно).

В 2013 году появилась альтернатива. Шведско-американская команда программистов сделала Mapillary: приложения для смартфонов, которые отправляют снимки на сервер, плюс веб-сайт для их домашнего просмотра. В отличие от проприетарных решений, здесь многое возложено на пользователей: не только съёмка, но и контроль размытия лиц и номеров, поворот и перенос точек съёмки, редактирование цепочек. Mapillary не требует панорам (хотя с сентября умеет их делать и отображать): можно загружать даже серийные фотографии с GoPro. Это Street View и Panoramio в одном.

Лицензионный вопрос решили весной: сначала снимки были под лицензией «только для некоммерческого использования». Это очень хитрое условие, потому что не перечисляет запрещённые операции явно. 5 марта немецкий суд постановил, что запрет на некоммерческое использование фактически разрешает только личное пользование. 29 апреля мы убедили авторов Mapillary, что NC не нужен, и теперь снимки публикуются под CC-BY-SA 4.0, плюс специальный пункт в условиях явно разрешает использовать данные (снимки и треки) в OpenStreetMap.

Levente Juhasz сделал карту сравнения покрытий Street View и Mapillary. Последнее отстаёт: в центре Петербурга, например, на равномерную голубую сетку гуглопанорам накладываются корявые ошмётки красных маршрутов Mapillary. Московские осмеры, в частности, Артём Светлов, активно наполняют базу: по сути, для себя работаем. Авторы сервиса подтвердили, что в него можно сгружать тонны фотографий с картопрогулок. Они с энтузиазмом отнеслись и к загрузке записей с видеорегистраторов, вот только привязать последние к трекам нетривиально. Есть инструкции для GoPro и скрипт геотегирования — в обоих случаях понадобится разрезать видео на фотографии (и достаточно одной в секунду). Замечу, что kastellano с русского форума когда-то экспериментировал с привязкой роликов YouTube к трекам — но для картирования это бесполезно.

Плагин для JOSM пока никто не написал, но есть другой способ загрузить фотографии в редактор. Откройте эту страницу, найдите нужный район и нажмите «Download GPX». Если повезёт, полученный файл в редакторе покажет все фотографии, открывающиеся по клику. У меня не сработало, ждём программистов: теперь есть, откуда списывать взаимодействие с API.

Счастья привалило

10 апреля 2014, 23:11

Полтора года назад MapBox договорились с DigitalGlobe о поставках снимков всего земного шара до 17-го масштаба. Тогда мы ещё не могли тронуть их слой, лишь помечтали о светлом будущем. Год назад MapBox обратил внимание на другие источники: Skybox и Landsat 8. Его база детальных снимков росла, и мы напомнили о разрешении — нам было позволено обрисовывать только 15-метровый Landsat. Ответа не было. А в августе Том Макрайт вовсе огорчил: мол, нельзя, ждите. Нет — так нет, вздохнули и забыли.

Сегодня Кевин Баллок, старший менеджер в DigitalGlobe, неожиданно заявил: «мы сотрудничаем с MapBox в предоставлении актуальных и релевантных снимков проекту OpenStreetMap, и с этого дня всё покрытие DigitalGlobe, доступное через слой MapBox Satellite, вы можете обводить в популярных редакторах OSM, таких как JOSM и iD». В полночь этот слой чисто формально обновили в библиотеке подложек JOSM: на Европу было обещано покрытие 19-го масштаба, и мы теперь готовы к этому.

Другими словами, с сегодняшнего дня всё, что есть у MapBox, доступно нам для обклацывания через тот же старый слой MapBox Satellite.

Первое, что замечаешь, — огромная площадь покрытия. Почти все места, что ждали от бинга, здесь отсняты. Они явно не врали, когда обещали весь мир на 17-м масштабе: непокрытый город найти непросто. Пикалёво, Остров, Красногородск — всё есть, и без облаков, бича Bing. Кроме обычных цветных снимков, часто натыкаешься на чёрно-белые, но не простые: на картинке вверху и слева, и справа летние снимки, но на правом деревья почти прозрачны и открывают дорожки в парках, а от облаков остаются лишь тени. AMDmi3 предположил, что это канал «near infrared», и для мапперов он — находка.

Недостатки есть: прежде всего, хотя детализация у Bing та же, у него есть оверзум, поэтому на 18-м масштабе обклацывать комфортно. Слой MapBox же при увеличении превращается в пикселизованное месиво (если не будете менять 17 на 19 в настройках TMS, иначе всё закроют крестики на чёрном фоне). Кое-где снимки наложились с ошибками: например, в Волхове и к западу от Лосева на 13-м масштабе видны снимки высокого разрешения, а на 14-м и ниже они пропадают под заглушкой Landsat. Алекс Барт из MapBox сказал, что они уже работают над системой заявок, куда можно будет пожаловаться на подобные недочёты (апдейт: вот она). Над аналогом bingcoverage они тоже думают.

Без сомнения, это крупнейший новый источник снимков с ноября 2010 года, когда Стив открыл для нас Bing. Многое пока неясно, кроме того, что обводить для OpenStreetMap можно. Кевин Баллок обещает рассказать про эти снимки подробнее на конференции State of the Map US, уже послезавтра.

Область под присмотром

21 марта 2014, 9:11

В декабре 2012 года я опубликовал «Вахтёра» для слежки за рисующими по непонятным снимкам, и быстро заметил, как в моей Псковской области орудует команда пользователей с однотипными именами, начинающимися на reg60. «Наверное, кто-то из администрации», — подумал я, и это подтвердилось двумя месяцами позже, когда эти люди показались на форуме. Источники они тоже объяснили: «...по аэрофотоснимкам Псковской области, разрешено областной администрацией, съемка проводилась в 2010 году по этому контракту».

Как водится, только у нашего сообщества появилась точка приложения силы, на новичков посыпались упрёки в неправильном рисовании почти всего. Административные границы двоились и троились, леса появлялись и исчезали, со смещениями тоже был бардак. Любой вопрос по выбору тега приводил к многостраничным спорам. Плохо сформулированные мысли почему-то провоцировали агрессию, и в своём закрытом форуме картографы reg60 удивлялись такому поведению и склонялись уйти и не отсвечивать — что в июне и сделали. На них и так давило начальство, заставляя растить статистику точек; бороться ещё и с сообществом желания не было.

Работа шла, область покрывалась дорогами, домиками, лесами и полями. Многие подневольные мапперы оставили это занятие, другие — в основном, из южных районов, — ушли в дело с головой, достигнув районных границ и картируя «вглубь». Я с тревогой смотрел на отчёты «Вахтёра»: карта — хорошо, но источники подозрительны, а браваде «мы всё проверили на местности» пришёл конец. Дороги, где мне на джипе пришлось развернуться, новые участники продлили, поскольку они то ли просматривались на снимках, то ли были нарисованы на СТП. Псковская область коварна: проложив маршрут по коммерческой карте, нельзя быть уверенным, что сможешь его придерживаться. Теперь, возможно, то же касается и OSM.

Мапперам нельзя замыкаться, иначе получается школьничество. Мы с самого начала искали встречи с участниками reg60. Сначала предложили услуги в феврале, затем в октябре denisPskov порадовал перспективой приглашения — увы, сорвавшегося. И спустя год после первого контакта, примерно месяц назад, мне позвонил Антон и сказал готовиться. 19 марта я, наконец, посетил псковскую областную администрацию.

Всего было около пятнадцати человек, половина из них — на экране телевизора. Область большая, ради пары часов тащить всех в центр не стали. Неожиданно, большинство участников сравнительно молоды, 30±5 лет на вид. Главный начальник управления информационных технологий («над ним — только губернатор», — благоговейно шепнули мне), затеявший всё это картирование, на удивление компетентен, и на большую часть вопросов мог бы ответить сам. Я начал с короткой презентации о двух главных принципах OpenStreetMap (truth on the ground и лицензионная чистота), напомнил о важности сообщества, и мы перешли к вопросам.

Общих вопросов, на которые весело отвечать, было немного: так, человек из Великих Лук допросил с пристрастием, не работаем ли мы все на какого-то неизвестного дядю, где находятся серверы, и нельзя ли всё перенести на русскую землю, во избежание неожиданностей. В основном, спрашивали про нюансы JOSM, в котором работают, и тегирования. Административные границы и природа всё ещё представляют проблему: местами бардак, где-то непонятно, как рисовать. Люди порадовались валидаторам границ, но сайт Scondo, говорят, давно не обновлялся. Показал building_tools и базу смещений. Да, последнюю можно использовать для слоёв из интранета, и во время демонстрации я случайно обнаружил несколько смещений их подложки, внесённых одним из участников reg60.

Первичная цель — обеспечить картой скорую помощь. До сих пор машины ездили по белому листу, теперь даже Усвятах есть карта. Руководитель чётко перечислил приоритеты: сначала улично-дорожная сеть и общественные здания, затем — все остальные дома с адресами. Правда, адреса брать неоткуда: напомнил им об административном ресурсе, и что можно затребовать адресные планы с муниципалитетов, возможно, составив базу на всю область. Когда большая часть области будет прилично нарисована, данные задействуют для всего остального — полагаю, не только как подложку для маркеров. Очевидно, OpenStreetMap в Псковской области становится главной базовой картой, оттеснив коммерческие решения.

Картографы обводят аэрофотоснимки разрешением около полуметра, покрывающие большую часть районов. И руководитель не против поделиться ими с сообществом. Вот только проблема: массив снимков весит от полутора терабайт, и сервер с WMS, по характеристикам подобный тем, что в Рамблере, уже от десятка человек начинает задыхаться. Вероятно, это получится решить через TMS или понижением качества — в управлении обещали подумать. Также они готовы выдать ГЛОНАСС-треки от всех машин скорой помощи в области. Польза очевидна: привязка всех населённых пунктов станет значительно точнее. Теперь главное — напоминать им периодически.

Где-то с 2012 года у меня теплится мысль провести картовстречу для псковичей. Не в Пскове — он слишком хорошо отрисован, — а где-нибудь поблизости. То есть, в Острове. Участник reg60_ostrov не спешит его обклацывать, а город третий по величине в области, так что на местности там будет, что посмотреть. Может, этим летом...

И вновь нас посетил

1 декабря 2013, 22:04

Бинг очень давно, ещё весной, забросил своё приложение с картой обновлений. Поэтому приходится искать новые снимки наугад, по графику, установленному прошлым годом. В мае и августе мы нашли с гулькин нос, поэтому решили, что Бинг нас оставил, сконцентрировавшись на Африке и Европе. Но сегодня пошли радостные сообщения в форуме: у нас снова снимкопад! Так, в Псковской области нашлись новые сотни квадратных километров детального покрытия. Инструмент проверки нынче работает лишь наполовину: почему-то не озеленяет свежие квадраты. Но едва ли это омрачит. Удачных поисков!

Ctrl +  Ранее