ШТОСМ: заметки с тегом няк

Народные картографы берут лупу

Илья Зверев — Mon, 05 Jul 2021 22:00:05 +0400

У карты OpenStreetMap нет масштаба. Другими словами, одна и та же база геоданных используется для обзорки всей планеты и для схемы прохода между сараем и туалетом. Когда мы рисуем залив или люк на дороге, мы не задумываемся, на каких масштабах и как их будут отображать. Дело редакторов — внести максимум данных, до уровня, когда не приходит в голову мысль остановиться. Дай осмерам волю — они лес замапят как набор деревьев, с грибами и ягодами между ними.

Отсутствие рамок неудобно пользователям данных. Оно означает, что OpenStreetMap категорически нельзя использовать без предварительной обработки. Для любой цели — поиска, прокладки маршрутов, отображения, — данные нужно отфильтровать: например, убрать слишком мелкие здания и боковые пути железных дорог. Затем нужно упрощать геометрию: лес в парках и мелкие реки часто обклацаны с сантиметровой точностью. Чтобы сделать карту, на которую не больно смотреть, без подсказок опытного осмера не обойтись.

Карта Яндекса не такая. В неё нельзя всматриваться бесконечно: рано или поздно пустоты затмевают детали. У этой карты есть расчётный масштаб: примерно 250 метров в сантиметре (если вы помните детализацию карт Генштаба). Для всех целей Яндексу этого достаточно. Именно поэтому народные картографы должны были страдать. Правилами и модераторами им били по рукам, когда они рисовали слишком мелкие детали.

Вся история изменений правил — это история понижения масштаба. 2016: у домов появились подъезды. 2017: разрешили рисовать гаражи-ракушки и дороги в два ребра. 2018: можно рисовать трёхмерные модели зданий, указать плохое состояние дороги и доступность проезда для велосипедистов. 2019: разрешили соединять графы пешеходных дорог, рисовать парковочные карманы и схемы помещений. 2020: площадки отдыха вдоль дорог и сезонные заведения и дороги.

Нынешний год пускает всю диктатуру масштаба яндекс-карт под откос. Народные картографы одновременно ликуют и не понимают, где им остановиться. Сначала в марте на подъездах разрешили расставлять номера квартир. Казалось бы, осмеры делали это первыми. Но, во-первых, у редактора яндекса форма ввода удобнее, и сразу предлагает заполнить квартиры по этажам. А во-вторых, всего за две недели их редакторы ввели в России столько же подъездов с квартирами, сколько в OSM — за всё время.

Теперь пришли сразу две поправки, разрешающие рисовать скамейки и «декоративные» заборы. Это невиданная степень свободы для народных картографов. В полутора сотнях комментариев они пробуют стены детализации на прочность: «отбойники можно?», «а заборы между участками в частном секторе?», «скамейки со спинкой или без?», «а скамейки в торговых центрах?», «урны скоро будем?», «а каждая скамейка считается за отдельную правку?» Сотрудники яндекса едва успевают отвечать отказами — но волна новых микромапперов рискует смыть их критерии полезности и порядок на картах.

Возможность нарисовать что угодно отличает OpenStreetMap от всех остальных карт. Мы слышали про истории успеха с пожарными гидрантами, отдельностоящими деревьями и знаками на магистралях. Этой карте нет альтернатив по скорости обновления и глубине детализации. Она была первой в этом роде, и поэтому все, кому важны данные, а не просто посмотреть, взяли OSM в оборот.

Но когда твой проект обгоняет все другие геоинформационные системы на двадцать лет, это не значит, что все другие отомрут. Как мы видим на примере яндекс-карт, это лишь означает, что через двадцать лет тебя догонят и обгонят. Преимущества открытого проекта тают с каждым годом. Остаётся только эта самая открытость — но и она приносит больше проблем, чем пользы. Что нужно сделать для OpenStreetMap, чтобы на вопрос, где регистрироваться, не отвечать «ну эээ...»?

Агентам справочника вход воспрещён

Илья Зверев — Tue, 09 Oct 2018 16:29:27 +0400

Анна из «народной карты» расписала в их блоге, откуда берутся заведения на картах яндекса. В компании ведут два набора данных: «справочник» и «народная карта». Копирование данных налажено пока только из карты, скоро будет и обратное. И этот поток автоматических правок будет куда сильнее: ведь доля пользовательских данных в наполнении справочника очень мала.

Здесь всплывают две темы: постепенное замещение картографов-любителей роботами на «народных картах» под безграничное терпение первых и приоритеты в картографировании заведений. Обе темы подчёркивают радикальное отличие и «народных карт», и просто карт Яндекса от OpenStreetMap во всех своих ипостасях.

Приоритеты

В заметке перечислены восемь источников данных о заведениях, которые склеиваются и доступны из поиска на карте: правки народных картографов, сообщения из разных видов обратной связи, информация от организаций и от оплачиваемых сборщиков данных. Сколько из них есть в OSM? Только два: правки осмеров и заметки на сайте. Хотя, честно говоря, заметками владельцы заведений не пользуются, потому что их почти невозможно найти.

Где всё остальное? Ладно, у нас нет службы поддержки и сотрудников, обзванивающих организации. Но многие компании специально платят, чтобы их филиалы наносили на карты — и мы осознанно сопротивляемся этим «импортам». Что хорошо для всех популярных карт, оказывается плохо для OpenStreetMap. Как же так?

Дело в целевой аудитории. Кто адресат нашей карты, для кого мы рисуем? На сайте и в вики про это ни слова. «OSM предоставляет данные тысячам сайтов» — ничего не значащее утверждение, этот блог тоже предоставляет. А если OSMF и администраторы сайта отказываются ограничить ЦА карты, за них это сделают сами картографы. Самым очевидным способом.

OpenStreetMap — это карта для картографов под открытой лицензией. Два тезиса, которые определяют все решения в проекте. Открытая лицензия регулирует отношения со внешним миром: запрет на нелегальные данные и обклацывание гугля, публикацию планеты под ODbL, экосистему открытого кода. А первый тезис, что целевая аудитория — это картографы, регулирует все вопросы внутри сообщества. Прежде всего, конечно, тегирование, требования к редакторам и выбор допустимых слоёв для импортирования.

Самое неочевидное, что следует из ориентированности на редакторов карты, — это ограничение на размер данных. Когда их становится слишком много (например, после массового импорта «зелёнки»), сообщество бунтует и заводит reverter. OSM состоит из одного слоя, который непросто разделить по типам объектов, поэтому один перегруженный слой затрудняет редактирование остальных. Нарисовали схему помещений — контур здания теперь не улучшить. Импортировали Corine — проще закрыть редактор, чем обозначить вырубку. Обозначили каждый лоток на рынке — никто не будет обновлять информацию, да и проходы трогать побоятся.

Поэтому участники неодобрительно смотрят на импорты заведений. С одной стороны, пользователям карты хорошо: можно найти в любимом Maps.Me или OsmAnd заправку по пути и кафе у гостиницы. С другой, мы рисуем OSM не для пользователей: сотни тысяч, если не миллионы, импортируемых точек нужно проверять, поддерживать, обновлять. Никто этим не будет заниматься, а потому они не должны быть частью карты. Карта — для того, что интересно рисовать и несложно поддерживать.

Роботы

Задачу поддержки заведений из сторонних источников решить несложно: периодически проверять и импортировать заново. От картографов ничего не понадобится, только верить и не мешать. Разумеется, правки импортированных данных сохранятся после обновления — или нет, смотря сколько времени прошло. В перспективе это можно распространить на «зелёнку» и адреса.

Получится, что за существенную часть данных OpenStreetMap — сотни миллионов объектов — будут отвечать роботы, пусть и курируемые людьми. Медленно процесс поддержки данных OSM будет мигрировать к модели википедии, когда в истории правок любой статьи минимум 10% правок идут от роботов, следящих за порядком. Потому что если можно импортировать, то почему нельзя автоматически amenity=sauna заменять на leisure=sauna? Логично же это поручить роботу и спать спокойно, зная, что база консистентна?

В народных картах Яндекса это само собой разумеется. Там автоматизировано всё: импортирование данных в новых странах, сдвиг объектов при обновлении снимков, обновление данных из справочника. Роботам помогают сотрудники на зарплате и участники «Толоки», которых всё больше. Когда нужна актуальная и полная карта, полагаться на добровольных картографов-любителей недостаточно — это очевидно примерно всем. Поэтому народная карта мигрирует влево по шкале свободы картографии, усиливая контроль над содержимым карты.

Активным участникам сообщества НЯК это, конечно, не нравится. Данные от людей на зарплате предсказуемо хуже работы любителей — по всем показателям, кроме тех, что входят в ТЗ. «Теперь я не слежу за порядком. Спасибо яндексу за это», — хлопают дверью модераторы. Да и под заметкой про интеграцию справочника немало недоумённых комментариев. Это всё люди, которые не успели перестроиться три года назад и не поняли, что «народная карта» больше не самостоятельная песочница, где можно в одиночку нарисовать и поддерживать город, а инструмент обратной связи к картам Яндекса. Народные картографы теперь не столько правят карту, сколько корректируют импортированное и нарисованное профессионалами.

Очевидно, что автоматические правки противоречат целям сообщества OpenStreetMap: иметь карту, которую весело редактировать. Картограф с опытом всегда найдёт, какую претензию предъявить оператору любого скрипта. Данные плохо привязаны. Теги неправильные, но замена неравнозначна. Формат телефонного номера не тот. Это дискриминация против малого бизнеса. Хорошо, но проверяй каждый объект вручную. Этим атрибутам не место в OSM. Посмотрите на TIGER, хотите повторения? Любой импорт или автоматическая правка должны пройти через болото уныния, и редкий энтузиаст доползёт до его середины.

Мы говорим «карту может поправить каждый», но мы же и говорим «карта для любителей, а не корпораций». Мы ратуем за карту без дискриминации, но в то же время рисуем таблички про вход воспрещён. Открытый проект, но пожалуйста, не надо. Решить это противоречие может сильная структура, наделённая правом окончательного голоса. Но в нынешней парадигме «Совет + рабочие группы» такая структура невозможна. Тут либо делать альтернативный проект, либо повторить то, что Стив Кост сделал четырнадцать лет назад: выкручиваться малыми силами, находя новые смыслы в существующих структурах. И не сказать, что это невозможно. Продолжение.

2010—2015

Илья Зверев — Thu, 09 Apr 2015 13:05:01 +0400

Вчера Народным картам Яндекса исполнилось пять лет. В честь праздника сотрудники компании радикально поменяли интерфейс и удалили большую часть правок пользователей.

Бета-версию нового интерфейса карт Яндекс показал осенью 2013 года. Она непривычная, но современная и неожиданно простая в изучении. Всё как у других: вместо боковой панели — россыпь кнопок и полей по периметру карты во весь экран. Вчера бета-версия стала основной. Николай «petrovnn» обратил внимание на аналогичную смену дизайна НЯК, а Евгений «Hind» положительно сравнил скорость его работы с iD. Отличный подарок, ура. Но почему в блоге яндекса пишут «сама Народная карта превращается в редактор Яндекс.Карт», и почему пользователи воют? Дело в новой модели данных и в глобальном импорте.

Новая модель данных выглядит серьёзно. Во-первых, в ней ничего лишнего: никаких дополнительных полей, вроде звёзд для гостиниц, минимум типов. И интерфейс не предусматривает излишеств. Интересно решена проблема множественных адресов: теперь только адресные точки. Во-вторых, фокус сместился на геометрию. Тут получилось очень круто, и тем способом, который я постоянно советую сделать для OSM: всё в отношениях. То есть, редактор Яндекса с аудиторией в десятки миллионов делает то, чего боятся все до единого наши редакторы: удобная правка отношений на всём. Все полигоны — мультиполигоны, и все линии — мультилинии. Например, улицы. Виртуальные характеристики, вроде названий, на отношении, кусочки с покрытиями и статусами — на геометрии. Про редактирование мультиполигонов отлично написал Павел Гущин. Это гениально, и было реально сделать в осме сто лет назад, но мы же гики и боимся отношений.

Редактором, кстати, невыносимое наслаждение пользоваться. Он быстр так, как не снилось никому в мапбоксе, все элементы достаточно крупные (кроме POI на карте, но это, наверное, починят), точки ставятся и двигаются, как будто в DOM кроме них ничего нет, анимированные панельки выпадают, сервисные кнопки, вроде отключения лишних слоёв, делают вид, что их нет, и всё внимание на редактировании карты. Конечно, новые источники данных, как треки, не появились, со смещениям снимков тот же бардак, но всё, что было в старом НЯКе, стало в тысячу раз удобнее и понятнее.

Новый редактор — больше не народные карты. Это редактор карт Яндекса. Как в гугле. На основных картах теперь рисуются именно эти данные. Модерация, понятно, стала жёстче: никакого автоподтверждения за три дня, проверяют каждую правку. То есть, как и в гугле, это теперь не редактор, а продвинутая система сообщения о неточностях — с той разницей, что там наёмные индусы, а в Яндексе — накопленная за пять лет армия преданных модераторов, умеющая разобраться даже в сложных правках. Проникновение полное: и прокладка маршрута (есть редактор запретов поворотов), и даже пробки. То есть, задача, к которой в осме все боятся подступиться — пробки по ежедневно редактируемому графу — здесь решена так, что никто даже не успел удивиться.

Так вот, старый НЯК. Иван «luiswoo» на форуме правильно замечает, что это нужно было сделать с самого начала. Но за пять лет проект накопил адовое количество данных: там 380 тысяч пользователей, это как в OSM во всём мире. Конечно, без офлайна объектов они ввели поменьше, но это ж НЯК. Помните, как у нас фигачат странные люди, которые при вопросе об источниках бесятся и хлопают дверью? Так вот, у Яндекса все такие увлечённые. Только несовершенство редактора не позволяет им покрыть планету данными ровным слоем. И вот, новый НЯК — это совсем другой проект с другой базой данных. В него сливаются данные как из народной, так и из основной карты, и приоритет, конечно, у последней. В новой базе нет привязки объектов к фотографиям и нет ни одного комментария к старым объектам. Дополнительных атрибутов и описаний тоже нет. Но основное-то сохранилось?

Короткое изучение пары районов обнаружило, что зачастую — например, в Москве — данные НЯК просто не попали. Все пешеходные дорожки в парках — ёк. Кропотливо прорисованные контуры домов пропали. Плавные линии дорог на перекрёстках теперь под 90°. Аккуратные острова в речках смялись и съехали. Если включить слой старых карт в редакторе и сравнить, руки опускаются. Именно поэтому пользователи в комментариях блога хватаются за голову и уходят из проекта навсегда. Задача слияния данных непроста, и сотрудники Яндекса взялись за неё так же, как за всё остальное: втихаря. Никто не знал, например, что правки с января 2015 года имеют реальный шанс не попасть на новую карту. Никто не смог обвести и выслать компании свои регионы, где поправлены адреса и проходимость дорог. В ближайшие пару месяцев всё общение в клубе будет состоять из «вон тут ещё забыли импортировать». А потом будет поздно: «сервис [старых народных карт] будет доступен минимум несколько месяцев, а дальше будем смотреть по обстоятельствам».

Новые карты Яндекса очень затруднят привлечение новых участников к редактированию OpenStreetMap. Если бы не известный пункт в их соглашении, про использование данных только через API Яндекса, объяснить целесообразность участия в нашем проекте было бы невозможно. Да и сейчас — ну кому какая разница, чьими становятся данные, если яндексом пользуются все, а осмом — только три хромых программиста и доктор Айболит? От глобального доминирования народные карты отделяют только перевод интерфейса на все языки (а инфраструктура для мультиязычных названий уже есть) и отсутствие мобильного редактора. Когда это будет — проект победит карты гугля и станет головной болью уже всего осмерского сообщества, а не только русскоязычной его части. При нынешней модели управления OSM мы не можем ни улучшить модель данных, ни сделать качественный редактор. Единственное, в чём мы великолепны, — это сообщество. Яндекс раз за разом проваливает работу с сообществом, по-русски считая, что уйдут эти — придут другие. К сожалению, этот подход работает. Но как иногда хочется, чтобы OpenStreetMap показал своё превосходство не потенциально через пятьдесят лет, а прямо сейчас.

См. также: запись OSM радио с сотрудниками и участником НЯК

Закат народных яндекс-карт

Илья Зверев — Sun, 06 Apr 2014 11:35:54 +0400

Народные карты — проприетарный продукт, на который могут повлиять только сотрудники Яндекса. Поэтому все записи в клубе проекта делятся на два типа: просьбы с вопросами и заявления. Подписавшись на ленту клуба, даже без вникания в тексты можно получить впечатление о скорости развития проекта: когда несколько месяцев читаешь одни только вопросы про категории (от просьб участников НЯК отучили давным-давно), становится грустно. Послезавтра у проекта четвёртый день рождения, и я задался целью посчитать, как давно сотрудники Яндекса баловали участников. Для этого я прочитал почти две тысячи сообщений, выделил из них заявления сотрудников, рассортировал их и построил такую диаграмму (увеличивается по клику):

7-8 апреля 2010 года в клубе опубликовали 11 организационных сообщений, включая FAQ и копилки баг- и фичреквестов. В течение полутора лет сотрудники появлялись в клубе, чтобы сообщить о новых возможностях: так, 16 декабря появились точечные объекты, а в большом обновлении 26 апреля 2011 года 11 типов расширили в 152 категории объектов. Следующее большое обновление, 15 декабря, коснулось картостилей и интерфейса. Последнюю значительную новость опубликовали 5 марта 2012 года, больше двух лет назад: тогда слой НЯК добавили в Яндекс.Карты, сделав «автопроваливание» в местах, где покрытия собственных карт не хватало.

Разумеется, сотрудники не отмалчиваются в промежутках, а комментируют почти каждое сообщение — конечно, в рамках полномочий. Другими словами, в отсутствие программистов с 2012 года, конструктивно получается отвечать только на вопросы по рисованию и категориям, остальное — «мы работаем над этим». Для поддержки духа сообщества сотрудники придумывают не связанные с кодом занятия: постоянно улучшают текст помощи и правил рисования, выкладывают статистику, собирают ссылки из СМИ и других блогов НЯК. Часть этих сообщений помогает Народным картам как проекту: например, те же правила рисования, от отсутствия которых в сообществе OpenStreetMap царит анархия. Увы, с 2013 года таких новостей было всего две: недавно, в феврале, уточнили правила рисования дорог, да выложили четыре обучающих ролика 24 мая прошлого года.

Видимость жизни обеспечивается регулярными сообщениями двух типов: пополнением покрытия спутниковыми снимками (раз в две недели, в отличие от наших трёх месяцев) и, с 9 апреля 2013 года, новыми печатными картами небольших городов. Две недели работы программиста и дизайнера, или несколько лет — коммьюнити-менеджера, плюс ощущение жизни в сообществе: выбор очевиден. У участников появилась цель: нарисовать свои города на «отлично», чтобы сотрудники поблагодарили их склеенными тайлами, подписанными именами картографов.

Честным было бы (при невозможности назначить хотя бы пару программистов) со словами «да гори оно всё огнём» закрыть проект. Но при 300 тысяч пользователей, 10 тысяч из которых общаются в клубе, это непросто: Яндекс об имидже пока заботится больше Google. Другие варианты развлечения сообщества четвёртый год подсказывают сами участники: конкурсы, подарки, встречи, пиар. Полагаю, всё это требует невозможных в компании согласований. Что произойдёт с сообществом, если сотрудники продолжат бездействовать? Ничего: люди приходят в проект не потому, что он живой, а потому что это Яндекс. Как и с Google Map Maker, причастность к великому, к картам, которыми пользуется каждый, перевешивает и закрытую лицензию, и чересчур рьяных модераторов, и депрессивное сообщество.

В клубе дважды нанимали на должность коммьюнити-менеджера НЯК: человека, который для участников будет «лицом проекта». С 2 ноября 2010 года эту роль блистательно выполняет Сергей «akbars». Первый наём был 27 апреля — а в мае я открыл для себя OpenStreetMap, скачав велокарту Финляндии. Кто знает, услышь я о НЯК тогда, не сложилось ли бы всё иначе?

2013

Илья Зверев — Fri, 10 Jan 2014 14:33:36 +0400

Год назад я предсказывал год редактора карты. К сожалению, это сбылось наполовину: 2013-й был щедр на инструменты для редактора-новичка. Например, красивый iD, удобный Go Map и обновлённый osm.org. Футуристичный новый OWL застыл, как множество других хороших проектов, в отсутствие автора. Сервер смещений упомянули в гениальном учебнике LearnOSM, так и не переведённом на русский, но до сих пор не включили в iD. И да, прошлый год ознаменовался почти тотальным контролем компании MapBox над всем основным инструментарием, кроме JOSM и всякой мелочи. Когда-то мы радовались этому: наконец-то дизайнеры, программисты, вот эти все, — но сейчас оно выглядит не очень хорошо. MapBox показал, что в нашем проекте настолько не хватает всего вообще, что любая компания может прийти и возглавить OSM, хотят участники того или нет.

Количество пользователей увеличилось в полтора раза, мапперов — на треть. Качество дискуссий осталось на прежнем уровне, если не упало. Ни одного нового учебника за год, ни одной русскоязычной конференции, даже встреча в Псковской области, назревавшая полтора года, сорвалась. Мы ни с кем не общаемся. Зато карту используют все. Где она только не всплывала — в теленовостях и сериалах, в газетах и журналах, на инфостендах, в рекламе дорогих машин, на сотнях сайтов, включая вконтакте и всякие министерства. И на форумах, конечно, хотя массовый их захват ещё впереди.

Подумать только — два года назад мы завидовали НЯК, которых напечатали в телефонном справочнике небольшого города.

Тем временем, другие люди начали понимать, что открытые данные — это хорошо и полезно, и начали открывать свои залежи. Все министерства, муниципалитеты, советы обязали сделать странички на сайтах с такими данными. Получилось полезно, пусть иногда и смешно. Энтузиасты понемногу разгребают горы мусора и приводят данные в порядок: особенно активны ГИС-Лаб (например, ОД Москвы) и НП «Информационная культура» (их хаб открытых данных).

Темой 2014 года в OpenStreetMap будет порядок в данных. За прошедшие пару лет даже давние и опытные участники сообщества смирились с мыслью, что база данных превратилась в помойку с мусорными тегами и непонятным статусом. Пора это исправить. Программисты в этом году будут работать над инструментами обработки этого большого массива геоданных: анализом и откатом пакетов правок, классификацией тегов, валидацией. Мапперы, надеюсь, больше времени посвятят документированию. Не всегда добровольно: тренд по автоматической замене и удалению «бессмысленных» тегов популярными редакторами и ботами заставит их защищать свой выбор. Порицаемой многими процедуре пропозалов в вики пора найти альтернативу. И, конечно, уроки. В этом году, определённо, появится множество новых учебников и уроков по OSM, в том числе на русском языке. Возможно, мы, наконец, придём в школы и институты.

Этот блог же перестал выполнять свою миссию ежедневного источника новостей. Но он живёт, небольшими заметками раз-два в неделю. Жаль, не нашлось человека, способного поддержать новостной поток. Мы придумаем другой способ: вероятно, в форме подкаста с обсуждением новостей за неделю, или обычными для других стран еженедельными списками ссылок (тарзан-стайл, если кто помнит). Как я нередко говорю, если спустя три года в проекте ты занимаешься тем же, что и в начале — это ненормально.

Удачного года. Мапим дальше.

Долгая дорога к картам

Илья Зверев — Wed, 10 Jul 2013 23:16:10 +0400

Андрей Кармацкий развёрнуто описал на хабрахабре процесс создания хорошего дизайна карты. Вклеенное шестиминутное видеоинтервью показывает тщетность слов, и статья, изобилующая фрагментами карт разных стилей, замечательно его дополняет. Мораль статьи та же, что у фильма «Университет монстров»: чудес не бывает, и качественного результата можно добиться только тяжёлым каждодневным трудом. Также, заметно, что для прототипирования дизайна OpenStreetMap оказался удобнее карт Яндекса. Не в последнюю очередь благодаря великолепному TileMill: именно им пользовался Андрей.

Яндекс-пати

Илья Зверев — Sat, 23 Mar 2013 21:53:38 +0400

Как и в прошлом году, день рождения НЯК отметит вебинаром. Но не только: на этот раз они приглашают всех в московский офис компании. Встреча пройдёт в понедельник, 8 апреля, в 19 часов. Посетители и офиса, и вебинара должны заранее записаться. Год назад, почему-то, от OSM к вебинару подключился один человек — немногим больше количества участников НЯК на посиделках после «Веб и ГИС 2011», и значительно меньше числа перебежчиков между проектами.

Цветной мир убит! Модератором!

Илья Зверев — Thu, 14 Feb 2013 17:14:55 +0400

Участники Народной карты Яндекса редко пишут пространные тексты про свой сервис, предпочитая молча рисовать карту. Поэтому даже статья в википедии появилась лишь через год после запуска проекта. Очень редко озадаченные мапперы набираются смелости написать в клуб НЯК. Но сегодня я натолкнулся на целые трактаты про сервис, написанные в сердцах разочарованным бывшим участником, и их любопытно читать. Предварительно надев шапочку из фольги.

Начинает Дмитрий с критики рейтинговой системы и того, что НЯК пытается поверить гармонию спутниковых снимков геометрией. Попытки внести в строгую систему немного жизни наталкивались на злых модераторов. Никак не объяснить художественную ценность нарисованного: «в один прекрасный момент мой маленький народный мирок из знакомых и дорогих мне мест превращается в пепелище. Модератор пожег всё, что мог». Вместо понимания автор неожиданно для себя получил бан.

Особенно затронуло участника обращение с его ~~пожарной частью «Не утонуть»~~ водоёмом, истории правок которого (читать снизу вверх) он просил дать объяснение. Но ответы из Яндекса лишь разочаровывали Дмитрия: возможно, потому что они шли от автоответчика, заменявшего команду НЯК в новогодние каникулы. Недельное молчание добило 55-летнего автора, и тот «хлопнул дверью», написав разгромную характеристику владельцев и участников НЯК.

Модераторы Народной карты бьются с такими участниками постоянно, и этим, возможно, объясняется тон тихой агрессии, ошарашивающий случайно оступившихся новичков. Как ни повышай социальность проекта, всегда найдутся люди, предпочитающие обклацывать объекты в одиночку, по своим представлениям о правилах, и огрызающиеся при малейшем намёке на неодобрение. В OpenStreetMap в отсутствие смотрителей и бана они приносят значительно больший вред, и большое спасибо НЯК, что работает фильтром в среде пользователькой картографии.

И вообще

Илья Зверев — Wed, 13 Feb 2013 20:32:45 +0400

Может, не так плохо рисовать «на дядю», а не в открытом проекте? Одна из наших целей — дать карту самых удалённых уголков каждому. Нарисовал я, значит, деревню на OSM, и кто её увидит? Не считая участников проекта (всех трёх), только один автомобилист на десять лет, которому сын-программист поставил на навигатор осмокарту. А если рисовать в яндексе, карту сразу увидят все.

(Это третья и заключительная часть полемики, после «Нас обогнали» и «С пиаром тоже всё плохо»)

Аргументы защитников «свободных данных» (я даже не могу их в свою корпоративную базу данных загрузить, какие свободные, вы что) одни и те же уже много лет. Самый главный — про загрузку карты в навигатор. А зачем? У меня в цену навигатора входила подписка на ситигид с хорошими, ежемесячно обновляемыми картами. За границей iGo рвёт любительские карты на части. А на смартфоне, планшете и компьютере есть пресловутый яндекс (за границей — гугль), даже с навигацией. С народной картой, которую я могу дорисовать. С пробками, векторными данными и офлайн-кэшем. И выглядит она значительно лучше, чем OpenStreetMap. Кстати, там ещё космические снимки и панорамы можно смотреть, не отходя от кассы.

Пользователей в народных картах больше, следовательно, достоверность выше. Тамошние модераторы следят за правильностью данных, и залётный умник не испортит мне карту аккурат перед важной поездкой. Данные структурированы гораздо лучше, и не нужно копаться в вики в поисках правильного тега. Есть чёткие правила, удобный редактор, отзывчивые сотрудники, мгновенно разрешающие все вопросы. Космоснимков значительно больше, чем у бинга. И никто не обложит матом за то, что за три часа работы в веб-редакторе я случайно затронул чьи-то «отношения».

Лицензия, на которую напирает программный текст в вики, — это хорошо. Я нарисовал тысячу контуров домиков в Длинных Жвалках, кто-нибудь может выгрузить все домики из проекта, включая мои, и, например, посчитать их количество. Или нарисовать карту из одних домиков. Офигенно концептуально. Настоящую пользу могут принести только структурированные данные. То есть, любой ГИС-проект (включая НЯК), кроме OpenStreetMap, где вместо структуры — тегопомойка, а в сообществе круглосуточные споры о базовых вещах. Открытые данные провоцируют создание сервисов на их основе, но качественные, структурированные данные делают это куда эффективнее. Стоимость последних, хоть и высока, всяко ниже стоимости причёсывания данных OSM.

А прежде чем вещать о лицензионной чистоте, объясните вот это.

Местечковость — вообще не аргумент. За пределами России и Африки эти любительские схемы не нужны: там государственные кадастровые службы и коммерческие картографические компании каждый кустик учитывают, не говоря уж о вещах, коими хвастаются осмеры, вроде велодорожек или скамеек. И поскольку в мире прогрессирует открытость, участники OSM вместо сбора данных просто берут и импортируют в нашу базу государственные открытые геоданные. Так же быстрее. В результате сообщество убивается, а OSM становится просто бледной тенью чужих данных, да ещё и с более ограничивающими условиями использования. И зачем тогда вообще начинать?

Участвовать в OpenStreetMap — значит создавать себе на ровном месте сотню препятствий ради мифических выгод от свободной лицензии. Тут же шагу нельзя ступить, чтобы не вляпаться в неполноту эпического Map Features, не ввязаться в бессмысленный спор, отнимающий всё свободное время, или не нарваться на вечно витающее над открытыми проектами «хочешь? сделай!» Яндекс и Гугль, напротив, делают всё возможное, чтобы не отвлекать участника от главного занятия, неоспоримо приносящего пользу всем: рисования карты.

Нас обогнали

Илья Зверев — Wed, 13 Feb 2013 09:41:15 +0400

Когда два месяца назад Brian King поздравил народные яндекс.карты с двухсоттысячным участником, я заметил, что а) это количество тех людей, кто сделал хотя бы одну правку; б) оно очень похоже на другое число из статистики OSM. И да. Сегодня количество пользователей НЯК (215160) превысило количество участников OpenStreetMap, оставивших свой след в 26-гигабайтном файле планеты (215029).

Понятно, что общее число участников с правками у нас чуть за 300 тысяч, но если взять Россию, где работает Яндекс, то останется вдесятеро меньше. Так что это явный намёк на то, что пора перестать хвастаться зарегистрированными пользователями и прочими бессмысленными цифрами: это не наша сильная сторона. Но свободной лицензией размахивать тоже как-то не пристало в приличном обществе: не поймут. Чего же у нас остаётся хорошего?

Лучше год потерять

Илья Зверев — Thu, 17 Jan 2013 13:54:33 +0400

Вот эти две вспышки, жёлтая и зелёная, — главное и единственное, что произошло в глобальном OpenStreetMap в прошлом году. В России стоит упоминания только конференция «Открытые ГИС».

Из менее важных событий:

значительно, качественно выросло покрытие Bing, новые снимки стабильно прибывают каждые два-три месяца;
новые старые снимки: OrbView-3 (середина 2000-х) и Corona (60-е);
обрисовали Абакан, окрестности Вытегры для поисков ребёнка, Крымский район после наводнения, сейчас обклацываем Алексин для наблюдателей;
ночевали онлайн в нескольких городах одновременно во время «ночи оживших карт»;
открылся switch2osm.org, множество сайтов, включая foursquare и gpsies, перешли на OSM (но не русский геокэшинг);
ещё наши данные двухлетней давности обнаружились в составе карт Apple;
появились доступные наборы для аэрофотосъёмки с воздушного шара, опробовали в Вышнем Волочке;
Osmarender (Tiles@Home), наконец, умер;
также умер OWL, его место пока занял WhoDidIt;
рисование домиков в JOSM перенесли на кнопку B;
приняли жуткий пропозал по разметке полос движения;
появился и до сих пор работает Совет Российского OSM;
открылся OSRM, самый быстрый роутер по нашей карте;
Stamen опубликовали акварельную карту;
MapBox получили грант на улучшение всех аспектов OpenStreetMap, и пока не разочаровывают;
Osm.org перешёл на Leaflet;
выложили дамп GPS-точек;
прошла очень уютная микроконференция мапперов в Москве;
также мы зажигали на разных нерелевантных конференциях, вроде ГИС-Форума и SocialCamp;
Стив Кост ушёл с поста председателя Совета OSMF, его место занял Саймон Пул;
повальная геймификация валидаторов: MapRoulette, «недоступное ребро», дороги для геокэшеров, домики в Эстонии;
Яндекс поднял прокси-сервер для тайлов;
что у НЯК: их карты напечатали во многих городах, наши — пока нигде, также НЯК встроили в Яндекс.Карты и провели вебинар, где наобещали с три короба и до сих пор не выполнили;
кликабельные POI на openstreetmap.ru — впервые на сайте общего назначения;
по данным ныне сломанного валидатора границ, +8% от общего числа к границам поселений (до 27,9%) и +6% к их центрам, 10 тысяч новых деревень (против 45 тысяч в 2011 году), ошибок стало на треть меньше, а городов без населения осталось около сотни;
я начал публиковать большую часть новостей в твитере, а для поиска сделал архив.

Чуть больше, чем ничего.

Яндекс vs Сообщество

Илья Зверев — Wed, 19 Sep 2012 13:18:15 +0400

Народной яндекс.карте идёт третий год, а её хозяева так и не научились работать с сообществом. Последнее заметное обновление было в декабре, и хотя его, вместе со встраиванием в яндекс.карты, хватило пользователям, чтобы заткнуться и рисовать, в клубе уже начали пробегать трололо-вопросы, а московский твитер просто язвит: «А у нас на сервисе перемены!»

Духоподъёмные новости придерживаются одного шаблона: «нас попросили подготовить карту для жёлтых страниц Залипупинска, вот фотография!» Весело в первые разы, и даже вызывает каплю зависти, хотя, если подумать, OSM используется в сотни раз чаще и серьёзнее: сложно представить НЯК в качестве подложки на сайте ТТК Москвы или на мониторах системы управления трафиком Челябинска. Но вчера юмор достиг апогея: Trolleway опубликовал в клубе схему с забора стройки станции метро «Жулебино», которая взята из НЯК без согласования с Яндексом и даже без копирайтов. Сотрудники последнего пока не дали комментария. А через полчаса выложили фотографию мурманской рекламной тумбы, где тоже засветилась народная карта, на этот раз — санкционированно. Правда, картинка появилась только спустя 16 часов: в спешке автор дал ссылку на внутренний сайт компании, закрытый для посторонних. Кому какая разница, в самом деле.

В апреле прошёл вебинар (вот запись), на котором Яндекс имел неосторожность что-то пообещать пользователям. Им повезло — у няков короткая память, но в OSM все помнят:

вики-документация: как и полгода назад, возвращает «You are not allowed to view this page». Целью было дать пользователям влиять на правила НЯК, соответственно, эти правила до сих пор спускаются сверху;
печатные версии карт избранных городов формата А1-А2: не увидели даже черновика;
увеличение предельного количества точек в линиях: «мы знаем об этом», до сих пор;
кэш мобильных яндекс.карт для новых городов: «планируется, сроков не называем»;
стиль для печати: не появился (хотя его не обещали, лишь сказали, что подумают).

Конечно, за это время в клубе высказывались более сложные предложения: от поля «часы работы» до фильтра объектов — и работой смотрителей было убеждать, что всё и так неплохо. При этом им самим приходится каждый раз считать статистику вручную.

Сотрудники Яндекса всё время говорят, что НЯК обновляется редко, потому что они не хотят выкладывать неотлаженные фичи, плюс всё должно проходить через десятки согласований, все дела. Похоже, они относятся к сервису как к серьёзной, корпоративного уровня системе, которая стоит больших денег, и поэтому Яндекс не имеет права на ошибку. Вот только денег нет, пользователи не платят ни копейки, и сервис постигла судьба большого проекта, которому обрезали финансирование: что-то исправляется, систему держат на плаву, но нехотя, ценой невероятных усилий упорных участников проекта. Спасти НЯК может только несерьёзное отношение — но Яндекс давно разучился относиться к своим проектам несерьёзно.

0:2

Илья Зверев — Wed, 27 Jun 2012 12:57:25 +0400

На этот раз Народные Яндекс.Карты напечатала газета ~~«Знамя коммунизма»~~ «Челнинские известия». Конечно, у нас в Набережных Челнах пять тысяч зданий (из них две — с адресами) и более 1700 точек интереса, тоже все маршруты транспорта (кстати, по современной схеме), пешеходный и автомобильный роутинг на отличненько, парки с дорожками, ЛЭП, строящиеся кварталы — но нет ни одного человека, способного посидеть пару дней и выдать карту в приемлемом для печати виде. Зато у всех есть мнения по дизайну.

Что (ещё) можно нарисовать на OpenStreetMap?

Илья Зверев — Sat, 16 Jun 2012 22:15:45 +0400

Объёмные задачи становятся проще, если разбить их на этапы. Сотрудники НЯК вынесли на обсуждение список объектов, которые нужно обвести для качественной отрисовки города, с подробными комментариями. Неудивительно, что почти всё можно перенести на OSM, дополнив и расширив. Конечно, если не учитывать, что у нашего проекта иные приоритеты, странным образом слабо связанные с рисованием карты.

На следующий день akbars призвал испробовать этот чеклист на практике, отрисовав почти с нуля несколько городов. В исходной заметке мягко обойдён вопрос источников, во второй — «можно использовать портал Росреестра, остальное — ни-ни!» Очевидно, что в клубе нет пользователей из этих городов (иначе бы они были отрисованы), но, к примеру, «именовать улицы надо сразу, при рисовании». Видимо, поэтому один из трёх предложенных городов до сих пор стоит без улиц. Вопрос сбора данных на местности в чеклисте обойдён: про адресацию или роутинг ни слова.

Ещё в народных картах есть однокнопочная фича, до которой мы не додумались: любой полигон можно махом превратить в точку. Время от времени это приводит к мини-апокалипсисам: «из-за такой правки чуть не были потеряны несколько посёлков Московской области, домов в разных городах и регионах России, также районы и микрорайоны Москвы и МО, которые были превращены в остановки, супермаркеты, магазины, станции и т. д.» Кнопка массового поражения на отличненько.

Вебинар

Илья Зверев — Sun, 08 Apr 2012 18:19:18 +0400

Сегодня утром прошла виртуальная встреча няков. Записи выложат на следующей неделе, а пока свои догадки насчёт обсуждённых тем можно строить только по недостоверному твитеру и репликам в чатике. Формат вебинара очень крутой: помимо очевидного чата там любой участник может транслировать видео или голос, плюс есть окна для презентации и официального вещания. Ну и запись, само собой.

Началось всё, разумеется, с презентации. Весь московский офис слёг с простудой, но они мужественно выбрались на встречу, периодически оглушая слушателей кашлем в микрофон. На трёх сотрудников яндекса пришлось 15 участников НЯК (из них где-то половина — модераторы) и один шпион из OSM (не будем раскрывать его личность). Презентация показала, что количество девушек в проекте стремительно уменьшается, но его компенсирует количество новых объектов. В честь дня рождения проекта участникам пообещали подарок (печатные версии карт некоторых городов со списком пользователей, их правивших) и показали снимок будущего. Под ним подразумевается вики-хранилище со всеми правилами и рекомендациями, которое позволят редактировать некоторым пользователям. То есть, примерно как наша вики, только строже и с колючей проволокой. Пока что ломиться смысла нет, access denied (и вышки со снайперами).

После презентации разговор в чатике шёл вяловато, поэтому настало время заранее подготовленных каверзных вопросов. Как и на экзамене, они — лишь повод для разговора, и надеюсь, участники НЯК немало из него вынесли. Любые предложения открыть данные Яндекс отбрасывает, так что в эту сторону почти не шли. Обсудили GPS-треки как источники (не планируют), оверзум (не планируют, да и смысла-то), пожертвования яндексу самодельной аэрофотосъёмки (нельзя, потому что засудят). От вопроса добавления новых стилей отрисовки сотрудники сначала отмахивались «схематичный стиль будем улучшать», но затем поддались на уговоры: к концу дискуссии сложилось впечатление, что они и вправду сделают, хотя бы, стиль для печати. Наконец, по поводу встреч вживую — яндекс не хочет проводить их самостоятельно, но будет очень рад добровольцам из регионов, и по запросу даже может подумать над помощью, возможно — материальной. Главное — взяться, собраться, обучить новичков, поговорить между собой.

Одним из самых сложных вопросов был: «чем участники народных карт могут помочь проекту, помимо рисования?» Как пример, мы напомнили о Александре Зейналове, когда-то сделавшем статистику для проекта. После споров сошлись на том, что очень нужна помощь с выслеживанием и обучением новичков, а также написанием инструкций и рекомендаций, особенно когда откроют вики. Пользуясь случаем, мы разузнали, как в проекте работает модерация: есть ли фильтры (есть), есть ли валидация (нет, и данных не откроют, не просите), какие типы неадекватов попадаются в проекте. Участники дискуссии напомнили, что недавно в Москве проводилась очная встреча модераторов, и есть видеозапись (10 роликов, суммарно чуть меньше часа).

По итогам, встреча была очень интересной, информативной для всех участников, но несколько разочаровало, что взять микрофон осмелились только организаторы и шпион из OSM (который оживлял всю вторую половину вебинара). Было бы здорово, если бы к следующей встрече (которая пройдёт точно раньше, чем через год) участники НЯК подготовились более основательно.

Кому не лень оторвать насиженное место и подышать воздухом нашего милого сообщества

Илья Зверев — Thu, 05 Apr 2012 12:39:14 +0400

Вы не поверите, но участники НЯК чуть было не собрались отметить годовщину сервиса вживую. Новые сообщения в теме не появлялись неделю, так что, видимо, идея заглохла. Если не ошибаюсь, когда мы попытались вытащить участников на посиделки в пивной после «Веб и ГИС», результат был такой же. Странно.

Напоминаю, что 8 апреля, в это воскресенье, пройдёт вебинар НЯК. Для участия нужно написать им письмо. Записи обещают выложить. И, похоже, ещё до проведения Яндекс вошёл во вкус, и на утро 12 апреля запланировал вебинар по обычным своим картам.

Просто тупо потому, что карты должны быть доступны людям

Илья Зверев — Sat, 31 Mar 2012 14:36:18 +0400

В последних минутах прошлонедельного подкаста «Радио-Т» (спасибо @dezhin за наводку) сотрудник Яндекса рассказывает про своё отношение к проекту и участникам OpenStreetMap:

Рассматривал ли [Яндекс] OpenStreetMap в качестве альтернативы? Не рассматривал, и этому есть много причин. Я хочу вам сказать вот что: вы просто путаете. Есть ребята из OpenStreetMap, которые делают прекрасные карты. Делают они их, в первую очередь, для себя, и для того, чтобы использовать их в навигаторах. В качестве альтернативы «Народной карте» нам это совершенно не подходит. У нас совершенно другая игра. При этом, ездя по стране, я периодически сравниваю OSM с другими картами. Хочу вам сказать, что работа OSM в России сильно преувеличена.

В сообществе OpenStreetMap в России есть офигенные, очень сильные люди. Я бы с удовольствием не то, что на работу взял, — я бы носил их на руках. И то, что делают эти люди, прекрасно. Но, к сожалению, вокруг OpenStreetMap есть совершенно ужасное коммьюнити флэймеров, которые портят всю малину. Нужно хорошо понимать, что те люди, которые продвигают OSM в России, — не которые рисуют карты, а которые пытаются его здесь «продвигать», — какие-то чудовищные, ужасные люди. И, в частности, это люди, которые пишут вот с такими ошибками, как дорогой Idro (слушатель, задавший вопрос).

Так вот, я просто хочу вам сказать: ребята, OpenStreetMap — отличные карты. Коммерческие компании вряд ли будут их использовать. Если они, конечно, могут себе это позволить. Мы, к счастью, можем, поэтому у нас свои карты. При этом я искренне призываю всех, кто хочет пользоваться картами в навигаторах, рисовать карты самим — и в опенстритмэпе, и в народных картах. И ещё в десятке-другом мест, где вы можете это нарисовать. Просто тупо потому, что карты должны быть доступны людям. При этом нельзя надеяться на то, что ребята из OpenStreetMap, или из Яндекс.Народных Карт, или из любого другого единого источника смогут покрыть большую часть населения этими картами. Вот и всё.

\/_o

Илья Зверев — Tue, 27 Mar 2012 15:17:32 +0400

Пока мы празднуем наши годовщины, выезжая на природу и рисуя карты, НЯК отмечает праздники более серьёзно: 8 апреля (в воскресенье) проекту исполняется два года, и по этому случаю команда впервые поговорит со своими пользователями в формате чатика. Вебинар, как это называется по-научному, пройдёт примерно с 12 часов по Москве, и поздравить няков можно будет, записавшись по адресу ya-nmaps@yandex.ru (темой должно быть слово «Вебинар»). Если повезёт, как раз отключат апи для перелицензирования, и у нас выпадут свободные выходные.

Присоединяйтесь и вы

Илья Зверев — Mon, 05 Mar 2012 14:00:56 +0400

И тут любители сравнивать OSM и Яндекс.Карты нервно сглотнули: теперь на максимальном увеличении последние не рисуют пустое поле с парой названий, а невозмутимо переключают источник тайлов. Да, с сегодняшнего дня появился четвёртый слой, и это, понятно, не OSM.

Что возвращает нас к теме пиара. Сейчас на народные карты повалят сотни новичков, ломающих и подписывающих всё подряд. В итоге потенциально отрисуют каждое село Новое Залипуево и где там ещё не слышали про яндекс. Все эти пользователи через несколько лет, конечно, поймут, что они натворили, но делать работу по второму разу в OpenStreetMap будет лениво. У нас нет продающего фасада (русскому сайту далеко до яндекса, хотя и не так, как osm.org), лишь несколько жалких страничек для десяти человек, просиживающих на форумах навигационных программ. Правка карты — сплошное мучение: сперва разочароваться в потлатче, затем с трудом продираться через JOSM, затем обнаружить, что на глагне не рендерится две трети внесённых данных. Участники OSM сейчас — это линуксоиды десять лет назад. Смешные, суетливые, незначительные. Работа участников НЯК сразу видна на крупнейшем картографическом портале рунета.

Выход? Взять и скопировать сайт Яндекс.Карт один к одному, конечно. Вплоть до картостиля. Затем переписать потлатч.

API устарел, зато нет ограничений по количеству просмотров

Илья Зверев — Tue, 24 Jan 2012 14:15:09 +0400

Неожиданно (хотя закономерно), народная яндекс.карта обогнала нас на нашем же поле: справочник «Весь Лабытнанги и Харп» использует карту, нарисованную няковцами. Для этого авторам справочника потребовалось лишь попросить разрешения у яндекса — и те снарядили дизайнеров и подготовили печатный вариант.

К кому обращаться в нашем проекте, никто не знает до сих пор. Встречали ли вы карту OpenStreetMap в многотиражных изданиях?

Кстати: «А вот для поселка Харп (30 км от Лабытнанги) карты не нашлось: к сожалению, на Яндексе пока нет подробного снимка посёлка, что, естественно, отразилось на степени его отрисованности на Народной карте». А у нас есть бинг и россыпь треков — сделаем?