гар что это такое и как жить без фиас
Бизнес-завтрак «ФИАС больше нет, как жить с ГАР» — коротко
Вчера собрали на завтрак узкий круг специалистов, которых беспокоит кончина ФИАС и воцарение ГАР. Обсудили, что делать и как скоро жить без нового справочника станет нельзя.
Мы рассказали, что знаем про ГАР: как он устроен, чем отличается от ФИАС и что вообще значит «Перейти на ГАР». Сейчас пишем об этом статью, но опубликуем минимум через пару недель — информации очень много.
Коллеги поделились, что пока все относительно спокойно и регуляторы не требуют данные в формате нового справочника. Но квартальные отчеты на носу, а подход к требованиям может измениться без преувеличения в любой момент. Тревожно.
Напоследок представили свой «ФИАС» на основе ГАР, о нем писали вчера. С этим справочником можно протянуть, пока не переведешь учетные системы на ГАР.
Спасибо всем, кто слушал, выступал, задавал вопросы. Чтобы получать знания из первых рук, а не в пересказе, приходите на наши мероприятия — их мы анонсируем в телеграм-канале @hflabs_official.
Сделали «ФИАС» на основе ГАР. Пока он открыт для всех
Мы разработали справочник, который можно использовать вместо почившего ФИАС. Получить его можно уже сейчас, ссылка внутри поста.
Что внутри «ФИАС» от HFLabs
Справочник — не точная копия ФИАС, поэтому название и в кавычках. Мы перенесли только необходимое. Вот что внутри:
Исторические записи мы выгрузили для одной ADDROBJ. В других таблицах пока лежат только актуальные записи. Остальные — в разработке, об их появлении сообщим.
В таблице ADDROBJ больше нет индексов. ФНС удалила их из ФИАС в последней версии 31 августа, а из ГАР ещё раньше. Это значит, что теперь почтовые индексы проставлены только у домов, не выше.
Как часто будем обновлять
Новый «ФИАС» будем релизить два раза в неделю. Но, естественно, с оглядкой на ФНС: если налоговая не опубликует ГАР вовремя, то нам негде будет взять данные.
Это бета-версия
Мы тестируем справочник всеми силами, но структура ГАР сильно отличается от ФИАС. Поэтому в релизе могут быть несостыковки. Если найдете ошибку, пожалуйста, пишите на gar_fias@hflabs.ru.
Как получить «ФИАС» от HFLabs
Укажите свое имя и емейл в форме eepurl.com/hJw-1f. На введенный адрес придет письмо со ссылкой на скачивание.
Емейл нужен, чтобы делиться новостями о нашем «ФИАСе» и приключениях с ГАР. Писать будем по делу, без спама. Отписаться можно в любой момент.
Имя просим, чтобы по-человечески обратиться к адресату.
Никаких ограничений на использование нашего «ФИАСа» нет, пользуйтесь на здоровье.
На этом пока все. Следите за телеграм-каналом @hflabs_official, чтобы узнать, когда в наш «ФИАС» завезут исторические записи о домах, квартирах, участках и всем остальном.
ФИАС, ГАР и «Дадата»
КЛАДР → ФИАС → ГАР
В России единый справочник адресов ведет Налоговая служба. Адреса из муниципальных образований по всей стране стекаются в налоговую, где их записывают в специальную базу.
Налоговая служба предоставляет справочник адресов всем желающим в виде выгрузок. Есть три разных формата выгрузок:
КЛАДР. Самый старый формат. Больше не принимается гос. органами, но по-прежнему выгружается. Включает только административно-территориальное деление.
ФИАС. Основной формат до августа 2021 года. Больше не выгружается. Включает только административно-территориальное деление.
ГАР. Основной формат с сентября 2021 года. Включает муниципальное и административно-территориальное деление.
«Дадата» работала на основе выгрузки ФИАС, но в октябре 2021 перешла на ГАР. При этом используется только административно-территориальное деление. Формат данных, которые отдает «Дадата», при этом не изменился.
Муниципальное деление поддержим в 2022 году.
Посмотреть адреса в ГАР можно на сайте налоговой.
ФИАС ID и ГАР ID
Чтобы уникально идентифицировать каждый адрес в справочнике, налоговая назначает ему ID. Например, у адреса «г Москва, ул Сухонская» такой идентификатор (этот формат называется GUID):
В ГАР идентификаторы в формате GUID сохранились без изменений (теперь они называются Object GUID), но дополнительно к ним добавились целочисленные идентификаторы (Object ID). Например, у адреса «г Москва, ул Сухонская» теперь два идентификатора — один GUID (как был в ФИАС) и один ID (целочисленный):
«Дадата» пока продолжит использовать идентификатор в формате GUID. Целочисленные идентификаторы добавим в 2022 году.
ГАР БД ФИАС или очень полная БД ФИАС
01.06.2020 ИФНС опубликовала новый формат выгрузки данных
17.12.2020 Мягко намекнула, что в 2021 будет использоваться только он
01.09.2021 Это свершилось: теперь просто «полная БД ФИАС» перестала обновляться и требуется использовать ГАР БД ФИАС
Частично импортируем ГАР БД ФИАС в MySQL на PHP.
Новость, мягко говоря, не очень, для тех кому нужно получить иерархию улиц и список домов с почтовыми индексами, особенно учитывая, что КЛАДР до сих жив. А не очень из-за того, что файлик данных с 12Гб резко пополнел до 28Гб. Конечно, можно возразить, что скачал один раз и по чуть-чуть обновляйся. Да, можно, если хранить нужные файлы данных целиком и постоянно накатывать на них обновления, но. наличие багов (даже в полной версии) добавит радости.
Таблица gar_addr, ключевое поле id. Иерархию определяют указывающие на него owner_adm и owner_mun. Субъекты РФ (и Байконур) имеют level=1, owner_adm=owner_mun=0. Содержит информацию о названиях адресных объектов (NAME, TYPENAME) и говорящие за себя OKATO, OKTMO, KLADR. OBJECTGUID, ранее в ФИАС именовался AOGUID, является идентификатором адресного объекта (уникальный для актуальных записей; не уникальный, если используются исторические устаревшие записи). OBJECTID аналогичен по значению OBJECTGUID, но уже целочисленный.
Импорт и частичное описание структуры.
Всё описанное ниже реализовано в исходниках.
a) Прежде чем начать, проверим zip файл. Убедимся, что он похож на нужный нам и в нём хотя бы есть файлы as_addr_obj. для каждого интересующего нас региона.
Ранее в ФИАС был один файл со всеми регионами, теперь данные о каждом регионе в своей директории.
b) Импортируем файлы AS_ADDR_OBJ_(дата)_(идентификатор).XML, содержащие информацию об адресных объектах.
e) Проиндексируем дома по OBJECTID и убедимся, что все записи уникальны.
f,g) Настало время создать иерархию. Анализируем файлы AS_ADM_HIERARCHY_. и AS_MUN_HIERARCHY_. отбирая только актуальные записи. Пара OBJECTID и PARENTOBJID указывает на OBJECTID объекта.
В этих файлах собрана информация по всем объектам региона. В моём случае PARENTOBJID может быть только адресный объект, но реально в PARENTOBJID может быть и дом. Дочерним у него будет является, например, квартира (файлы AS_APARTMENTS_. ).
h) Проиндексируем gar_addr по owner_adm и owner_mun
ГАР, полная выгрузка
В файле AS_ADDR_OBJ_20210906_2a908987-3309-454e-9364-b75afd551e12.XML
есть объект с ISACTUAL=»1″ ISACTIVE=»1″
однако, его OBJECTID=»95254004″ вообще не встречается в AS_ADM_HIERARCHY_20210906_221e769c-cfac-4af6-9a20-04cc9c2e1fe5.XML AS_MUN_HIERARCHY_20210906_214fdb76-13c8-49cf-90ef-b5f05c4ee6df.XML
Надеяться, что дом обычно расположен на конкретной улице и owner_adm должен совпадать с owner_mun не получится. Крайне малое количество домов имеют разных владельцев, например один и тот же дом «Х»:
Башкортостан, Уфимский р-н, Зубовский с/с, д. «Х»
Башкортостан, Уфимский м.р-н, с.п. Зубовский сельсовет, тер. СНТ Авиатор, ул N1, д. «Х»
k) Настало время заполнить OKATO, OKTMO и KLADR. Информация о них в файле AS_ADDR_OBJ_PARAMS_. и надо выбрать VALUE из актуальных записей соответствующего TYPEID (6,7,11). Какие данные ещё есть в этом файле указано в AS_PARAM_TYPES_. XML
m) Удаляем вспомогательные столбцы и индексы
n,o) Выполняем слияние всех таблиц по регионам в одну общую.
p) Создаём нужные индексы
q) Переименовываем временные таблицы в нормальные имена
Чтобы получить этот результат надо обработать:
Сделали «ФИАС» на основе ГАР. Пока он открыт для всех. Подойдет вместо почившего справочника ФНС
Если у вас есть учетные системы, которые работают на ФИАСе и не понимают ГАР, вы можете бесплатно получать обновления у нас. Ссылка внутри поста.
Зачем понадобился еще один ФИАС
С 31 августа ФНС перестала обновлять ФИАС — Федеральную информационную адресную систему. Остался ГАР — Государственный адресный реестр. Теперь актуальные адреса налоговая отдает только в ГАР. О тонкостях мы рассказывали на вебинаре «ГАР: что это такое и как жить без ФИАС».
Это плохие новости для крупных компаний. В энтерпрайзе полно важных систем, которые работают на ФИАСе. Та же «1С» или «АСВ чекер». Они больше не получают обновления адресного справочника.
Чтобы помочь заказчикам и рынку вообще, мы разработали справочник, который можно использовать вместо почившего ФИАС.
Что внутри «ФИАС» от HFLabs
Справочник — не точная копия ФИАС, поэтому название пишем в кавычках. Мы перенесли только необходимое. Внутри:
таблица ADDROBJ — объекты до дома (улицы, районы, регионы и т. д.);
SOCRBASE — классификатор типов.
Исторические записи мы выгрузили для одной ADDROBJ. В других таблицах пока лежат только актуальные записи. Остальные — в разработке, об их появлении сообщим в телеграме.
В таблице ADDROBJ больше нет индексов. ФНС удалила их из ФИАС в последней версии 31 августа, а из ГАР ещё раньше. Это значит, что теперь почтовые индексы проставлены только у домов, не выше.
Формат справочника — только DBF, без XML.
Это бета-версия
Мы тестируем справочник всеми силами, но структура ГАР сильно отличается от ФИАС. Поэтому в релизе могут быть несостыковки. Если найдете ошибку, пожалуйста, пишите на gar_fias@hflabs.ru.
Как часто будем обновлять
Новый «ФИАС» будем релизить два раза в неделю. Но, естественно, с оглядкой на ФНС: если налоговая не опубликует ГАР вовремя, нам негде будет взять данные.
Как получить «ФИАС» от HFLabs
Укажите свое имя и емейл в форме. На введенный адрес придет письмо со ссылкой на скачивание.
Емейл нужен, чтобы делиться новостями о нашем «ФИАСе» и приключениях с ГАР. Писать будем по делу, без спама. Отписаться можно в любой момент.
Имя просим, чтобы по-человечески обратиться к адресату.
Никаких ограничений на использование нашего «ФИАСа» нет, пользуйтесь на здоровье.
На этом пока все. Следите за телеграм-каналом @hflabs_official, чтобы узнать, когда в наш «ФИАС» завезут исторические записи о домах, квартирах, участках и всем остальном.