FoxClub Forums > Visual Foxpro, Foxpro for DOS > Новый формат выгрузки для ФИАС ::

• Войти

Страницы: 1 2 3 4

Re: Новый формат выгрузки для ФИАС
alex; Сообщений: 2852 Откуда: Москва Дата регистрации: 23.11.2004	alex; 21.07.20 14:24:21 of63 А что такое "загрузка"? static readonly WebClient client = new WebClient(); string data = client.DownloadString("http://fias.nalog.ru/Public/Downloads/Actual/VerDate.txt"); client.DownloadFile("http://fias.nalog.ru/Public/Downloads/Actual/fias_dbf.zip", zip_path);

alex;

Сообщений: 2852
Откуда: Москва
Дата регистрации: 23.11.2004

alex;

21.07.20 14:24:21

of63
А что такое "загрузка"?


static readonly WebClient client = new WebClient();
string data = client.DownloadString("http://fias.nalog.ru/Public/Downloads/Actual/VerDate.txt");
client.DownloadFile("http://fias.nalog.ru/Public/Downloads/Actual/fias_dbf.zip", zip_path);

Re: Новый формат выгрузки для ФИАС
of63 Автор Сообщений: 25244 Откуда: Н.Новгород Дата регистрации: 13.02.2008	of63 21.07.20 14:58:41 А адреса человечьи как парсишь по загруженному файлу ФИАС ?

Re: Новый формат выгрузки для ФИАС
alex; Сообщений: 2852 Откуда: Москва Дата регистрации: 23.11.2004	alex; 21.07.20 15:24:53 of63 А адреса человечьи как парсишь по загруженному файлу ФИАС ? фильтрую запросы по введенным символам и предлагаю варианты для ввода. А парсить уже готовые списки не приходилось. ЗЫ: Ну, собственно, все таблички фиас в MS SQL из zip. Исправлено 1 раз(а). Последнее : alex;, 21.07.20 15:26

Re: Новый формат выгрузки для ФИАС

alex;

Сообщений: 2852
Откуда: Москва
Дата регистрации: 23.11.2004

alex;

21.07.20 15:24:53

of63
А адреса человечьи как парсишь по загруженному файлу ФИАС ?

фильтрую запросы по введенным символам и предлагаю варианты для ввода.

А парсить уже готовые списки не приходилось.

ЗЫ:
Ну, собственно, все таблички фиас в MS SQL из zip.

Исправлено 1 раз(а). Последнее : alex;, 21.07.20 15:26

Re: Новый формат выгрузки для ФИАС
alex; Сообщений: 2852 Откуда: Москва Дата регистрации: 23.11.2004	alex; 21.07.20 15:31:10 Хот я знаю людей, которые пользут платные сервисы типа dadata для парсига.

Re: Новый формат выгрузки для ФИАС
of63 Автор Сообщений: 25244 Откуда: Н.Новгород Дата регистрации: 13.02.2008	of63 22.07.20 08:11:04 Да, много сервисов, как таксистов. Но ездить в булочную все хотят на личном драндулете

Re: Новый формат выгрузки для ФИАС
alex; Сообщений: 2852 Откуда: Москва Дата регистрации: 23.11.2004	alex; 22.07.20 09:02:41 of63 Да, много сервисов, как таксистов. Но ездить в булочную все хотят на личном драндулете Не все. Каждый выбирает для себя, затратность, удобство, ...

Re: Новый формат выгрузки для ФИАС
of63 Автор Сообщений: 25244 Откуда: Н.Новгород Дата регистрации: 13.02.2008	of63 22.07.20 09:46:26 ...женщину, религию, дорогу )

Re: Новый формат выгрузки для ФИАС
alex; Сообщений: 2852 Откуда: Москва Дата регистрации: 23.11.2004	alex; 22.07.20 17:24:59 словил переполнение в house24 housenum = 'В187В188В189В190'

Re: Новый формат выгрузки для ФИАС
of63 Автор Сообщений: 25244 Откуда: Н.Новгород Дата регистрации: 13.02.2008	of63 22.07.20 18:08:17 () чисто из любопытства, поискал в КЛАДР doma.dbf такую строку (поле Name), и точно, ~~"ниже живота, смешно, но не до смеха, висели..."~~ здВ187В188В189В190,здВ18В1,здВ193,здВ194 -в 24 регионе Яж говорю, ФИАС и КЛАДР из одного места растут

Re: Новый формат выгрузки для ФИАС

of63
Автор

Сообщений: 25244
Откуда: Н.Новгород
Дата регистрации: 13.02.2008

of63

22.07.20 18:08:17

() чисто из любопытства, поискал в КЛАДР doma.dbf такую строку (поле Name), и точно, ~~"ниже живота, смешно, но не до смеха, висели..."~~

здВ187В188В189В190,здВ18В1,здВ193,здВ194 -в 24 регионе

Яж говорю, ФИАС и КЛАДР из одного места растут

Re: Новый формат выгрузки для ФИАС
alex; Сообщений: 2852 Откуда: Москва Дата регистрации: 23.11.2004	alex; 23.07.20 19:39:18 Одна из хороших статей habr.com

Re: Новый формат выгрузки для ФИАС
of63 Автор Сообщений: 25244 Откуда: Н.Новгород Дата регистрации: 13.02.2008	of63 24.07.20 08:40:10 Статья, как парень переливал из dbf(xml) в таблички SQL. Учебная задача, мтк. К тому же не справился с "кракозябрами" DBF (пишет 2 дня маялся, странно...) ФИАС так и не удалось скачать - 7 Гб зипованых! Это невменяемый размер какой-то. КЛАДР зипованый - 36 Мб.

Re: Новый формат выгрузки для ФИАС

of63
Автор

Сообщений: 25244
Откуда: Н.Новгород
Дата регистрации: 13.02.2008

of63

24.07.20 08:40:10

Статья, как парень переливал из dbf(xml) в таблички SQL. Учебная задача, мтк. К тому же не справился с "кракозябрами" DBF (пишет 2 дня маялся, странно...)

ФИАС так и не удалось скачать - 7 Гб зипованых! Это невменяемый размер какой-то. КЛАДР зипованый - 36 Мб.

Re: Новый формат выгрузки для ФИАС
alex; Сообщений: 2852 Откуда: Москва Дата регистрации: 23.11.2004	alex; 24.07.20 16:49:55 Основная мысль статьи и комменты к ней добротные

Re: Новый формат выгрузки для ФИАС
Taran Сообщений: 13624 Откуда: Красноярск Дата регистрации: 16.01.2008	Taran 25.07.20 07:29:30 of63 ФИАС так и не удалось скачать - 7 Гб зипованых! Это невменяемый размер какой-то. КЛАДР зипованый - 36 Мб Во-во, о чем я выше и писал. Попробуй встрой в свою программу автозагрузку (как напр. Клади у меня грузится). Обделаешься, никогда не отмоешься. При всем этом я игры с фиас бросил лет дохрена как, а воз и ныне там. Или это все согласно ТЗ? Капец Стране, заплешивела безвозвратно.

Re: Новый формат выгрузки для ФИАС

Taran

Сообщений: 13624
Откуда: Красноярск
Дата регистрации: 16.01.2008

Taran

25.07.20 07:29:30

of63
ФИАС так и не удалось скачать - 7 Гб зипованых! Это невменяемый размер какой-то. КЛАДР зипованый - 36 Мб

Во-во, о чем я выше и писал.
Попробуй встрой в свою программу автозагрузку (как напр. Клади у меня грузится). Обделаешься, никогда не отмоешься.
При всем этом я игры с фиас бросил лет дохрена как, а воз и ныне там.
Или это все согласно ТЗ?
Капец Стране, заплешивела безвозвратно.

Re: Новый формат выгрузки для ФИАС
of63 Автор Сообщений: 25244 Откуда: Н.Новгород Дата регистрации: 13.02.2008	of63 25.07.20 09:49:45 ФИАС не нужен (в том виде, в котором он сейчас находится), с разрабов взыскать потраченные народные деньги, с компенсацией морального ущерба юзеров. habr.com - о подобии КЛАДР <--> ФИАС habr.com - о граблях ФИАС и КЛАДР Исправлено 1 раз(а). Последнее : of63, 25.07.20 10:44

Re: Новый формат выгрузки для ФИАС

of63
Автор

Сообщений: 25244
Откуда: Н.Новгород
Дата регистрации: 13.02.2008

of63

25.07.20 09:49:45

ФИАС не нужен (в том виде, в котором он сейчас находится), с разрабов взыскать потраченные народные деньги, с компенсацией морального ущерба юзеров.

habr.com - о подобии КЛАДР <--> ФИАС
habr.com - о граблях ФИАС и КЛАДР

Исправлено 1 раз(а). Последнее : of63, 25.07.20 10:44

Re: Новый формат выгрузки для ФИАС
sphinx Сообщений: 31179 Откуда: Каменск-Уральски Дата регистрации: 22.11.2006	sphinx 26.07.20 01:01:57 Я играю. Пока на работе надо дофигачить, пока нет начки. Я в теме, попробую свои алгоритмы переложить на чистый фокс. И сравним. Не=не, у меня вряд ли ЛУЧШЕЕ решение, я про результат. Возможно, выборка данных не такая. Коллеги - я не меряться иду, скорее интересно - кто и что ЛУЧШЕ сделает. Это норм. ------------------ "Veni, vidi, vici!"(с)

Re: Новый формат выгрузки для ФИАС

sphinx

Сообщений: 31179
Откуда: Каменск-Уральски
Дата регистрации: 22.11.2006

sphinx

26.07.20 01:01:57

Я играю. Пока на работе надо дофигачить, пока нет начки. Я в теме, попробую свои алгоритмы переложить на чистый фокс.
И сравним. Не=не, у меня вряд ли ЛУЧШЕЕ решение, я про результат. Возможно, выборка данных не такая. Коллеги - я не меряться иду, скорее интересно - кто и что ЛУЧШЕ сделает. Это норм.

------------------
"Veni, vidi, vici!"(с)

Re: Новый формат выгрузки для ФИАС
of63 Автор Сообщений: 25244 Откуда: Н.Новгород Дата регистрации: 13.02.2008	of63 26.07.20 13:57:29 Если что, то Сергей akvvohinc может выложит выборку из своего примера (о 130 тыс записей) подвыборку (о 7 тыс записей). Она показывает [почти] все возможные ситуации, на какие заточить парсер, особенно первые коротки... SELECT COUNT(),; addr,; STR(LEN(ALLTRIM(CHRTRAN(addr,"0123456789",""))))+; STR(LEN(ALLTRIM(addr))-LEN(ALLTRIM(CHRTRAN(addr,"0123456789",""))))+; STR(OCCURS(",",addr))+; STR(OCCURS(".",addr))+; STR(OCCURS("-",addr))+; STR(OCCURS("/",addr)); FROM fk GROUP BY 3 Кстати, "Клд Маркса 1" - что такое Клд, спросите вы? Каладан? Нет, Калининград! ...Идеальный парсер в процессе парсирования должен бы спрашивать у оператора непонятные сокращения, и запоминать их, на сеанс парсирования, или в файле на века... эх Добавил OCCURS кавычек и скобок. Человеческая запись адреса такая человеческая... Исправлено 6 раз(а). Последнее : of63, 29.07.20 09:33*

Re: Новый формат выгрузки для ФИАС

of63
Автор

Сообщений: 25244
Откуда: Н.Новгород
Дата регистрации: 13.02.2008

of63

26.07.20 13:57:29

Если что, то Сергей akvvohinc может выложит выборку из своего примера (о 130 тыс записей) подвыборку (о 7 тыс записей). Она показывает [почти] все возможные ситуации, на какие заточить парсер, особенно первые коротки...


SELECT COUNT(*),;
       addr,;
       STR(LEN(ALLTRIM(CHRTRAN(addr,"0123456789",""))))+;
       STR(LEN(ALLTRIM(addr))-LEN(ALLTRIM(CHRTRAN(addr,"0123456789",""))))+;
       STR(OCCURS(",",addr))+;
       STR(OCCURS(".",addr))+;
       STR(OCCURS("-",addr))+;
       STR(OCCURS("/",addr));
  FROM fk GROUP BY 3

Кстати, "Клд Маркса 1" - что такое Клд, спросите вы? Каладан? Нет, Калининград!

...Идеальный парсер в процессе парсирования должен бы спрашивать у оператора непонятные сокращения, и запоминать их, на сеанс парсирования, или в файле на века... эх

Добавил OCCURS кавычек и скобок. Человеческая запись адреса такая человеческая...

Исправлено 6 раз(а). Последнее : of63, 29.07.20 09:33

Re: Новый формат выгрузки для ФИАС
of63 Автор Сообщений: 25244 Откуда: Н.Новгород Дата регистрации: 13.02.2008	of63 17.09.20 20:04:22 Ура! Парсер ожил на адресах Сергея, послал ему результат на оценку. Вам только код могу показать. Маленькая программка - стартер, большая - собственно парсер рукописного адреса на последовательность полей {тип, наименование}. До КЛАДР пока не дошло, но это уже проще, он работает уверенно... () Надо же, картинку 100к можно прикладывать, а прогу только 50к, а она - 70к... Придется через джо.у. cloud.mail.ru

Re: Новый формат выгрузки для ФИАС

of63
Автор

Сообщений: 25244
Откуда: Н.Новгород
Дата регистрации: 13.02.2008

of63

17.09.20 20:04:22

Ура! Парсер ожил на адресах Сергея, послал ему результат на оценку. Вам только код могу показать. Маленькая программка - стартер, большая - собственно парсер рукописного адреса на последовательность полей {тип, наименование}. До КЛАДР пока не дошло, но это уже проще, он работает уверенно...

() Надо же, картинку 100к можно прикладывать, а прогу только 50к, а она - 70к...

Придется через джо.у.

cloud.mail.ru

Re: Новый формат выгрузки для ФИАС
ABB Сообщений: 149 Откуда: Санкт-Петербург Дата регистрации: 21.10.2006	ABB 23.09.21 21:23:05 Приказом ФНС России от 13.05.2020 № ЕД-7-6/329@ утвержден новый формат выгрузки сведений об адресах, содержащихся в Государственном адресном реестре (ФИАС), в электронной форме (прилагается). В целях ознакомления и подготовки информационных систем потребителей ФИАС к работе с новым форматом 29.05.2020 размещена первая выгрузка адресной информации. ФНС России планирует перейти на использование данного формата выгрузки адресных сведений с января 2021 года.

Re: Новый формат выгрузки для ФИАС

ABB

Сообщений: 149
Откуда: Санкт-Петербург
Дата регистрации: 21.10.2006

ABB

23.09.21 21:23:05

Приказом ФНС России от 13.05.2020 № ЕД-7-6/329@ утвержден новый формат выгрузки сведений об адресах, содержащихся в Государственном адресном реестре (ФИАС), в электронной форме (прилагается).
В целях ознакомления и подготовки информационных систем потребителей ФИАС к работе с новым форматом 29.05.2020 размещена первая выгрузка адресной информации.
ФНС России планирует перейти на использование данного формата выгрузки адресных сведений с января 2021 года.

Re: Новый формат выгрузки для ФИАС
Taran Сообщений: 13624 Откуда: Красноярск Дата регистрации: 16.01.2008	Taran 23.09.21 21:37:14 Январь 2021 вроде прошёл..

Re: Новый формат выгрузки для ФИАС
ABB Сообщений: 149 Откуда: Санкт-Петербург Дата регистрации: 21.10.2006	ABB 23.09.21 21:53:15 Обновления Полной Базы ФИАС (dbf) отсутствуют. КЛАДР еще есть.

Страницы: 1 2 3 4

:: Список Форумов•Список тем•Поиск•Войти

Извините, только зарегистрированные пользователи могут оставлять сообщения в этом форуме.

On-line: 25 PaulWist (Гостей: 24)