{"id":386736,"date":"2024-06-29T06:54:14","date_gmt":"2024-06-29T06:54:14","guid":{"rendered":"http:\/\/savepearlharbor.com\/?p=386736"},"modified":"-0001-11-30T00:00:00","modified_gmt":"-0001-11-29T21:00:00","slug":"","status":"publish","type":"post","link":"https:\/\/savepearlharbor.com\/?p=386736","title":{"rendered":"\u041a\u041b\u0410\u0414\u0420\u0438\u0440\u0443\u0435\u043c \u0430\u0434\u0440\u0435\u0441\u0430 \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u043b\u044c\u043d\u043e\u0439 \u0444\u043e\u0440\u043c\u044b (\u0447.1 \u2014 \u0438\u043c\u043f\u043e\u0440\u0442)<\/span>"},"content":{"rendered":"
<\/div>\n
\n
\n
\n
\n

\u0414\u043e\u0441\u0442\u0430\u0442\u043e\u0447\u043d\u043e \u0447\u0430\u0441\u0442\u043e \u043f\u0440\u0438 \u0440\u0430\u0431\u043e\u0442\u0435 \u0441 \u0432\u0432\u043e\u0434\u0438\u043c\u044b\u043c\u0438 \u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u0435\u043b\u0435\u043c \u0430\u0434\u0440\u0435\u0441\u043d\u044b\u043c\u0438 \u0434\u0430\u043d\u043d\u044b\u043c\u0438 \u0432\u043e\u0437\u043d\u0438\u043a\u0430\u0435\u0442 \u043d\u0435\u043e\u0431\u0445\u043e\u0434\u0438\u043c\u043e\u0441\u0442\u044c \u0441\u043d\u0430\u0447\u0430\u043b\u0430 \u043f\u043e\u0434\u0441\u043a\u0430\u0437\u0430\u0442\u044c \u0435\u043c\u0443, \u043a\u0430\u043a \u043f\u0440\u0430\u0432\u0438\u043b\u044c\u043d\u043e \u0441\u0432\u043e\u0439 \u0430\u0434\u0440\u0435\u0441 \u0443\u043a\u0430\u0437\u0430\u0442\u044c<\/strong>, \u0430 \u043f\u043e\u0442\u043e\u043c — \u043f\u043e\u043b\u0443\u0447\u0435\u043d\u043d\u0443\u044e \u0441\u0442\u0440\u043e\u043a\u0443 \u0430\u0434\u0440\u0435\u0441\u0430 \u043f\u0440\u0438\u0432\u0435\u0441\u0442\u0438 \u0432 \u043d\u0435\u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u043c\u0430\u0448\u0438\u043d\u043d\u043e-\u0447\u0438\u0442\u0430\u0435\u043c\u044b\u0439 \u0432\u0438\u0434<\/strong>.<\/p>\n

\u0422\u0430\u043a\u0438\u043c \u0432\u0438\u0434\u043e\u043c \u0443 \u043d\u0430\u0441 \u0432 \u0441\u0442\u0440\u0430\u043d\u0435 \u043c\u043e\u0436\u043d\u043e \u0441\u0447\u0438\u0442\u0430\u0442\u044c \u043a\u043e\u0434 \u043f\u043e \u0441\u043f\u0440\u0430\u0432\u043e\u0447\u043d\u0438\u043a\u0430\u043c \u041a\u041b\u0410\u0414\u0420<\/a> \u0438\u043b\u0438 \u0424\u0418\u0410\u0421<\/a>.<\/p>\n

\u041f\u0435\u0440\u0432\u044b\u0439 \u0438\u0437 \u043d\u0438\u0445 \u0443\u0436\u0435 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u043b\u0435\u0442 \u0441\u0447\u0438\u0442\u0430\u0435\u0442\u0441\u044f \u0443\u0441\u0442\u0430\u0440\u0435\u0432\u0430\u044e\u0449\u0438\u043c, \u043d\u043e \u043e\u0442\u043b\u0438\u0447\u0430\u0435\u0442\u0441\u044f \u0431\u043e\u043b\u0435\u0435 \u043f\u0440\u043e\u0441\u0442\u043e\u0439 \u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u043e\u0439 \u0438 \u0438\u0441\u0442\u043e\u0440\u0438\u0447\u0435\u0441\u043a\u0438 \u043f\u0440\u043e\u0434\u043e\u043b\u0436\u0430\u0435\u0442 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c\u0441\u044f \u0432\u043e \u043c\u043d\u043e\u0436\u0435\u0441\u0442\u0432\u0435 \u0441\u0438\u0441\u0442\u0435\u043c, \u043f\u043e\u0441\u043a\u043e\u043b\u044c\u043a\u0443 \u0432\u043f\u043e\u043b\u043d\u0435 \u043f\u043e\u0434\u0445\u043e\u0434\u0438\u0442 \u0434\u043b\u044f \u0431\u043e\u043b\u044c\u0448\u0438\u043d\u0441\u0442\u0432\u0430 \u0437\u0430\u0434\u0430\u0447.<\/p>\n

\u0414\u0430\u0432\u0430\u0439\u0442\u0435 \u043d\u0430\u0443\u0447\u0438\u043c\u0441\u044f \u0440\u0430\u0437\u0431\u0438\u0440\u0430\u0442\u044c \u0441\u0442\u0440\u043e\u043a\u0443 \u0430\u0434\u0440\u0435\u0441\u0430 «\u0442\u0443\u0434\u0430 \u0438 \u043e\u0431\u0440\u0430\u0442\u043d\u043e», \u0430 \u0437\u0430\u043e\u0434\u043d\u043e \u043f\u043e\u0437\u043d\u0430\u043a\u043e\u043c\u0438\u043c\u0441\u044f \u0441 \u043d\u0435\u043a\u043e\u0442\u043e\u0440\u044b\u043c\u0438 \u0430\u043b\u0433\u043e\u0440\u0438\u0442\u043c\u0438\u0447\u0435\u0441\u043a\u0438\u043c\u0438 \u043f\u043e\u0434\u0445\u043e\u0434\u0430\u043c\u0438 \u0438 \u0438\u0445 \u0440\u0435\u0430\u043b\u0438\u0437\u0430\u0446\u0438\u0435\u0439 \u043d\u0430 SQL.<\/p>\n

<\/figcaption><\/figure>\n

\u041f\u043e\u043b\u0443\u0447\u0435\u043d\u0438\u0435 \u0441\u043f\u0440\u0430\u0432\u043e\u0447\u043d\u0438\u043a\u0430 \u041a\u041b\u0410\u0414\u0420<\/h2>\n

\u0411\u0430\u0437\u0430 \u041a\u041b\u0410\u0414\u0420 \u0432 \u043d\u0430\u0441\u0442\u043e\u044f\u0449\u0435\u0435 \u0432\u0440\u0435\u043c\u044f \u0430\u0434\u043c\u0438\u043d\u0438\u0441\u0442\u0440\u0438\u0440\u0443\u0435\u0442\u0441\u044f \u0424\u041d\u0421 \u0438 \u043f\u0440\u0435\u0434\u0441\u0442\u0430\u0432\u043b\u0435\u043d\u0430 \u043d\u0430 \u0441\u0430\u0439\u0442\u0435 \u0413\u041d\u0418\u0412\u0426<\/a> \u0432 \u0432\u0438\u0434\u0435 \u043f\u0435\u0440\u0438\u043e\u0434\u0438\u0447\u0435\u0441\u043a\u0438 (\u043f\u0440\u0438\u043c\u0435\u0440\u043d\u043e \u0440\u0430\u0437 \u0432 \u043d\u0435\u0434\u0435\u043b\u044e) \u043e\u0431\u043d\u043e\u0432\u043b\u044f\u0435\u043c\u043e\u0433\u043e \u0430\u0440\u0445\u0438\u0432\u0430. \u0414\u043b\u044f \u043d\u0430\u0447\u0430\u043b\u0430 \u043c\u044b \u043d\u0430\u0443\u0447\u0438\u043c\u0441\u044f \u0435\u0433\u043e \u0441\u043a\u0430\u0447\u0438\u0432\u0430\u0442\u044c, \u0438\u0441\u043f\u0440\u0430\u0432\u043b\u044f\u0442\u044c \u043d\u0435\u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u043e\u0448\u0438\u0431\u043a\u0438 \u0438 \u043f\u0440\u0435\u043e\u0431\u0440\u0430\u0437\u043e\u0432\u044b\u0432\u0430\u0442\u044c \u0432 \u0431\u043e\u043b\u0435\u0435 \u043f\u043e\u0434\u0445\u043e\u0434\u044f\u0449\u0443\u044e \u0434\u043b\u044f \u043d\u0430\u0448\u0438\u0445 \u0437\u0430\u0434\u0430\u0447 \u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u0443.<\/p>\n

\u0414\u043b\u044f \u044d\u0442\u043e\u0433\u043e \u043d\u0430\u043c \u043f\u043e\u043d\u0430\u0434\u043e\u0431\u044f\u0442\u0441\u044f wget, p7zip, dbview, recode \u0438 psql<\/code>.<\/p>\n

\u0418\u0441\u0445\u043e\u0434\u043d\u044b\u0439 \u0430\u0440\u0445\u0438\u0432<\/h4>\n

\u0411\u0430\u0437\u0430 \u0432\u044b\u043a\u043b\u0430\u0434\u044b\u0432\u0430\u0435\u0442\u0441\u044f \u043d\u0430 \u0441\u0435\u0440\u0432\u0435\u0440\u0435 \u0413\u041d\u0418\u0412\u0426 \u0432\u0441\u0435\u0433\u0434\u0430 \u043f\u043e \u043e\u0434\u043d\u043e\u043c\u0443 \u0438 \u0442\u043e\u043c\u0443 \u0436\u0435 \u0430\u0434\u0440\u0435\u0441\u0443<\/strong> \u0432 \u0432\u0438\u0434\u0435 7z-\u0430\u0440\u0445\u0438\u0432\u0430 Base.7z<\/a> — \u0432\u0435\u0440\u0441\u0438\u0438 \u043e\u0442\u043b\u0438\u0447\u0430\u044e\u0442\u0441\u044f \u0434\u0440\u0443\u0433 \u043e\u0442 \u0434\u0440\u0443\u0433\u0430 \u0442\u043e\u043b\u044c\u043a\u043e \u0437\u0430\u0433\u043e\u043b\u043e\u0432\u043a\u043e\u043c Last-Modified<\/code> \u0432 \u043e\u0442\u0432\u0435\u0442\u0435 \u0441\u0435\u0440\u0432\u0435\u0440\u0430.<\/p>\n

\u041f\u0440\u0438 \u044d\u0442\u043e\u043c \u0441\u0435\u0440\u0432\u0435\u0440 \u0434\u043e\u0441\u0442\u0430\u0442\u043e\u0447\u043d\u043e \u043d\u0435\u0440\u0432\u043d\u043e \u0440\u0435\u0430\u0433\u0438\u0440\u0443\u0435\u0442 \u043d\u0430 \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u044c \u0437\u0430\u0433\u0440\u0443\u0437\u043a\u0438 \u0438 \u043d\u0435 \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u0438\u0432\u0430\u0435\u0442 HEAD<\/code>-\u0437\u0430\u043f\u0440\u043e\u0441\u044b, \u0443\u0432\u044b. \u041f\u043e\u044d\u0442\u043e\u043c\u0443 \u043d\u0430\u043c \u043f\u0440\u0438\u0434\u0435\u0442\u0441\u044f \u0441\u043a\u0430\u0447\u0438\u0432\u0430\u0442\u044c \u0430\u0440\u0445\u0438\u0432 \u0435\u0436\u0435\u0441\u0443\u0442\u043e\u0447\u043d\u043e \u043f\u043e\u043b\u043d\u043e\u0441\u0442\u044c\u044e, \u043d\u043e \u0447\u0442\u043e\u0431\u044b \u0441\u043d\u0438\u0437\u0438\u0442\u044c \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0443 \u043d\u0430 \u0441\u0435\u0440\u0432\u0435\u0440 \u0443\u0441\u0442\u0430\u043d\u043e\u0432\u0438\u043c \u043e\u0433\u0440\u0430\u043d\u0438\u0447\u0435\u043d\u0438\u0435 \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u0438, \u0430 \u0437\u0430\u0433\u043e\u043b\u043e\u0432\u043a\u0438 \u043e\u0442\u0432\u0435\u0442\u0430 \u0441\u043e\u0445\u0440\u0430\u043d\u0438\u043c \u0438 \u0440\u0430\u0437\u0431\u0435\u0440\u0435\u043c \u043e\u0442\u0434\u0435\u043b\u044c\u043d\u043e:<\/p>\n

wget -S https:\/\/gnivc.ru\/html\/gnivcsoft\/KLADR\/Base.7z --limit-rate=8k 2>.hdr<\/code><\/pre>\n
\u0412 \u0441\u0433\u0435\u043d\u0435\u0440\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u043e\u043c .hdr<\/code> \u043d\u0430\u0441 \u0431\u0443\u0434\u0435\u0442 \u0438\u043d\u0442\u0435\u0440\u0435\u0441\u043e\u0432\u0430\u0442\u044c \u044d\u0442\u0430 \u0441\u0442\u0440\u043e\u043a\u0430:<\/p>\n
...   Last-Modified: Thu, 05 Aug 2021 09:28:39 GMT ...<\/code><\/pre>\n
\u0427\u0442\u043e\u0431\u044b \u043d\u0435 \u043f\u044b\u0442\u0430\u0442\u044c\u0441\u044f \u043e\u0431\u0440\u0430\u0431\u0430\u0442\u044b\u0432\u0430\u0442\u044c \u0430\u0440\u0445\u0438\u0432 \u0438 \u043e\u0431\u043d\u043e\u0432\u043b\u044f\u0442\u044c \u0434\u0430\u043d\u043d\u044b\u0435 \u0432 \u043d\u0430\u0448\u0435\u0439 \u0431\u0430\u0437\u0435 \u043f\u043e\u0432\u0442\u043e\u0440\u043d\u043e, \u0431\u0443\u0434\u0435\u043c \u0441\u043e\u0445\u0440\u0430\u043d\u044f\u0442\u044c \u0432 \u043d\u0435\u0439 \u044d\u0442\u043e\u0442 \u0442\u0430\u0439\u043c\u0441\u0442\u0430\u043c\u043f \u0434\u043b\u044f \u043f\u043e\u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0438\u0445 \u0441\u0440\u0430\u0432\u043d\u0435\u043d\u0438\u0439.<\/p>\n
\u0415\u0441\u043b\u0438 \u0436\u0435 \u0442\u0430\u0439\u043c\u0441\u0442\u0430\u043c\u043f \u0444\u0430\u0439\u043b\u0430 \u043d\u0435 \u0441\u043e\u0432\u043f\u0430\u043b \u0441 \u0441\u043e\u0445\u0440\u0430\u043d\u0435\u043d\u043d\u044b\u043c, \u0440\u0430\u0441\u043f\u0430\u043a\u0443\u0435\u043c \u043f\u043e\u043b\u0443\u0447\u0435\u043d\u043d\u044b\u0439 \u0430\u0440\u0445\u0438\u0432:<\/p>\n
p7zip -d Base.7z<\/code><\/pre>\n
\u0420\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u043e\u043c \u0431\u0443\u0434\u0435\u0442 7 DBF-\u0444\u0430\u0439\u043b\u043e\u0432 \u0432 DOS-\u043a\u043e\u0434\u0438\u0440\u043e\u0432\u043a\u0435:<\/p>\n
Extracting  ALTNAMES.DBF Extracting  DOMA.DBF Extracting  FLAT.DBF Extracting  KLADR.DBF Extracting  NAMEMAP.DBF Extracting  SOCRBASE.DBF Extracting  STREET.DBF<\/code><\/pre>\n
\u041f\u0435\u0440\u0435\u0431\u0435\u0440\u0435\u043c \u0432\u0441\u0435 \u044d\u0442\u0438 \u0444\u0430\u0439\u043b\u044b, \u0444\u043e\u0440\u043c\u0438\u0440\u0443\u044f \u0435\u0434\u0438\u043d\u044b\u0439 \u0441\u043a\u0440\u0438\u043f\u0442 \u0432\u044b\u0433\u0440\u0443\u0437\u043a\u0438 \u0434\u0430\u043d\u043d\u044b\u0445 \u0447\u0435\u0440\u0435\u0437 psql<\/code> \u0432 COPY-\u0444\u043e\u0440\u043c\u0430\u0442\u0435:<\/p>\n
# \u043f\u043e\u043b\u0443\u0447\u0430\u0435\u043c \u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u0443 \u043f\u043e\u043b\u0435\u0439 DBF #   | DOS2WIN #   | \u0431\u0435\u0440\u0435\u043c \u0442\u043e\u043b\u044c\u043a\u043e \u043e\u043f\u0438\u0441\u0430\u043d\u0438\u044f \u043f\u043e\u043b\u0435\u0439 (skip 2 \u0441\u0442\u0440\u043e\u043a\u0438) #   | \u043e\u0441\u0442\u0430\u0432\u043b\u044f\u0435\u043c \u0442\u043e\u043b\u044c\u043a\u043e \u0438\u0445 \u0438\u043c\u0435\u043d\u0430 dbview -b -t -e -o -r ALTNAMES.DBF \\   | recode CP866..CP1251 \\   | tail -n+2 \\   | xargs -l \\   | egrep -io \"^[a-z0-9_]+\"  # ... \u0444\u043e\u0440\u043c\u0438\u0440\u0443\u0435\u043c SQL-\u0437\u0430\u0433\u043e\u043b\u043e\u0432\u043e\u043a \u0432\u0440\u0435\u043c\u0435\u043d\u043d\u043e\u0439 \u0442\u0430\u0431\u043b\u0438\u0446\u044b  # \u043f\u043e\u043b\u0443\u0447\u0430\u0435\u043c \u0434\u0430\u043d\u043d\u044b\u0435 DBF, \u0440\u0430\u0437\u0434\u0435\u043b\u0435\u043d\u043d\u044b\u0435 '~' #   | \u0441\u043a\u043b\u0435\u0438\u0432\u0430\u0435\u043c \"\u0432\u0438\u0441\u044f\u0449\u0438\u0435\" \u0441\u0442\u0440\u043e\u043a\u0438 ([\\t\\r\\n] \u0432 \u0442\u0435\u043b\u0435 \u043f\u043e\u043b\u044f \u0434\u0430\u043d\u043d\u044b\u0445) #   | DOS2WIN #   | \u0443\u0431\u0438\u0440\u0430\u0435\u043c \u0432\u0441\u0435 '\\t', \u0443\u0431\u0438\u0440\u0430\u0435\u043c \u043a\u043e\u043d\u0446\u0435\u0432\u044b\u0435 '~', \u0437\u0430\u043c\u0435\u043d\u044f\u0435\u043c '~'->'\\t' dbview -d~ -b -t ALTNAMES.DBF \\   | sed -e :a -e '\/[\\r\\t]$\/N; s\/[\\r\\t]\\n\/\/g; ta' \\   | recode CP866..CP1251 \\   | sed -e 's\/\\t\/\/g; s\/~\\r\/\/g; s\/~,\/,\/g; s\/~\/\\t\/g' >>.sql<\/code><\/pre>\n
\u041f\u043e \u0438\u0442\u043e\u0433\u0443 \u043c\u044b \u043f\u043e\u043b\u0443\u0447\u0430\u0435\u043c \u0431\u043e\u043b\u044c\u0448\u043e\u0439-\u0431\u043e\u043b\u044c\u0448\u043e\u0439 SQL-\u0444\u0430\u0439\u043b \u043f\u0440\u0438\u043c\u0435\u0440\u043d\u043e \u0442\u0430\u043a\u043e\u0433\u043e \u0432\u0438\u0434\u0430:<\/p>\n
CREATE TEMPORARY TABLE \"STREET.DBF\"(   \"NAME\"     varchar,   \"SOCR\"     varchar,   \"CODE\"     varchar,   \"INDEX\"     varchar,   \"GNINMB\"     varchar,   \"UNO\"     varchar,   \"OCATD\"     varchar ); COPY \"STREET.DBF\"(   \"NAME\",   \"SOCR\",   \"CODE\",   \"INDEX\",   \"GNINMB\",   \"UNO\",   \"OCATD\" ) FROM stdin; \u0410\u0431\u0430\u0434\u0437\u0435\u0445\u0441\u043a\u0430\u044f     \u0443\u043b      01000001000000100       385013  0105            79401000000 \u0410\u0431\u0440\u0438\u043a\u043e\u0441\u043e\u0432\u0430\u044f     \u0443\u043b      01000001000000200       385013  0105            79401000000 \u0410\u0432\u0438\u0430\u0446\u0438\u043e\u043d\u043d\u044b\u0439     \u043f\u0435\u0440     01000001000000300       385006  0105            79401000000 \u0410\u0432\u0442\u043e\u0434\u043e\u0440\u043e\u0433\u0430 7    \u0443\u043b      01000001000000400       385019  0105            79401000000 ...<\/code><\/pre>\n
\u0418\u043c\u043f\u043e\u0440\u0442 \u0434\u0430\u043d\u043d\u044b\u0445<\/h2>\n
\u041f\u043e\u0441\u043a\u043e\u043b\u044c\u043a\u0443 \u0441\u0430\u043c\u0438 \u0434\u0430\u043d\u043d\u044b\u0435 \u0432 \u0442\u0430\u0431\u043b\u0438\u0446\u0430\u0445 \u0430\u0440\u0445\u0438\u0432\u0430 \u043f\u0440\u0435\u0434\u0441\u0442\u0430\u0432\u043b\u0435\u043d\u044b \u0432 DOS-\u043a\u043e\u0434\u0438\u0440\u043e\u0432\u043a\u0435, \u043d\u043e \u044d\u0442\u043e \u043a\u0430\u043a-\u0442\u043e \u0441\u043e\u0432\u0441\u0435\u043c \u0443\u0436 \u043d\u0435\u043c\u043e\u0434\u043d\u043e, \u0440\u0430\u0437\u0432\u0435\u0440\u043d\u0435\u043c \u043d\u0430\u0448\u0443 \u0431\u0430\u0437\u0443 \u0432 WIN1251 — \u043e\u043d\u0430 \u0442\u043e\u0436\u0435 \u043e\u0434\u043d\u043e\u0431\u0430\u0439\u0442\u043e\u0432\u0430\u044f, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 \u0432\u0441\u0435 \u043f\u043e\u0438\u0441\u043a\u0438 \u0434\u0430\u043d\u043d\u044b\u0445 \u043d\u0435 \u0441\u0442\u0430\u043d\u0443\u0442 \u0442\u044f\u0436\u0435\u043b\u0435\u0435:<\/p>\n
CREATE DATABASE kladr   WITH ENCODING='WIN1251'     OWNER=postgres     TEMPLATE=template0     LC_COLLATE='ru_RU.CP1251'     LC_CTYPE='ru_RU.CP1251'     CONNECTION LIMIT=-1;<\/code><\/pre>\n
-- \u043b\u043e\u0433 \u043f\u0440\u043e\u0432\u0435\u0440\u043e\u043a \u043e\u0431\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0439 CREATE TABLE kladr_chk(   id     serial       PRIMARY KEY,   ts     timestamp       DEFAULT now(),   hostname     varchar );  -- \u043b\u043e\u0433 \u043f\u0440\u043e\u0432\u0435\u0434\u0435\u043d\u043d\u044b\u0445 \u043e\u0431\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0439 CREATE TABLE kladr_upd(   id     serial       PRIMARY KEY,   ts     timestamp       DEFAULT now(),   lm     varchar,   hostname     varchar );<\/code><\/pre>\n
\u0417\u0430\u0449\u0438\u0442\u0430 \u043e\u0442 \u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u044c\u043d\u043e\u0439 \u0437\u0430\u0433\u0440\u0443\u0437\u043a\u0438<\/h4>\n
\u041f\u043e\u0441\u043a\u043e\u043b\u044c\u043a\u0443 \u0438\u043c\u043f\u043e\u0440\u0442 \u0434\u0430\u043d\u043d\u044b\u0445 \u0438\u0437 \u0413\u041d\u0418\u0412\u0426 \u0443 \u043d\u0430\u0441 \u043c\u043e\u0436\u0435\u0442 \u043f\u0440\u043e\u0445\u043e\u0434\u0438\u0442\u044c \u0434\u043b\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0435 \u0432\u0440\u0435\u043c\u044f \u0438 \u0438\u043d\u0438\u0446\u0438\u0438\u0440\u043e\u0432\u0430\u0442\u044c\u0441\u044f \u0441 \u0440\u0430\u0437\u043d\u044b\u0445 \u0438\u0441\u0442\u043e\u0447\u043d\u0438\u043a\u043e\u0432 (\u043c\u0430\u043b\u043e \u043b\u0438, \u043e\u0434\u0438\u043d \u0438\u0437 \u0438\u043d\u0441\u0442\u0430\u043d\u0441\u043e\u0432 \u043f\u0440\u0438\u043a\u0430\u0436\u0435\u0442 \u0434\u043e\u043b\u0433\u043e \u0436\u0438\u0442\u044c), \u043d\u0435\u043f\u043b\u043e\u0445\u043e \u0431\u044b \u043f\u043e\u0437\u0430\u0431\u043e\u0442\u0438\u0442\u044c\u0441\u044f \u043e \u0437\u0430\u0449\u0438\u0442\u0435 \u0434\u0430\u043d\u043d\u044b\u0445, \u0447\u0442\u043e\u0431\u044b \u043e\u043d\u0438 \u043d\u0435 \u043f\u043e\u0441\u0442\u0440\u0430\u0434\u0430\u043b\u0438 — \u0434\u043e\u043f\u0438\u0441\u044b\u0432\u0430\u0435\u043c \u0432\u0441\u0435 \u044d\u0442\u043e \u0432 \u043d\u0430\u0447\u0430\u043b\u0435 .sql<\/code>:<\/p>\n
-- \u0437\u0430\u0449\u0438\u0442\u0430 \u043e\u0442 \u0430\u0432\u0442\u043e\u043e\u0442\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u044f \u043f\u043e \u0442\u0430\u0439\u043c\u0430\u0443\u0442\u0443 SET statement_timeout = 0; -- \u0432\u043a\u043b\u044e\u0447\u0430\u0435\u043c WIN-\u043a\u043e\u0434\u0438\u0440\u043e\u0432\u043a\u0443 SET client_encoding = 'WIN1251'; -- \u0432\u043a\u043b\u044e\u0447\u0430\u0435\u043c application_name \u0434\u043b\u044f \u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433\u0430 \u0430\u043a\u0442\u0438\u0432\u043d\u043e\u0433\u043e \u043f\u0440\u043e\u0446\u0435\u0441\u0441\u0430 SET application_name = 'kladr : import [`hostname`]'; -- \u0432\u043a\u043b\u044e\u0447\u0430\u0435\u043c \"\u043f\u043e\u0441\u043b\u0435\u0434\u043e\u0432\u0430\u0442\u0435\u043b\u044c\u043d\u044b\u0435\" \u0442\u0440\u0430\u043d\u0437\u0430\u043a\u0446\u0438\u0438 BEGIN TRANSACTION ISOLATION LEVEL SERIALIZABLE;   -- \u0431\u043b\u043e\u043a\u0438\u0440\u0443\u0435\u043c \u044d\u043a\u0441\u043a\u043b\u044e\u0437\u0438\u0432\u043d\u043e upd-\u0442\u0430\u0431\u043b\u0438\u0446\u0443 \u0434\u043b\u044f \"\u0437\u0430\u043c\u043e\u0440\u0430\u0436\u0438\u0432\u0430\u043d\u0438\u044f\" \u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u044c\u043d\u044b\u0445 \u043e\u043f\u0435\u0440\u0430\u0446\u0438\u0439   LOCK TABLE kladr_upd IN EXCLUSIVE MODE NOWAIT;   -- \u0441\u0431\u0440\u0430\u0441\u044b\u0432\u0430\u0435\u043c \u0438\u043d\u0444\u043e\u0440\u043c\u0430\u0446\u0438\u044e \u0432 \u0442\u0430\u0431\u043b\u0438\u0446\u0443 \u043f\u0440\u043e\u0442\u043e\u043a\u043e\u043b\u0430 \u043f\u0440\u043e\u0432\u0435\u0440\u043e\u043a   INSERT INTO kladr_chk(hostname) VALUES('`hostname`');   -- \u0441\u0440\u0430\u0432\u043d\u0438\u0432\u0430\u0435\u043c Last-Modified \u0437\u0430\u0433\u0440\u0443\u0436\u0435\u043d\u043d\u043e\u0433\u043e \u0444\u0430\u0439\u043b\u0430 \u0438 \u0441\u043e\u0441\u0442\u043e\u044f\u043d\u0438\u044f \u0432 \u0431\u0430\u0437\u0435   SELECT lm FROM kladr_upd ORDER BY id DESC LIMIT 1;   -- \u0435\u0441\u043b\u0438 lm \u043d\u0435 \u0441\u043e\u0432\u043f\u0430\u0434\u0430\u0435\u0442     -- \u0434\u043b\u044f \u043a\u0430\u0436\u0434\u043e\u0433\u043e DBF     CREATE TEMPORARY TABLE ...;     COPY ... FROM stdin;     ...     \\.     --     -- \u043e\u0431\u043d\u043e\u0432\u043b\u044f\u0435\u043c \"\u0432\u0435\u0440\u0441\u0438\u044e\" \u043d\u0430\u0448\u0435\u0439 \u0431\u0430\u0437\u044b     INSERT INTO kladr_upd(lm, hostname) VALUES('$lm', '`hostname`'); COMMIT;<\/code><\/pre>\n
\u0412 \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u0435 \u0442\u0430\u043a\u043e\u0433\u043e \u043f\u043e\u0434\u0445\u043e\u0434\u0430 \u043c\u044b \u0432\u0441\u0435\u0433\u0434\u0430 \u0437\u043d\u0430\u0435\u043c, \u043a\u0442\u043e \u0438 \u043a\u043e\u0433\u0434\u0430 \u043f\u0440\u043e\u0432\u0435\u0440\u044f\u043b \u043d\u0430\u043b\u0438\u0447\u0438\u0435 \u043e\u0431\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0439, \u0438 \u043a\u043e\u043c\u0443 \u044d\u0442\u043e \u0443\u0434\u0430\u043b\u043e\u0441\u044c.<\/p>\n
\u0421\u043e\u0431\u0435\u0440\u0435\u043c \u0432\u0441\u0435 \u0432\u043c\u0435\u0441\u0442\u0435 \u0432 \u0435\u0434\u0438\u043d\u044b\u0439 \u0441\u043a\u0440\u0438\u043f\u0442:<\/p>\n
\n\u041c\u043d\u043e\u0433\u043e bash-\u043a\u043e\u0434\u0430<\/summary>\n
\n
#!\/bin\/sh  . `dirname \"$0\"`\/..\/app.conf  echo \"`date '+%F %T'` ==== Connecting to DB : $pghost:$pgport:$pgbase:$pguser\" # \u0442\u0435\u0441\u0442\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u0435 \u043f\u043e\u0434\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u044f \u043a \u0411\u0414 psql -t -c 'SELECT 1' -h $pghost -p $pgport -U $pguser -w $pgbase 1>\/dev\/null 2>\/dev\/null rv=\"$?\" if [ \"$rv\" != \"0\" ]; then   echo \"$pghost:$pgport:$pgbase:$pguser:$pgpass\" >>~\/.pgpass   chmod 0600 ~\/.pgpass   psql -t -c 'SELECT 1' -h $pghost -p $pgport -U $pguser -w $pgbase 1>\/dev\/null 2>\/dev\/null   rv=\"$?\" fi  if [ \"$rv\" != \"0\" ]; then   echo \"DB not connected : $pghost:$pgport:$pgbase:$pguser\"   exit 1 fi  # \u0438\u043d\u0438\u0446\u0438\u0430\u043b\u0438\u0437\u0430\u0446\u0438\u044f \u043a\u0430\u0442\u0430\u043b\u043e\u0433\u0430 _dbf #_dbf=`mktemp -d` mkdir .\/dbf && chmod 777 .\/dbf _dbf=`readlink -f .\/dbf` rm -rf ${_dbf} 2>\/dev\/null mkdir ${_dbf} 2>\/dev\/null touch ${_dbf}\/.sql dir=`dirname \"$0\"` dir=`readlink -f $dir`  ## \u0438\u043c\u043f\u043e\u0440\u0442 \u0431\u0430\u0437\u044b \u041a\u041b\u0410\u0414\u0420'\u0430 \u0432 _dbf\/.sql # \u0437\u0430\u0449\u0438\u0442\u0430 \u043e\u0442 \u0430\u0432\u0442\u043e\u043e\u0442\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u044f \u043f\u043e \u0442\u0430\u0439\u043c\u0430\u0443\u0442\u0443 echo \"SET statement_timeout = 0;\" >>${_dbf}\/.sql # \u0432\u043a\u043b\u044e\u0447\u0430\u0435\u043c WIN-\u043a\u043e\u0434\u0438\u0440\u043e\u0432\u043a\u0443 echo \"SET client_encoding = 'WIN1251';\" >>${_dbf}\/.sql # \u0432\u043a\u043b\u044e\u0447\u0430\u0435\u043c application_name \u0434\u043b\u044f \u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433\u0430 \u0430\u043a\u0442\u0438\u0432\u043d\u043e\u0433\u043e \u043f\u0440\u043e\u0446\u0435\u0441\u0441\u0430 echo \"SET application_name = 'kladr : import [`hostname`]';\" >>${_dbf}\/.sql # \u0432\u043a\u043b\u044e\u0447\u0430\u0435\u043c \"\u043f\u043e\u0441\u043b\u0435\u0434\u043e\u0432\u0430\u0442\u0435\u043b\u044c\u043d\u044b\u0435\" \u0442\u0440\u0430\u043d\u0437\u0430\u043a\u0446\u0438\u0438 echo \"BEGIN TRANSACTION ISOLATION LEVEL SERIALIZABLE;\" >>${_dbf}\/.sql # \u0431\u043b\u043e\u043a\u0438\u0440\u0443\u0435\u043c \u044d\u043a\u0441\u043a\u043b\u044e\u0437\u0438\u0432\u043d\u043e upd-\u0442\u0430\u0431\u043b\u0438\u0446\u0443 \u0434\u043b\u044f \"\u0437\u0430\u043c\u043e\u0440\u0430\u0436\u0438\u0432\u0430\u043d\u0438\u044f\" \u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u044c\u043d\u044b\u0445 \u043e\u043f\u0435\u0440\u0430\u0446\u0438\u0439 echo \"LOCK TABLE kladr_upd IN EXCLUSIVE MODE NOWAIT;\" >>${_dbf}\/.sql # \u0441\u0431\u0440\u0430\u0441\u044b\u0432\u0430\u0435\u043c \u0438\u043d\u0444\u043e\u0440\u043c\u0430\u0446\u0438\u044e \u0432 \u0442\u0430\u0431\u043b\u0438\u0446\u0443 \u043f\u0440\u043e\u0442\u043e\u043a\u043e\u043b\u0430 \u043f\u0440\u043e\u0432\u0435\u0440\u043e\u043a echo \"INSERT INTO kladr_chk(hostname) VALUES('`hostname`');\" >>${_dbf}\/.sql  # \u0438\u043d\u0438\u0446\u0438\u0430\u043b\u0438\u0437\u0430\u0446\u0438\u044f \u0432\u0440\u0435\u043c\u0435\u043d\u043d\u043e\u0433\u043e \u043a\u0430\u0442\u0430\u043b\u043e\u0433\u0430 \u0438\u043c\u043f\u043e\u0440\u0442\u0430 #tmp=`mktemp -d` mkdir .\/tmp && chmod 777 .\/tmp tmp=`readlink -f .\/tmp` cd $tmp  echo \"`date '+%F %T'` ==== Downloading : $source\" # \u0437\u0430\u0433\u0440\u0443\u0437\u043a\u0430 \u0431\u0430\u0437\u044b \u041a\u041b\u0410\u0414\u0420'\u0430 \u0441 \u043e\u0433\u0440\u0430\u043d\u0438\u0447\u0435\u043d\u0438\u0435\u043c \u043f\u043e \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u0438 \u0438\u043b\u0438 \u0431\u0435\u0437 wget -S $source --limit-rate=8k 2>.hdr # wget -S $source 2>.hdr  echo \"`date '+%F %T'` ==== Comparing 'Last-Modified'\" rc=`cat .hdr | egrep 'HTTP\/[0-9]\\.[0-9] [0-9]{3}' | sed -e 's\/^[ ]*HTTP\\\/[0-9]\\.[0-9][ ]*\\([0-9]*\\).*$\/\\1\/i' | egrep -v '301' | head -1` lm=`cat .hdr | egrep 'Last-Modified' | sed -e 's\/^[ ]*Last-Modified:[ ]*\/\/i' | head -1` echo \"  -- HTTP code : $rc\" echo \"  -- HTTP 'Last-Modified' : $lm\" pglm=`psql -h $pghost -p $pgport -U $pguser -w -t -c 'SELECT lm FROM kladr_upd ORDER BY id DESC LIMIT 1' $pgbase | sed -e 's\/^[ ]*\/\/i'` echo \"  -- PGDB 'Last-Modified' : $pglm\"  if [ \"$rc\" = \"200\" ] && [ \"$lm\" != \"\" ] && [ \"$lm\" != \"$pglm\" ]; then   # \u0440\u0430\u0441\u043f\u0430\u043a\u043e\u0432\u043a\u0430 \u0431\u0430\u0437\u044b   echo \"`date '+%F %T'` ==== Unpacking 7z\"   p7zip -d Base.7z 1>\/dev\/null 2>\/dev\/null   cp $tmp\/* ${_dbf}   cd $dir    echo \"`date '+%F %T'` ==== Processing DBF\"   # \u043e\u0431\u0440\u0430\u0431\u043e\u0442\u043a\u0430 \u0432\u0441\u0435\u0445 .DBF   for dbf in `find ${_dbf} -maxdepth 1 -iname '*.DBF'`; do     dbfn=`basename $dbf | tr '[:lower:]' '[:upper:]'`     # \u043f\u0440\u0435\u043e\u0431\u0440\u0430\u0437\u043e\u0432\u0430\u043d\u0438\u0435 \u0437\u0430\u0433\u043e\u043b\u043e\u0432\u043a\u043e\u0432     echo \"  -- DBF : $dbfn\"     echo \"    -- header\"     # \u043f\u043e\u043b\u0443\u0447\u0430\u0435\u043c \u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u0443 \u043f\u043e\u043b\u0435\u0439 DBF | DOS2WIN | \u0431\u0435\u0440\u0435\u043c \u0442\u043e\u043b\u044c\u043a\u043e \u043e\u043f\u0438\u0441\u0430\u043d\u0438\u044f \u043f\u043e\u043b\u0435\u0439 (skip 2 \u0441\u0442\u0440\u043e\u043a\u0438) | \u043e\u0441\u0442\u0430\u0432\u043b\u044f\u0435\u043c \u0442\u043e\u043b\u044c\u043a\u043e \u0438\u0445 \u0438\u043c\u0435\u043d\u0430     fld=`dbview -b -t -e -o -r $dbf | recode CP866..CP1251 | tail -n+2 | xargs -l | egrep -io \"^[a-z0-9_]+\"`     echo \"CREATE TEMPORARY TABLE \\\"$dbfn\\\"(\" >>${_dbf}\/.sql     fl=\"0\"     for i in ${fld}; do       [ \"$fl\" = \"1\" ] && echo ',' >>${_dbf}\/.sql       echo -n \"  \\\"$i\\\"\\n    varchar\" >>${_dbf}\/.sql       fl=\"1\"     done     echo \");\" >>${_dbf}\/.sql     # \u043f\u0440\u0435\u043e\u0431\u0440\u0430\u0437\u043e\u0432\u0430\u043d\u0438\u0435 \u0434\u0430\u043d\u043d\u044b\u0445     echo \"    -- data\"     echo \"COPY \\\"$dbfn\\\"(\" >>${_dbf}\/.sql     fl=\"0\"     for i in ${fld}; do       [ \"$fl\" = \"1\" ] && echo ',' >>${_dbf}\/.sql       echo -n \"  \\\"$i\\\"\" >>${_dbf}\/.sql       fl=\"1\"     done     echo \") FROM stdin;\" >>${_dbf}\/.sql     # \u043f\u043e\u043b\u0443\u0447\u0430\u0435\u043c \u0434\u0430\u043d\u043d\u044b\u0435 DBF, \u0440\u0430\u0437\u0434\u0435\u043b\u0435\u043d\u043d\u044b\u0435 '~' | \u0441\u043a\u043b\u0435\u0438\u0432\u0430\u0435\u043c \"\u0432\u0438\u0441\u044f\u0449\u0438\u0435\" \u0441\u0442\u0440\u043e\u043a\u0438 ([\\t\\r\\n] \u0432 \u0442\u0435\u043b\u0435 \u043f\u043e\u043b\u044f \u0434\u0430\u043d\u043d\u044b\u0445) | DOS2WIN | \u0443\u0431\u0438\u0440\u0430\u0435\u043c \u0432\u0441\u0435 '\\t' | \u0443\u0431\u0438\u0440\u0430\u0435\u043c \u043a\u043e\u043d\u0446\u0435\u0432\u044b\u0435 ';' | \u0437\u0430\u043c\u0435\u043d\u044f\u0435\u043c ';'->'\\t'     dbview -d~ -b -t $dbf | sed -e :a -e '\/[\\r\\t]$\/N; s\/[\\r\\t]\\n\/\/g; ta' | recode CP866..CP1251 | sed -e 's\/\\t\/\/g; s\/~\\r\/\/g; s\/~,\/,\/g; s\/~\/\\t\/g' >>${_dbf}\/.sql     echo \"\\\\.\" >>${_dbf}\/.sql   done    # \u0438\u043d\u0442\u0435\u0433\u0440\u0430\u0446\u0438\u044f \u043f\u0440\u043e\u0446\u0435\u0434\u0443\u0440\u044b \u043e\u0431\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u044f \u0431\u0430\u0437\u044b - \u043f\u043e\u0441\u043b\u0435\u0434\u043e\u0432\u0430\u0442\u0435\u043b\u044c\u043d\u043e\u0435 \u043f\u043e\u0434\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435 \u0432\u0441\u0435\u0445 sql-\u0444\u0430\u0439\u043b\u043e\u0432 \u0438\u043c\u043f\u043e\u0440\u0442\u0430   ls ${dir}\/import\/*.sql | xargs -l readlink -f | xargs -l -I{} cat {} >>${_dbf}\/.sql   # \u0432\u0441\u0442\u0430\u0432\u043a\u0430 \u043c\u0435\u0442\u043a\u0438 \u043e\u0431\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u044f   echo \"INSERT INTO kladr_upd(lm, hostname) VALUES('$lm', '`hostname`');\" >>${_dbf}\/.sql fi echo \"COMMIT;\" >>${_dbf}\/.sql  cd $dir rm -rf $tmp  echo \"`date '+%F %T'` ==== Processing SQL\" psql -h $pghost -p $pgport -U $pguser -w -f ${_dbf}\/.sql $pgbase rv=\"$?\"  if [ \"$rv\" = \"0\" ]; then   rm -rf ${_dbf}\/ 2>\/dev\/null fi echo \"`date '+%F %T'` ==== Exit : $rv\"  exit \"$rv\"<\/code><\/pre>\n<\/div>\n<\/details>\n
\u0422\u0443\u0442 \u043c\u043e\u0436\u043d\u043e \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c \u0434\u043b\u044f \u0438\u043c\u043f\u043e\u0440\u0442\u0430 \u0438 \u0432\u0440\u0435\u043c\u0435\u043d\u043d\u044b\u0435 \u043a\u0430\u0442\u0430\u043b\u043e\u0433\u0438, \u0441\u043e\u0437\u0434\u0430\u0432\u0430\u0435\u043c\u044b\u0435 \u0447\u0435\u0440\u0435\u0437 mktemp<\/code>, \u043d\u043e \u0445\u0432\u0430\u0442\u0438\u0442 \u043b\u0438 \u0443 \u0432\u0430\u0441 \u043c\u0435\u0441\u0442\u0430 \u043d\u0430 tmp<\/code>-\u0440\u0430\u0437\u0434\u0435\u043b\u0435?..<\/p>\n
\u0420\u0435\u043a\u0432\u0438\u0437\u0438\u0442\u044b \u0434\u043e\u0441\u0442\u0443\u043f\u0430 \u043a \u0431\u0430\u0437\u0435 \u0438 \u041a\u041b\u0410\u0414\u0420-\u0438\u0441\u0442\u043e\u0447\u043d\u0438\u043a \u0432 \u043d\u0430\u0448\u0435\u043c \u0441\u043b\u0443\u0447\u0430\u0435 \u0431\u0443\u0434\u0443\u0442 \u0445\u0440\u0430\u043d\u0438\u0442\u044c\u0441\u044f \u0432 app.conf<\/code>:<\/p>\n
pghost=\"kladr.tensor.ru\" pgport=\"5432\" pguser=\"postgres\" pgpass=\"postgres\" pgbase=\"kladr\" source=\"https:\/\/gnivc.ru\/html\/gnivcsoft\/KLADR\/Base.7z\"<\/code><\/pre>\n
\u041f\u043e\u0438\u0441\u043a\u043e\u0432\u0430\u044f \u0431\u0430\u0437\u0430<\/h2>\n
\u0410 \u0437\u0430\u0447\u0435\u043c \u043d\u0430\u043c \u0432\u043e\u043e\u0431\u0449\u0435 \u043d\u0443\u0436\u043d\u0430 \u043a\u0430\u043a\u0430\u044f-\u0442\u043e \u0434\u0440\u0443\u0433\u0430\u044f \u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u0430? \u0427\u0435\u043c \u043d\u0430\u0441 \u043d\u0435 \u0443\u0441\u0442\u0440\u0430\u0438\u0432\u0430\u044e\u0442 \u0442\u0430\u0431\u043b\u0438\u0446\u044b \u0432 \u043e\u0440\u0438\u0433\u0438\u043d\u0430\u043b\u044c\u043d\u043e\u043c \u041a\u041b\u0410\u0414\u0420-\u0430\u0440\u0445\u0438\u0432\u0435?<\/p>\n