{"id":489145,"date":"2026-07-30T09:36:23","date_gmt":"2026-07-30T09:36:23","guid":{"rendered":"https:\/\/savepearlharbor.com\/?p=489145"},"modified":"-0001-11-30T00:00:00","modified_gmt":"-0001-11-29T21:00:00","slug":"","status":"publish","type":"post","link":"https:\/\/savepearlharbor.com\/?p=489145","title":{"rendered":"\u041f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0435 \u043d\u043e\u0434\u044b Selectel MKS: \u043a\u0430\u043a \u0443\u0441\u0442\u0440\u043e\u0435\u043d\u043e \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0435 \u0438 \u043a\u0430\u043a \u043d\u0430\u0441\u0442\u0440\u043e\u0438\u0442\u044c graceful shutdown \u043f\u043e\u0434\u043e\u0432"},"content":{"rendered":"<div xmlns=\"http:\/\/www.w3.org\/1999\/xhtml\">\n<figure class=\"\"><img decoding=\"async\" src=\"https:\/\/habrastorage.org\/r\/w1560\/webt\/83\/af\/8a\/83af8a1afb17a1a7206d92b0afb189d1.png\" sizes=\"(max-width: 780px) 100vw, 50vw\" srcset=\"https:\/\/habrastorage.org\/r\/w780\/webt\/83\/af\/8a\/83af8a1afb17a1a7206d92b0afb189d1.png 780w,&#10;       https:\/\/habrastorage.org\/r\/w1560\/webt\/83\/af\/8a\/83af8a1afb17a1a7206d92b0afb189d1.png 781w\" loading=\"lazy\" decode=\"async\"\/><\/figure>\n<p>\u041f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0435 (preemptible) \u043d\u043e\u0434\u044b \u0432 Selectel MKS \u0434\u0435\u0448\u0435\u0432\u043b\u0435 \u043f\u0440\u0438\u043c\u0435\u0440\u043d\u043e \u043d\u0430 70%, \u0438 \u043f\u043b\u0430\u0442\u0430 \u0437\u0430 \u044d\u0442\u043e \u0447\u0435\u0441\u0442\u043d\u0430\u044f: \u043f\u0440\u043e\u0432\u0430\u0439\u0434\u0435\u0440 \u043c\u043e\u0436\u0435\u0442 \u0437\u0430\u0431\u0440\u0430\u0442\u044c \u043d\u043e\u0434\u0443 \u0432 \u043b\u044e\u0431\u043e\u0439 \u043c\u043e\u043c\u0435\u043d\u0442, \u0430 \u0431\u043e\u043b\u044c\u0448\u0435 \u0441\u0443\u0442\u043e\u043a \u043e\u043d\u0430 \u043d\u0435 \u0436\u0438\u0432\u0451\u0442 \u0432 \u043b\u044e\u0431\u043e\u043c \u0441\u043b\u0443\u0447\u0430\u0435. \u0422\u043e \u0435\u0441\u0442\u044c \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0435 \u2014 \u043d\u0435 \u0430\u0432\u0430\u0440\u0438\u044f, \u0430 \u0435\u0436\u0435\u0434\u043d\u0435\u0432\u043d\u043e\u0435 \u0448\u0442\u0430\u0442\u043d\u043e\u0435 \u0441\u043e\u0431\u044b\u0442\u0438\u0435, \u0438 \u0432\u043e\u043f\u0440\u043e\u0441 \u043d\u0435 \u00ab\u0441\u043b\u0443\u0447\u0438\u0442\u0441\u044f \u043b\u0438\u00bb, \u0430 \u00ab\u0447\u0442\u043e \u0432 \u044d\u0442\u043e\u0442 \u043c\u043e\u043c\u0435\u043d\u0442 \u043f\u0440\u043e\u0438\u0437\u043e\u0439\u0434\u0451\u0442 \u0441 \u043f\u043e\u0434\u0430\u043c\u0438\u00bb.<\/p>\n<p>\u0412 \u043e\u0431\u043b\u0430\u043a\u0430\u0445, \u0433\u0434\u0435 \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0435 \u0438\u043d\u0441\u0442\u0430\u043d\u0441\u044b \u043f\u043e\u044f\u0432\u0438\u043b\u0438\u0441\u044c \u0440\u0430\u043d\u044c\u0448\u0435, \u043e\u0442\u0432\u0435\u0442 \u043d\u0430 \u044d\u0442\u043e\u0442 \u0432\u043e\u043f\u0440\u043e\u0441 \u0434\u0430\u0432\u043d\u043e \u043e\u0431\u043a\u0430\u0442\u0430\u043d: \u0438\u043d\u0441\u0442\u0430\u043d\u0441 \u0437\u0430\u0440\u0430\u043d\u0435\u0435 \u043f\u043e\u043b\u0443\u0447\u0430\u0435\u0442 \u0443\u0432\u0435\u0434\u043e\u043c\u043b\u0435\u043d\u0438\u0435 \u043e \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0438, \u0430 \u0432 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0435 \u0436\u0438\u0432\u0451\u0442 \u0434\u0435\u043c\u043e\u043d, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u044d\u0442\u043e \u0443\u0432\u0435\u0434\u043e\u043c\u043b\u0435\u043d\u0438\u0435 \u043b\u043e\u0432\u0438\u0442 \u0438 \u0443\u0441\u043f\u0435\u0432\u0430\u0435\u0442 \u0443\u0432\u0435\u0441\u0442\u0438 \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0443 \u0441 \u043d\u043e\u0434\u044b \u2014 \u0443 AWS \u044d\u0442\u043e <a href=\"https:\/\/github.com\/aws\/aws-node-termination-handler\" rel=\"noopener noreferrer nofollow\">aws-node-termination-handler<\/a>.<\/p>\n<p>\u0412 Selectel MKS \u0442\u0430\u043a\u043e\u0433\u043e \u043c\u0435\u0445\u0430\u043d\u0438\u0437\u043c\u0430 \u043d\u0435\u0442 \u043d\u0438 \u0432 \u043a\u0430\u043a\u043e\u043c \u0432\u0438\u0434\u0435: \u043d\u0435\u0442 \u0443\u0432\u0435\u0434\u043e\u043c\u043b\u0435\u043d\u0438\u044f, \u043a\u043e\u0442\u043e\u0440\u043e\u0435 \u043f\u043e\u0434\u043e\u0431\u043d\u044b\u0439 \u0434\u0435\u043c\u043e\u043d \u043c\u043e\u0433 \u0431\u044b \u043f\u043e\u0439\u043c\u0430\u0442\u044c, \u0438 \u043d\u0435\u0442 \u0432\u043a\u043b\u044e\u0447\u0451\u043d\u043d\u043e\u0433\u043e graceful node shutdown \u0443 kubelet (<code>shutdownGracePeriod: 0s<\/code>). \u0422\u043e \u0435\u0441\u0442\u044c \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e kubelet \u043f\u0440\u0438 \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0438 \u043d\u0435 \u0434\u0435\u043b\u0430\u0435\u0442 \u0434\u043b\u044f \u043f\u043e\u0434\u043e\u0432 \u0432\u043e\u043e\u0431\u0449\u0435 \u043d\u0438\u0447\u0435\u0433\u043e \u2014 \u043d\u0438 \u0440\u0430\u0441\u0441\u044b\u043b\u043a\u0438 SIGTERM, \u043d\u0438 \u043e\u0436\u0438\u0434\u0430\u043d\u0438\u044f \u0437\u0430\u0432\u0435\u0440\u0448\u0435\u043d\u0438\u044f, \u043d\u0438 \u0441\u043e\u0431\u043b\u044e\u0434\u0435\u043d\u0438\u044f <code>terminationGracePeriodSeconds<\/code>, \u2014 \u0438 \u0432\u0441\u0451, \u0447\u0442\u043e \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u043d\u0430 \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u043e\u0439 \u043d\u043e\u0434\u0435, \u043f\u0440\u0438 \u043a\u0430\u0436\u0434\u043e\u043c \u0441\u0443\u0442\u043e\u0447\u043d\u043e\u043c \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0438 \u043f\u0440\u043e\u0441\u0442\u043e \u0443\u043c\u0438\u0440\u0430\u0435\u0442 \u0432\u043c\u0435\u0441\u0442\u0435 \u0441 \u043d\u0435\u0439.<\/p>\n<p>\u0414\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u0430\u0446\u0438\u044f \u043f\u0440\u043e\u0432\u0430\u0439\u0434\u0435\u0440\u0430 \u043c\u0435\u0445\u0430\u043d\u0438\u043a\u0443 \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u044f \u043d\u0435 \u043e\u043f\u0438\u0441\u044b\u0432\u0430\u0435\u0442, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 \u0432\u0441\u0451 \u043d\u0438\u0436\u0435 \u043f\u043e\u043b\u0443\u0447\u0435\u043d\u043e \u044d\u043a\u0441\u043f\u0435\u0440\u0438\u043c\u0435\u043d\u0442\u0430\u043b\u044c\u043d\u043e, \u043d\u0430 \u0436\u0438\u0432\u043e\u043c \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0435: \u0447\u0442\u043e \u0438\u043c\u0435\u043d\u043d\u043e \u043f\u0440\u043e\u0438\u0441\u0445\u043e\u0434\u0438\u0442 \u043f\u0440\u0438 \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0438, \u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0432\u0440\u0435\u043c\u0435\u043d\u0438 \u0440\u0435\u0430\u043b\u044c\u043d\u043e \u0435\u0441\u0442\u044c \u0443 \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u0439 \u0438 \u043a\u0430\u043a \u044d\u0442\u043e \u0432\u0440\u0435\u043c\u044f \u0441\u0435\u0431\u0435 \u0432\u044b\u0434\u0430\u0442\u044c.<\/p>\n<p><strong>\u041e\u043a\u0440\u0443\u0436\u0435\u043d\u0438\u0435:<\/strong> dev-\u043a\u043b\u0430\u0441\u0442\u0435\u0440 Tuna \u0432 Selectel MKS, \u0440\u0435\u0433\u0438\u043e\u043d <code>ru-7a<\/code>, Kubernetes 1.35.3, Ubuntu 24.04.4, systemd 255, containerd 2.2.4. \u0414\u0430\u0442\u0430 \u043f\u0440\u043e\u0432\u0435\u0440\u043a\u0438 \u2014 \u0438\u044e\u043b\u044c 2026.<\/p>\n<h3>\u041a\u043e\u0440\u043e\u0442\u043a\u043e<\/h3>\n<div>\n<div class=\"table\">\n<table>\n<tbody>\n<tr>\n<th>\n<p align=\"left\">\u0412\u043e\u043f\u0440\u043e\u0441<\/p>\n<\/th>\n<th>\n<p align=\"left\">\u041e\u0442\u0432\u0435\u0442<\/p>\n<\/th>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">\u0415\u0441\u0442\u044c \u043b\u0438 \u0443\u0432\u0435\u0434\u043e\u043c\u043b\u0435\u043d\u0438\u0435 \u043e \u043f\u0440\u0435\u0434\u0441\u0442\u043e\u044f\u0449\u0435\u043c \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0438?<\/p>\n<\/td>\n<td>\n<p align=\"left\">\u041d\u0435\u0442. \u041d\u0438 \u0432 metadata service, \u043d\u0438 \u0447\u0435\u0440\u0435\u0437 API<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">\u041a\u0430\u043a \u0432\u044b\u043a\u043b\u044e\u0447\u0430\u044e\u0442 \u043d\u043e\u0434\u0443?<\/p>\n<\/td>\n<td>\n<p align=\"left\">\u0428\u0442\u0430\u0442\u043d\u044b\u0439 systemd-shutdown \u043f\u043e \u0441\u0438\u0433\u043d\u0430\u043b\u0443 \u043e\u0442 \u0433\u0438\u043f\u0435\u0440\u0432\u0438\u0437\u043e\u0440\u0430<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">\u0420\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u043b\u0438 kubelet graceful node shutdown?<\/p>\n<\/td>\n<td>\n<p align=\"left\">\u0414\u0430, \u043d\u043e \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d (<code>shutdownGracePeriod: 0s<\/code>)<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">\u0415\u0441\u0442\u044c \u043b\u0438 \u0434\u0435\u0434\u043b\u0430\u0439\u043d \u0441\u043e \u0441\u0442\u043e\u0440\u043e\u043d\u044b \u0433\u0438\u043f\u0435\u0440\u0432\u0438\u0437\u043e\u0440\u0430?<\/p>\n<\/td>\n<td>\n<p align=\"left\">\u041d\u0435 \u043e\u0431\u043d\u0430\u0440\u0443\u0436\u0435\u043d: 280 \u0441\u0435\u043a\u0443\u043d\u0434 \u0432\u044b\u0436\u0434\u0430\u043b\u0438 \u0431\u0435\u0437 \u0432\u043c\u0435\u0448\u0430\u0442\u0435\u043b\u044c\u0441\u0442\u0432\u0430<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">\u0427\u0435\u043c \u043e\u0433\u0440\u0430\u043d\u0438\u0447\u0435\u043d\u043e \u043e\u043a\u043d\u043e?<\/p>\n<\/td>\n<td>\n<p align=\"left\">\u0422\u043e\u043b\u044c\u043a\u043e <code>InhibitDelayMaxSec<\/code> \u0432 logind \u2014 \u0432 \u043e\u0431\u0440\u0430\u0437\u0435 \u043d\u043e\u0434\u044b 30 \u0441<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">\u041a\u0430\u043a \u0432\u043a\u043b\u044e\u0447\u0438\u0442\u044c?<\/p>\n<\/td>\n<td>\n<p align=\"left\"><code>user_data<\/code> \u0433\u0440\u0443\u043f\u043f\u044b \u043d\u043e\u0434 \u2014 \u0441\u043a\u0440\u0438\u043f\u0442 \u0432 \u043a\u043e\u043d\u0446\u0435 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u0430<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">\u041a\u0430\u043a \u0431\u044b\u0441\u0442\u0440\u043e \u043d\u043e\u0434\u0430 \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0430\u0435\u0442\u0441\u044f?<\/p>\n<\/td>\n<td>\n<p align=\"left\">\u0421 \u0441\u0435\u0442\u0435\u0432\u044b\u043c \u0437\u0430\u0433\u0440\u0443\u0437\u043e\u0447\u043d\u044b\u043c \u0434\u0438\u0441\u043a\u043e\u043c \u2014 \u0434\u0435\u0441\u044f\u0442\u043a\u0438 \u0441\u0435\u043a\u0443\u043d\u0434 \u0438 \u0441\u043e \u0441\u0432\u043e\u0438\u043c \u0441\u043e\u0441\u0442\u043e\u044f\u043d\u0438\u0435\u043c, \u0441 \u043b\u043e\u043a\u0430\u043b\u044c\u043d\u044b\u043c \u2014 \u0434\u043e 10 \u043c\u0438\u043d\u0443\u0442 \u0438 \u0441 \u043d\u0443\u043b\u044f<\/p>\n<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<\/div>\n<\/div>\n<p>\u0418\u0442\u043e\u0433\u043e\u0432\u0430\u044f \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044f \u0434\u0430\u0451\u0442 \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u044f\u043c <strong>120 \u0441\u0435\u043a\u0443\u043d\u0434<\/strong> \u043d\u0430 \u0437\u0430\u0432\u0435\u0440\u0448\u0435\u043d\u0438\u0435 \u2014 \u0441\u0442\u043e\u043b\u044c\u043a\u043e \u0436\u0435, \u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0434\u0430\u0451\u0442 AWS Spot, \u0438 \u0432\u0447\u0435\u0442\u0432\u0435\u0440\u043e \u0431\u043e\u043b\u044c\u0448\u0435, \u0447\u0435\u043c GCP Spot VM \u0438 Azure Spot.<\/p>\n<h3>\u0427\u0442\u043e \u043e\u0431\u0435\u0449\u0430\u0435\u0442 \u043f\u0440\u043e\u0432\u0430\u0439\u0434\u0435\u0440 \u2014 \u0438 \u043e \u0447\u0451\u043c \u0443\u043c\u0430\u043b\u0447\u0438\u0432\u0430\u0435\u0442<\/h3>\n<p>\u0424\u0438\u0447\u0430 \u043d\u0435 \u043d\u043e\u0432\u0430\u044f: \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0435 \u043d\u043e\u0434\u044b \u0432 Managed Kubernetes \u043f\u043e\u044f\u0432\u0438\u043b\u0438\u0441\u044c \u0435\u0449\u0451 \u0432 \u0444\u0435\u0432\u0440\u0430\u043b\u0435 2025 \u0433\u043e\u0434\u0430, \u0438 Selectel \u0430\u043d\u043e\u043d\u0441\u0438\u0440\u043e\u0432\u0430\u043b \u0438\u0445 <a href=\"https:\/\/habr.com\/ru\/companies\/selectel\/articles\/883494\/\" rel=\"noopener noreferrer nofollow\">\u043e\u0442\u0434\u0435\u043b\u044c\u043d\u043e\u0439 \u0441\u0442\u0430\u0442\u044c\u0451\u0439 \u0432 \u0441\u0432\u043e\u0451\u043c \u0431\u043b\u043e\u0433\u0435<\/a> \u2014 \u043f\u0440\u043e \u044d\u043a\u043e\u043d\u043e\u043c\u0438\u044e \u0434\u043e 70% \u0438 \u043f\u0440\u043e \u0442\u043e, \u0447\u0442\u043e \u00ab\u043d\u043e\u0434\u0430 \u043e\u043f\u0435\u0440\u0430\u0442\u0438\u0432\u043d\u043e \u0432\u0435\u0440\u043d\u0451\u0442\u0441\u044f \u0432 \u043a\u043b\u0430\u0441\u0442\u0435\u0440, \u0430 \u0432\u043e\u0441\u0441\u0442\u0430\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0435 \u0437\u0430\u0439\u043c\u0451\u0442 \u043d\u0435 \u0431\u043e\u043b\u0435\u0435 \u043c\u0438\u043d\u0443\u0442\u044b\u00bb. \u041f\u0440\u043e \u043f\u043e\u0434\u044b, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0432 \u044d\u0442\u043e\u0442 \u043c\u043e\u043c\u0435\u043d\u0442 \u043d\u0430 \u043d\u043e\u0434\u0435 \u0440\u0430\u0431\u043e\u0442\u0430\u044e\u0442, \u0442\u0430\u043c \u043d\u0435 \u0441\u043a\u0430\u0437\u0430\u043d\u043e \u043d\u0438\u0447\u0435\u0433\u043e: \u043d\u0438 \u043f\u0440\u043e SIGTERM, \u043d\u0438 \u043f\u0440\u043e drain, \u043d\u0438 \u043f\u0440\u043e PDB, \u043d\u0438 \u043f\u0440\u043e \u043f\u043e\u0442\u0435\u0440\u044e \u0434\u0430\u043d\u043d\u044b\u0445. \u041a\u0430\u043a \u0440\u0430\u0437 \u044d\u0442\u0443 \u0434\u044b\u0440\u043a\u0443 \u043c\u044b \u0438 \u043f\u043e\u043b\u0435\u0437\u043b\u0438 \u0437\u0430\u043a\u0440\u044b\u0432\u0430\u0442\u044c.<\/p>\n<p>\u0418\u0437 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u0430\u0446\u0438\u0438 Selectel:<\/p>\n<ul>\n<li>\n<p>\u043d\u043e\u0434\u0430 \u0436\u0438\u0432\u0451\u0442 <strong>\u043d\u0435 \u0431\u043e\u043b\u0435\u0435 24 \u0447\u0430\u0441\u043e\u0432<\/strong>, \u043f\u043e\u0441\u043b\u0435 \u043a\u0430\u0436\u0434\u043e\u0433\u043e \u0432\u043e\u0441\u0441\u0442\u0430\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u044f \u043e\u0442\u0441\u0447\u0451\u0442 \u0437\u0430\u043d\u043e\u0432\u043e;<\/p>\n<\/li>\n<li>\n<p>Selectel \u043c\u043e\u0436\u0435\u0442 \u043e\u0441\u0442\u0430\u043d\u043e\u0432\u0438\u0442\u044c \u043d\u043e\u0434\u0443 \u0432 \u043b\u044e\u0431\u043e\u0439 \u043c\u043e\u043c\u0435\u043d\u0442, \u0430\u043d\u0433\u043b\u043e\u044f\u0437\u044b\u0447\u043d\u0430\u044f \u0432\u0435\u0440\u0441\u0438\u044f \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u0430\u0446\u0438\u0438 \u043f\u0440\u044f\u043c\u043e \u043f\u0438\u0448\u0435\u0442 \u00abmay terminate nodes <strong>without notice<\/strong>\u00bb;<\/p>\n<\/li>\n<li>\n<p>\u0432\u043e\u0441\u0441\u0442\u0430\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0435 \u043d\u0430\u0447\u0438\u043d\u0430\u0435\u0442\u0441\u044f \u0441\u0440\u0430\u0437\u0443: \u0441 \u0441\u0435\u0442\u0435\u0432\u044b\u043c \u0437\u0430\u0433\u0440\u0443\u0437\u043e\u0447\u043d\u044b\u043c \u0434\u0438\u0441\u043a\u043e\u043c \u2014 \u043c\u0435\u043d\u044c\u0448\u0435 \u043c\u0438\u043d\u0443\u0442\u044b \u0438 \u0441 \u0441\u043e\u0445\u0440\u0430\u043d\u0435\u043d\u0438\u0435\u043c \u0441\u043e\u0441\u0442\u043e\u044f\u043d\u0438\u044f, \u0441 \u043b\u043e\u043a\u0430\u043b\u044c\u043d\u044b\u043c \u2014 \u0434\u043e 10 \u043c\u0438\u043d\u0443\u0442 \u0438 \u0441 \u043f\u043e\u0442\u0435\u0440\u0435\u0439 \u0432\u0441\u0435\u0445 \u0434\u0430\u043d\u043d\u044b\u0445;<\/p>\n<\/li>\n<li>\n<p>SLA \u043d\u0430 \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0435 \u0433\u0440\u0443\u043f\u043f\u044b \u043d\u0435 \u0440\u0430\u0441\u043f\u0440\u043e\u0441\u0442\u0440\u0430\u043d\u044f\u0435\u0442\u0441\u044f;<\/p>\n<\/li>\n<li>\n<p>\u0434\u043e\u0441\u0442\u0443\u043f\u043d\u043e \u0442\u043e\u043b\u044c\u043a\u043e \u0432 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0430\u0445 \u043d\u0430 \u043e\u0431\u043b\u0430\u0447\u043d\u044b\u0445 \u0441\u0435\u0440\u0432\u0435\u0440\u0430\u0445 (\u0421\u041f\u0431, \u041c\u043e\u0441\u043a\u0432\u0430, \u041d\u043e\u0432\u043e\u0441\u0438\u0431\u0438\u0440\u0441\u043a);<\/p>\n<\/li>\n<li>\n<p>\u0440\u0435\u0441\u0443\u0440\u0441\u044b \u0434\u0435\u0448\u0435\u0432\u043b\u0435 \u043f\u0440\u0438\u043c\u0435\u0440\u043d\u043e \u043d\u0430 70%.<\/p>\n<\/li>\n<\/ul>\n<p>\u0418\u0437 24-\u0447\u0430\u0441\u043e\u0432\u043e\u0433\u043e \u043b\u0438\u043c\u0438\u0442\u0430 \u0438 \u0441\u043b\u0435\u0434\u0443\u0435\u0442 \u0442\u043e, \u0441 \u0447\u0435\u0433\u043e \u043c\u044b \u043d\u0430\u0447\u0430\u043b\u0438: <strong>\u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0435 \u044d\u0442\u043e \u0435\u0436\u0435\u0434\u043d\u0435\u0432\u043d\u043e\u0435 \u0448\u0442\u0430\u0442\u043d\u043e\u0435 \u0441\u043e\u0431\u044b\u0442\u0438\u0435<\/strong>, \u0430 \u043d\u0435 \u0440\u0435\u0434\u043a\u0430\u044f \u0430\u0432\u0430\u0440\u0438\u044f. \u0417\u043d\u0430\u0447\u0438\u0442 \u0438 \u043d\u0430\u0441\u0442\u0440\u0430\u0438\u0432\u0430\u0442\u044c \u043f\u043e\u0432\u0435\u0434\u0435\u043d\u0438\u0435 \u043f\u0440\u0438 \u043d\u0451\u043c \u043d\u0443\u0436\u043d\u043e \u043a\u0430\u043a \u043e\u0431\u044b\u0447\u043d\u0443\u044e \u0440\u0430\u0431\u043e\u0447\u0443\u044e \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0443, \u0430 \u043d\u0435 \u043a\u0430\u043a \u0430\u0432\u0430\u0440\u0438\u0439\u043d\u044b\u0439 \u0441\u0446\u0435\u043d\u0430\u0440\u0438\u0439 \u00ab\u043d\u0430 \u0432\u0441\u044f\u043a\u0438\u0439 \u0441\u043b\u0443\u0447\u0430\u0439\u00bb.<\/p>\n<h3>\u0427\u0435\u0433\u043e \u043d\u0435\u0442: \u0438\u0449\u0435\u043c preemption notice \u0438 \u043d\u0435 \u043d\u0430\u0445\u043e\u0434\u0438\u043c<\/h3>\n<p>\u041f\u0435\u0440\u0432\u043e\u0435, \u043a\u0443\u0434\u0430 \u043c\u044b \u043f\u043e\u043b\u0435\u0437\u043b\u0438 \u043f\u043e \u0430\u043d\u0430\u043b\u043e\u0433\u0438\u0438 \u0441 AWS\/GCP\/Azure, \u2014 metadata service. \u0422\u0430\u043c \u0443 \u0433\u0438\u043f\u0435\u0440\u0441\u043a\u0435\u0439\u043b\u0435\u0440\u043e\u0432 \u043b\u0435\u0436\u0438\u0442 \u043f\u0440\u0438\u0437\u043d\u0430\u043a \u043f\u0440\u0435\u0434\u0441\u0442\u043e\u044f\u0449\u0435\u0433\u043e \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u044f, \u0438 \u0432\u0441\u044f \u0438\u043d\u0434\u0443\u0441\u0442\u0440\u0438\u0430\u043b\u044c\u043d\u0430\u044f \u043f\u0440\u0430\u043a\u0442\u0438\u043a\u0430 \u043f\u043e\u0441\u0442\u0440\u043e\u0435\u043d\u0430 \u0432\u043e\u043a\u0440\u0443\u0433 \u043d\u0435\u0433\u043e: \u0434\u0435\u043c\u043e\u043d \u043e\u043f\u0440\u0430\u0448\u0438\u0432\u0430\u0435\u0442 \u044d\u043d\u0434\u043f\u043e\u0438\u043d\u0442, \u0432\u0438\u0434\u0438\u0442 \u0443\u0432\u0435\u0434\u043e\u043c\u043b\u0435\u043d\u0438\u0435, \u0441\u0430\u043c \u0434\u0435\u043b\u0430\u0435\u0442 cordon \u0438 drain \u2014 \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0430 \u0443\u0445\u043e\u0434\u0438\u0442 \u0441 \u043d\u043e\u0434\u044b <strong>\u0434\u043e<\/strong> \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u044f. \u0417\u0430\u043f\u0443\u0441\u043a \u043f\u043e\u0434\u0430 \u0441 <code>hostNetwork<\/code> \u043d\u0430 \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u043e\u0439 \u043d\u043e\u0434\u0435:<\/p>\n<pre><code>\/latest\/meta-data\/spot\/instance-action    \u2192 404\/latest\/meta-data\/spot\/termination-time   \u2192 404\/latest\/meta-data\/instance-action         \u2192 none   (\u0441\u0442\u0430\u0442\u0438\u0447\u0435\u0441\u043a\u0430\u044f \u0437\u0430\u0433\u043b\u0443\u0448\u043a\u0430 Nova)\/openstack\/latest\/meta_data.json          \u2192 \u043d\u0438 \u043e\u0434\u043d\u043e\u0433\u043e \u043f\u043e\u043b\u044f \u043f\u0440\u043e preemptible<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:87px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p>Metadata service \u2014 \u0441\u0442\u0430\u043d\u0434\u0430\u0440\u0442\u043d\u044b\u0439 OpenStack \u0431\u0435\u0437 \u043a\u0430\u043a\u0438\u0445-\u043b\u0438\u0431\u043e \u0440\u0430\u0441\u0448\u0438\u0440\u0435\u043d\u0438\u0439 \u043f\u043e\u0434 \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0435 \u0438\u043d\u0441\u0442\u0430\u043d\u0441\u044b. \u0412 \u0430\u043f\u0441\u0442\u0440\u0438\u043c\u043d\u043e\u0439 Nova \u043c\u0435\u0445\u0430\u043d\u0438\u0437\u043c\u0430 spot-\u0443\u0432\u0435\u0434\u043e\u043c\u043b\u0435\u043d\u0438\u0439 \u043d\u0435\u0442 \u0432\u043e\u043e\u0431\u0449\u0435, \u0438 Selectel \u0435\u0433\u043e \u043d\u0435 \u0434\u043e\u0431\u0430\u0432\u043b\u044f\u043b.<\/p>\n<p>\u041e\u0442\u0441\u044e\u0434\u0430 \u0432\u044b\u0432\u043e\u0434: <strong>\u0432\u0435\u0448\u0430\u0442\u044c node-termination-handler \u043f\u043e \u0430\u043d\u0430\u043b\u043e\u0433\u0438\u0438 \u0441 AWS \u043d\u0435 \u043d\u0430 \u0447\u0442\u043e<\/strong> \u2014 \u0438\u0441\u0442\u043e\u0447\u043d\u0438\u043a\u0430 \u0441\u043e\u0431\u044b\u0442\u0438\u044f \u043d\u0435 \u0441\u0443\u0449\u0435\u0441\u0442\u0432\u0443\u0435\u0442. \u041f\u043b\u0430\u043d\u044b \u0441\u0434\u0435\u043b\u0430\u0442\u044c \u0441\u0432\u043e\u0439 \u0445\u0435\u043d\u0434\u043b\u0435\u0440 \u0443 Selectel \u0435\u0441\u0442\u044c \u2014 \u043e\u0431 \u044d\u0442\u043e\u043c \u043e\u0442\u0434\u0435\u043b\u044c\u043d\u0430\u044f \u0437\u0430\u043c\u0435\u0442\u043a\u0430 \u0432 \u043a\u043e\u043d\u0446\u0435, \u2014 \u043d\u043e \u043f\u043e\u043a\u0430 \u0435\u0434\u0438\u043d\u0441\u0442\u0432\u0435\u043d\u043d\u044b\u0439 \u043f\u0443\u0442\u044c \u043a \u043c\u044f\u0433\u043a\u043e\u043c\u0443 \u0437\u0430\u0432\u0435\u0440\u0448\u0435\u043d\u0438\u044e \u044d\u0442\u043e \u0443\u0441\u043f\u0435\u0442\u044c \u0441\u0440\u0435\u0430\u0433\u0438\u0440\u043e\u0432\u0430\u0442\u044c \u043d\u0430 \u0441\u0430\u043c\u043e \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435.<\/p>\n<p>\u041f\u043e\u0431\u043e\u0447\u043d\u043e: MKS \u043d\u0435 \u043f\u043e\u043c\u0435\u0447\u0430\u0435\u0442 \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0435 \u043d\u043e\u0434\u044b \u0441\u043e\u0431\u0441\u0442\u0432\u0435\u043d\u043d\u044b\u043c \u043b\u0435\u0439\u0431\u043b\u043e\u043c, \u0443 \u043d\u0438\u0445 <code>mks.operational\/node-type: standard<\/code>. \u041e\u0442\u043b\u0438\u0447\u0430\u0442\u044c \u0438\u0445 \u043c\u043e\u0436\u043d\u043e \u0442\u043e\u043b\u044c\u043a\u043e \u043f\u043e \u0441\u0432\u043e\u0438\u043c labels \u0438 taints, \u0437\u0430\u0434\u0430\u043d\u043d\u044b\u043c \u043f\u0440\u0438 \u0441\u043e\u0437\u0434\u0430\u043d\u0438\u0438 \u0433\u0440\u0443\u043f\u043f\u044b.<\/p>\n<h3>\u0427\u0442\u043e \u0435\u0441\u0442\u044c: \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0435 \u2014 \u044d\u0442\u043e OpenStack shelve \u0438 \u0448\u0442\u0430\u0442\u043d\u044b\u0439 systemd-shutdown<\/h3>\n<p>\u0412\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0435 \u0440\u0435\u0430\u043b\u0438\u0437\u043e\u0432\u0430\u043d\u043e \u043a\u0430\u043a OpenStack <code>shelve<\/code> (\u0432 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u0430\u0446\u0438\u0438 \u0432\u043e\u0441\u0441\u0442\u0430\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0435 \u043e\u043f\u0438\u0441\u0430\u043d\u043e \u043a\u043e\u043c\u0430\u043d\u0434\u043e\u0439 <code>openstack server unshelve<\/code>). \u0421 \u0442\u043e\u0447\u043a\u0438 \u0437\u0440\u0435\u043d\u0438\u044f \u0433\u043e\u0441\u0442\u0435\u0432\u043e\u0439 \u041e\u0421 \u044d\u0442\u043e \u0432\u044b\u0433\u043b\u044f\u0434\u0438\u0442 \u0442\u0430\u043a:<\/p>\n<pre><code>systemd-logind[711]: System is powering down (hypervisor initiated shutdown).systemd[1]: Stopping kubelet.service - Kubernetes Kubelet...systemd[1]: Reached target shutdown.target - System Shutdown.systemd-shutdown[1]: Sending SIGTERM to remaining processes...<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p>\u042d\u0442\u043e \u043f\u043e\u043b\u043d\u043e\u0446\u0435\u043d\u043d\u0430\u044f \u043f\u043e\u0441\u043b\u0435\u0434\u043e\u0432\u0430\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u044c \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u044f, \u0430 \u043d\u0435 \u0432\u044b\u0434\u0451\u0440\u0433\u0438\u0432\u0430\u043d\u0438\u0435 \u043f\u0438\u0442\u0430\u043d\u0438\u044f. \u0417\u043d\u0430\u0447\u0438\u0442 \u0443 kubelet \u0435\u0441\u0442\u044c \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e\u0441\u0442\u044c \u0432\u043c\u0435\u0448\u0430\u0442\u044c\u0441\u044f \u2014 \u0447\u0435\u0440\u0435\u0437 \u043c\u0435\u0445\u0430\u043d\u0438\u0437\u043c Graceful Node Shutdown, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442 systemd inhibitor locks.<\/p>\n<p>\u041c\u0435\u0445\u0430\u043d\u0438\u043a\u0430 \u0442\u0443\u0442 \u043f\u0440\u043e\u0441\u0442\u0430\u044f: \u043f\u0440\u043e\u0446\u0435\u0441\u0441 \u0431\u0435\u0440\u0451\u0442 \u0443 logind delay-\u043b\u043e\u043a \u043d\u0430 <code>shutdown<\/code>, \u0438 logind \u043f\u0435\u0440\u0435\u0434 \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435\u043c \u0440\u0430\u0441\u0441\u044b\u043b\u0430\u0435\u0442 \u0434\u0435\u0440\u0436\u0430\u0442\u0435\u043b\u044f\u043c \u043b\u043e\u043a\u043e\u0432 <code>PrepareForShutdown<\/code> \u0438 \u0436\u0434\u0451\u0442, \u043f\u043e\u043a\u0430 \u0442\u0435 \u043e\u0442\u043f\u0443\u0441\u0442\u044f\u0442 \u043b\u043e\u043a, \u2014 \u043d\u043e \u043d\u0435 \u0434\u043e\u043b\u044c\u0448\u0435 <code>InhibitDelayMaxSec<\/code>. Kubelet \u0434\u0435\u0440\u0436\u0438\u0442 \u0442\u0430\u043a\u043e\u0439 \u043b\u043e\u043a \u0440\u043e\u0432\u043d\u043e \u0434\u043b\u044f \u0442\u043e\u0433\u043e, \u0447\u0442\u043e\u0431\u044b \u0443\u0441\u043f\u0435\u0442\u044c \u0440\u0430\u0437\u043e\u0441\u043b\u0430\u0442\u044c \u043f\u043e\u0434\u0430\u043c SIGTERM \u0438 \u0434\u043e\u0436\u0434\u0430\u0442\u044c\u0441\u044f \u0438\u0445 \u0437\u0430\u0432\u0435\u0440\u0448\u0435\u043d\u0438\u044f. \u041e\u0442\u0441\u044e\u0434\u0430 \u0438 \u0432\u0441\u044f \u0434\u0430\u043b\u044c\u043d\u0435\u0439\u0448\u0430\u044f \u0430\u0440\u0438\u0444\u043c\u0435\u0442\u0438\u043a\u0430 \u044d\u0442\u043e\u0433\u043e \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u0430: \u043e\u043a\u043d\u043e \u043d\u0430 \u0437\u0430\u0432\u0435\u0440\u0448\u0435\u043d\u0438\u0435 \u043f\u043e\u0434\u043e\u0432 \u043d\u0435 \u043c\u043e\u0436\u0435\u0442 \u0431\u044b\u0442\u044c \u0431\u043e\u043b\u044c\u0448\u0435, \u0447\u0435\u043c logind \u0441\u043e\u0433\u043b\u0430\u0441\u0435\u043d \u0436\u0434\u0430\u0442\u044c.<\/p>\n<p>\u041f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e \u0432 MKS \u043e\u043d \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d:<\/p>\n<pre><code class=\"bash\">$ kubectl get --raw \"\/api\/v1\/nodes\/&lt;node&gt;\/proxy\/configz\" | jq .kubeletconfig{ \"shutdownGracePeriod\": \"0s\", \"shutdownGracePeriodCriticalPods\": \"0s\" }<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<h3>\u041f\u043e\u0442\u043e\u043b\u043e\u043a \u0432 30 \u0441\u0435\u043a\u0443\u043d\u0434, \u043e \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0441\u043f\u043e\u0442\u044b\u043a\u0430\u0435\u0442\u0441\u044f kubelet<\/h3>\n<p>Kubelet \u043f\u0440\u0438 \u0441\u0442\u0430\u0440\u0442\u0435 \u043f\u044b\u0442\u0430\u0435\u0442\u0441\u044f \u043f\u043e\u0434\u043d\u044f\u0442\u044c <code>InhibitDelayMaxSec<\/code> \u0432 logind \u0434\u043e \u0437\u0430\u043f\u0440\u043e\u0448\u0435\u043d\u043d\u043e\u0433\u043e <code>shutdownGracePeriod<\/code>: \u043f\u0438\u0448\u0435\u0442 <code>\/etc\/systemd\/logind.conf.d\/99-kubelet.conf<\/code> \u0438 \u0448\u043b\u0451\u0442 logind SIGHUP. \u0415\u0441\u043b\u0438 \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u0435 \u043d\u0435 \u043f\u043e\u0434\u043d\u044f\u043b\u043e\u0441\u044c, \u043c\u0435\u043d\u0435\u0434\u0436\u0435\u0440 \u043d\u0435 \u0441\u0442\u0430\u0440\u0442\u0443\u0435\u0442:<\/p>\n<pre><code>E0729 16:32:38 kubelet.go:1769] \"Failed to start node shutdown manager\"  err=\"node shutdown manager was timed out after 5 attempts waiting for logind  InhibitDelayMaxSec to update to 45s (ShutdownGracePeriod), current value is 30s\"<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p>\u041f\u0440\u0438\u0447\u0438\u043d\u0430 \u2014 \u0432 \u043e\u0431\u0440\u0430\u0437\u0435 Ubuntu \u043b\u0435\u0436\u0438\u0442 \u0447\u0443\u0436\u043e\u0439 drop-in:<\/p>\n<pre><code>\/usr\/lib\/systemd\/logind.conf.d\/unattended-upgrades-logind-maxdelay.conf  InhibitDelayMaxSec=30<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p>Drop-in\u2019\u044b logind \u0441\u043e\u0431\u0438\u0440\u0430\u044e\u0442\u0441\u044f <strong>\u0438\u0437 \u0432\u0441\u0435\u0445 \u043a\u0430\u0442\u0430\u043b\u043e\u0433\u043e\u0432 \u0438 \u0441\u043e\u0440\u0442\u0438\u0440\u0443\u044e\u0442\u0441\u044f \u043f\u043e \u0438\u043c\u0435\u043d\u0438 \u0444\u0430\u0439\u043b\u0430 \u0433\u043b\u043e\u0431\u0430\u043b\u044c\u043d\u043e<\/strong>, \u0430 <code>unattended-upgrades-\u2026<\/code> \u0438\u0434\u0451\u0442 \u043b\u0435\u043a\u0441\u0438\u043a\u043e\u0433\u0440\u0430\u0444\u0438\u0447\u0435\u0441\u043a\u0438 \u043f\u043e\u0441\u043b\u0435 <code>99-kubelet.conf<\/code> \u0438 \u043f\u0435\u0440\u0435\u0431\u0438\u0432\u0430\u0435\u0442 \u0435\u0433\u043e. \u041f\u0440\u0438\u043e\u0440\u0438\u0442\u0435\u0442 <code>\/etc<\/code> \u043d\u0430\u0434 <code>\/usr<\/code> \u0437\u0434\u0435\u0441\u044c \u043d\u0435 \u0441\u043f\u0430\u0441\u0430\u0435\u0442 \u2014 \u043e\u043d \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u0442\u043e\u043b\u044c\u043a\u043e \u043f\u0440\u0438 \u0441\u043e\u0432\u043f\u0430\u0434\u0435\u043d\u0438\u0438 \u0438\u043c\u0451\u043d \u0444\u0430\u0439\u043b\u043e\u0432.<\/p>\n<p>\u041c\u0435\u0445\u0430\u043d\u0438\u0437\u043c \u0441\u0430\u043c\u043e\u0433\u043e kubelet \u043f\u0440\u0438 \u044d\u0442\u043e\u043c \u0438\u0441\u043f\u0440\u0430\u0432\u0435\u043d: \u0432 \u0436\u0443\u0440\u043d\u0430\u043b\u0435 \u0432\u0438\u0434\u043d\u043e, \u0447\u0442\u043e logind \u043d\u0430 \u0435\u0433\u043e SIGHUP \u043e\u0442\u0432\u0435\u0447\u0430\u0435\u0442 <code>Config file reloaded<\/code>. \u041c\u044b \u043f\u0440\u043e\u0432\u0435\u0440\u0438\u043b\u0438 \u044d\u0442\u043e \u0438 \u043d\u0430\u043f\u0440\u044f\u043c\u0443\u044e \u2014 \u043f\u0440\u0430\u0432\u043a\u0430 \u0441\u0432\u043e\u0435\u0433\u043e drop-in\u2019\u0430 \u0441 \u043f\u043e\u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0438\u043c <code>systemctl reload systemd-logind<\/code> \u043c\u0435\u043d\u044f\u0435\u0442 <code>InhibitDelayMaxUSec<\/code> \u0431\u0435\u0437 \u043f\u0435\u0440\u0435\u0437\u0430\u043f\u0443\u0441\u043a\u0430 \u0441\u0435\u0440\u0432\u0438\u0441\u0430:<\/p>\n<pre><code class=\"bash\">$ busctl get-property org.freedesktop.login1 \/org\/freedesktop\/login1 \\    org.freedesktop.login1.Manager InhibitDelayMaxUSect 180000000# \u043f\u0440\u0430\u0432\u0438\u043c drop-in \u043d\u0430 200 \u0438 \u0434\u0435\u043b\u0430\u0435\u043c reloadt 200000000<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p>\u0422\u043e \u0435\u0441\u0442\u044c kubelet \u043f\u0435\u0440\u0435\u0447\u0438\u0442\u0430\u0442\u044c \u043a\u043e\u043d\u0444\u0438\u0433 \u0437\u0430\u0441\u0442\u0430\u0432\u043b\u044f\u0435\u0442, \u043d\u043e \u0441\u0432\u043e\u0435\u0433\u043e \u0434\u043e\u0431\u0438\u0442\u044c\u0441\u044f \u043d\u0435 \u043c\u043e\u0436\u0435\u0442: \u043f\u043e\u0441\u043b\u0435 reload \u043f\u043e\u0431\u0435\u0436\u0434\u0430\u0435\u0442 \u0432\u0441\u0451 \u0442\u043e\u0442 \u0436\u0435 \u0447\u0443\u0436\u043e\u0439 drop-in.<\/p>\n<p>\u041e\u0442\u0441\u044e\u0434\u0430 \u0434\u0432\u0430 \u0441\u043b\u0435\u0434\u0441\u0442\u0432\u0438\u044f:<\/p>\n<ol>\n<li>\n<p>\u0411\u0435\u0437 \u0432\u043c\u0435\u0448\u0430\u0442\u0435\u043b\u044c\u0441\u0442\u0432\u0430 \u043c\u0430\u043a\u0441\u0438\u043c\u0443\u043c, \u0447\u0442\u043e \u043c\u043e\u0436\u043d\u043e \u0437\u0430\u043f\u0440\u043e\u0441\u0438\u0442\u044c, \u2014 <code>shutdownGracePeriod: 30s<\/code>.<\/p>\n<\/li>\n<li>\n<p>\u0427\u0442\u043e\u0431\u044b \u043f\u043e\u0434\u043d\u044f\u0442\u044c \u043f\u043e\u0442\u043e\u043b\u043e\u043a, \u043d\u0443\u0436\u0435\u043d \u0441\u0432\u043e\u0439 drop-in \u0441 \u0438\u043c\u0435\u043d\u0435\u043c, \u0441\u043e\u0440\u0442\u0438\u0440\u0443\u044e\u0449\u0438\u043c\u0441\u044f <strong>\u043f\u043e\u0441\u043b\u0435<\/strong> \u043f\u0430\u043a\u0435\u0442\u043d\u043e\u0433\u043e \u2014 \u043c\u044b \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u043c <code>zz-kubelet-graceful.conf<\/code>.<\/p>\n<\/li>\n<\/ol>\n<p>\u0412\u0430\u0440\u0438\u0430\u043d\u0442 \u00ab\u043f\u043e\u043b\u043e\u0436\u0438\u0442\u044c \u0432 <code>\/etc<\/code> \u0444\u0430\u0439\u043b-\u0434\u0432\u043e\u0439\u043d\u0438\u043a \u0441 \u0442\u0435\u043c \u0436\u0435 \u0438\u043c\u0435\u043d\u0435\u043c\u00bb \u0442\u043e\u0436\u0435 \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442, \u043d\u043e \u0437\u0430\u0432\u044f\u0437\u044b\u0432\u0430\u0435\u0442\u0441\u044f \u043d\u0430 \u0438\u043c\u044f \u043f\u0430\u043a\u0435\u0442\u043d\u043e\u0433\u043e \u0444\u0430\u0439\u043b\u0430, \u043a\u043e\u0442\u043e\u0440\u043e\u0435 \u043c\u043e\u0436\u0435\u0442 \u0438\u0437\u043c\u0435\u043d\u0438\u0442\u044c\u0441\u044f \u043f\u0440\u0438 \u043e\u0431\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0438.<\/p>\n<h3>\u0417\u0430\u043c\u0435\u0440\u044b: \u0447\u0435\u0442\u044b\u0440\u0435 \u043f\u0440\u043e\u0433\u043e\u043d\u0430 \u0441 \u0440\u0435\u0430\u043b\u044c\u043d\u044b\u043c shelve<\/h3>\n<p>\u0412\u0441\u0435 \u043f\u0440\u043e\u0433\u043e\u043d\u044b \u0434\u0435\u043b\u0430\u043b\u0438 \u043d\u0430 \u043e\u0434\u043d\u043e\u0439 \u043d\u043e\u0434\u0435, \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0435 \u0438\u043c\u0438\u0442\u0438\u0440\u043e\u0432\u0430\u043b\u0438 \u043a\u043e\u043c\u0430\u043d\u0434\u043e\u0439 <code>openstack server shelve &lt;id&gt;<\/code> \u2014 \u0442\u043e \u0435\u0441\u0442\u044c \u0440\u043e\u0432\u043d\u043e \u0442\u0435\u043c \u0436\u0435 \u043c\u0435\u0445\u0430\u043d\u0438\u0437\u043c\u043e\u043c, \u043a\u043e\u0442\u043e\u0440\u044b\u043c \u043d\u043e\u0434\u0443 \u0432\u044b\u0442\u0435\u0441\u043d\u044f\u0435\u0442 Selectel.<\/p>\n<h4>\u041f\u0440\u043e\u0433\u043e\u043d 1: \u0442\u043e\u043b\u044c\u043a\u043e DaemonSet\u2019\u044b, \u043e\u043a\u043d\u043e 30 \u0441 \u2014 \u0433\u0430\u0441\u043d\u0435\u0442 \u043c\u0433\u043d\u043e\u0432\u0435\u043d\u043d\u043e<\/h4>\n<p>\u041d\u0430 \u043d\u043e\u0434\u0435 \u043d\u0435\u0442 \u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u0435\u043b\u044c\u0441\u043a\u043e\u0439 \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0438, \u0442\u043e\u043b\u044c\u043a\u043e <code>calico-node<\/code>, <code>kube-proxy<\/code>, <code>csi-cinder-nodeplugin<\/code>, <code>node-exporter<\/code>, <code>vector<\/code>.<\/p>\n<pre><code>16:55:30 systemd-logind: System is powering down (hypervisor initiated shutdown)16:55:30 systemd[1]: Stopping kubelet.service16:55:30 systemd[1]: Reached target shutdown.target<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p>\u0417\u0430\u0434\u0435\u0440\u0436\u043a\u0438 \u043d\u0435\u0442 \u0432\u043e\u043e\u0431\u0449\u0435. \u042d\u0442\u043e \u043d\u0435 \u043f\u043e\u043b\u043e\u043c\u043a\u0430: \u0441\u0438\u0441\u0442\u0435\u043c\u043d\u044b\u0435 \u043f\u043e\u0434\u044b \u0437\u0430\u0432\u0435\u0440\u0448\u0430\u044e\u0442\u0441\u044f \u043c\u0433\u043d\u043e\u0432\u0435\u043d\u043d\u043e, kubelet \u043e\u0442\u043f\u0443\u0441\u043a\u0430\u0435\u0442 inhibitor lock \u0434\u043e\u0441\u0440\u043e\u0447\u043d\u043e, \u0438 logind \u0441\u0440\u0430\u0437\u0443 \u0433\u0430\u0441\u0438\u0442 \u0441\u0438\u0441\u0442\u0435\u043c\u0443. <strong>\u041e\u043a\u043d\u043e \u2014 \u044d\u0442\u043e \u043b\u0438\u043c\u0438\u0442, \u0430 \u043d\u0435 \u0444\u0438\u043a\u0441\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u0430\u044f \u043f\u0430\u0443\u0437\u0430.<\/strong><\/p>\n<h4>\u041f\u0440\u043e\u0433\u043e\u043d 2: \u043a\u0430\u043d\u0430\u0440\u0435\u0439\u043a\u0430 \u043f\u0440\u043e\u0442\u0438\u0432 SIGTERM, \u043e\u043a\u043d\u043e 30 \u0441 \u2014 \u043f\u043e\u0434\u0430\u043c \u0434\u043e\u0441\u0442\u0430\u0451\u0442\u0441\u044f 20 \u0441\u0435\u043a\u0443\u043d\u0434<\/h4>\n<p>\u041f\u043e\u0434, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u043b\u043e\u0432\u0438\u0442 SIGTERM \u0438 \u043f\u043e\u0441\u043b\u0435 \u044d\u0442\u043e\u0433\u043e \u0435\u0449\u0451 \u0434\u0432\u0435 \u043c\u0438\u043d\u0443\u0442\u044b \u043f\u0438\u0448\u0435\u0442 \u043e\u0442\u0441\u0447\u0451\u0442 \u0432 \u043b\u043e\u0433 \u043d\u0430 <code>hostPath<\/code> (\u0447\u0442\u043e\u0431\u044b \u0444\u0430\u0439\u043b \u043f\u0435\u0440\u0435\u0436\u0438\u043b \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435 \u0438 \u0443\u0434\u0430\u043b\u0435\u043d\u0438\u0435 \u043f\u043e\u0434\u0430):<\/p>\n<pre><code>17:32:43 alive17:32:43 *** SIGTERM RECEIVED ***17:32:43 term+0s   \u202617:33:02 term+19s          \u2190 \u043f\u043e\u0441\u043b\u0435\u0434\u043d\u044f\u044f \u0437\u0430\u043f\u0438\u0441\u044c17:33:03 systemd-logind: System is powering down (hypervisor initiated shutdown)<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p>\u041f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u0435 \u043f\u043e\u043b\u0443\u0447\u0438\u043b\u043e SIGTERM <strong>\u0437\u0430 20 \u0441\u0435\u043a\u0443\u043d\u0434 \u0434\u043e<\/strong> \u043d\u0430\u0447\u0430\u043b\u0430 \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u044f. \u0420\u043e\u0432\u043d\u043e <code>shutdownGracePeriodByPodPriority<\/code> \u0434\u043b\u044f Priority 0 \u2014 \u0442\u043e \u0435\u0441\u0442\u044c <code>30s<\/code> \u043e\u0431\u0449\u0438\u0445 \u043c\u0438\u043d\u0443\u0441 <code>10s<\/code>, \u0437\u0430\u0440\u0435\u0437\u0435\u0440\u0432\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u044b\u0445 \u043f\u043e\u0434 critical-\u043f\u043e\u0434\u044b.<\/p>\n<p>\u0417\u0434\u0435\u0441\u044c \u0436\u0435 \u0432\u0438\u0434\u043d\u043e, \u043a\u0430\u043a logind \u043d\u0430 \u0441\u0430\u043c\u043e\u043c \u0434\u0435\u043b\u0435 \u043e\u0431\u0440\u0430\u0431\u0430\u0442\u044b\u0432\u0430\u0435\u0442 delay-\u043b\u043e\u043a\u0438: \u0441\u043d\u0430\u0447\u0430\u043b\u0430 \u0440\u0430\u0441\u0441\u044b\u043b\u0430\u0435\u0442 <code>PrepareForShutdown<\/code>, \u0436\u0434\u0451\u0442 \u0434\u0435\u0440\u0436\u0430\u0442\u0435\u043b\u0435\u0439, \u0438 \u0442\u043e\u043b\u044c\u043a\u043e \u043f\u043e\u0442\u043e\u043c \u043f\u0438\u0448\u0435\u0442 <code>powering down<\/code>. \u0421\u0442\u0440\u043e\u043a\u0430 \u043f\u0440\u043e \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435 \u043f\u043e\u044f\u0432\u043b\u044f\u0435\u0442\u0441\u044f \u0432 <strong>\u043a\u043e\u043d\u0446\u0435<\/strong> \u043e\u0436\u0438\u0434\u0430\u043d\u0438\u044f, \u0430 \u043d\u0435 \u0432 \u043d\u0430\u0447\u0430\u043b\u0435.<\/p>\n<h4>\u041f\u0440\u043e\u0433\u043e\u043d 3: \u043e\u043a\u043d\u043e 300 \u0441 \u2014 \u0434\u0435\u0434\u043b\u0430\u0439\u043d\u0430 \u0441\u043e \u0441\u0442\u043e\u0440\u043e\u043d\u044b \u0433\u0438\u043f\u0435\u0440\u0432\u0438\u0437\u043e\u0440\u0430 \u043d\u0435\u0442<\/h4>\n<p>\u041f\u043e\u0442\u043e\u043b\u043e\u043a logind \u043f\u043e\u0434\u043d\u044f\u0442 \u0434\u043e 300 \u0441, <code>shutdownGracePeriod: 300s<\/code> \/ <code>shutdownGracePeriodCriticalPods: 20s<\/code> (\u0442\u043e \u0435\u0441\u0442\u044c 280 \u0441 \u043e\u0431\u044b\u0447\u043d\u044b\u043c \u043f\u043e\u0434\u0430\u043c). \u041a\u0430\u043d\u0430\u0440\u0435\u0439\u043a\u0430 \u0441 <code>terminationGracePeriodSeconds: 600<\/code>.<\/p>\n<pre><code>18:16:19 *** SIGTERM RECEIVED ***   \u202618:20:59 term+279s        \u2190 280 \u043e\u0442\u0441\u0447\u0451\u0442\u043e\u0432, \u0440\u043e\u0432\u043d\u043e \u043e\u043a\u043d\u043e \u0444\u0430\u0437\u044b<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p>\u0414\u0432\u0430 \u0432\u044b\u0432\u043e\u0434\u0430:<\/p>\n<ul>\n<li>\n<p><strong>Nova \u043d\u0435 \u0432\u043c\u0435\u0448\u0438\u0432\u0430\u0435\u0442\u0441\u044f.<\/strong> \u041a\u0430\u043d\u0430\u0440\u0435\u0439\u043a\u0430 \u0432\u044b\u0440\u0430\u0431\u043e\u0442\u0430\u043b\u0430 \u0432\u0441\u0451 \u043e\u043a\u043d\u043e \u0446\u0435\u043b\u0438\u043a\u043e\u043c \u0438 \u0431\u044b\u043b\u0430 \u0443\u0431\u0438\u0442\u0430 \u043d\u0435 \u0433\u0438\u043f\u0435\u0440\u0432\u0438\u0437\u043e\u0440\u043e\u043c, \u0430 \u0441\u0430\u043c\u0438\u043c kubelet \u043f\u043e \u0438\u0441\u0442\u0435\u0447\u0435\u043d\u0438\u0438 \u0444\u0430\u0437\u044b. \u0414\u0435\u0434\u043b\u0430\u0439\u043d\u0430 \u0441\u043e \u0441\u0442\u043e\u0440\u043e\u043d\u044b \u0433\u0438\u043f\u0435\u0440\u0432\u0438\u0437\u043e\u0440\u0430 \u043e\u0431\u043d\u0430\u0440\u0443\u0436\u0438\u0442\u044c \u043d\u0435 \u0443\u0434\u0430\u043b\u043e\u0441\u044c \u2014 \u043f\u043e \u043a\u0440\u0430\u0439\u043d\u0435\u0439 \u043c\u0435\u0440\u0435, \u043e\u043d \u0431\u043e\u043b\u044c\u0448\u0435 280 \u0441\u0435\u043a\u0443\u043d\u0434.<\/p>\n<\/li>\n<li>\n<p><strong>\u0411\u0435\u0440\u0451\u0442\u0441\u044f \u043c\u0438\u043d\u0438\u043c\u0443\u043c.<\/strong> \u041f\u043e\u0434 \u043f\u0440\u043e\u0441\u0438\u043b 600 \u0441\u0435\u043a\u0443\u043d\u0434, \u043f\u043e\u043b\u0443\u0447\u0438\u043b 280 \u2014 \u043e\u043a\u043d\u043e \u0444\u0430\u0437\u044b \u043e\u0431\u0440\u0435\u0437\u0430\u0435\u0442 <code>terminationGracePeriodSeconds<\/code> \u043f\u043e\u0434\u0430.<\/p>\n<\/li>\n<\/ul>\n<p>\u041f\u043e\u043b\u043d\u044b\u0439 \u0446\u0438\u043a\u043b \u00ab\u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0435 \u2192 \u0432\u043e\u0437\u0432\u0440\u0430\u0442 \u043d\u043e\u0434\u044b \u0432 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u00bb \u0437\u0430\u043d\u044f\u043b \u043f\u0440\u0438 \u044d\u0442\u043e\u043c \u043e\u043a\u043e\u043b\u043e \u0448\u0435\u0441\u0442\u0438 \u043c\u0438\u043d\u0443\u0442 \u2014 \u043f\u0440\u044f\u043c\u0430\u044f \u0446\u0435\u043d\u0430 \u0434\u043b\u0438\u043d\u043d\u043e\u0433\u043e \u043e\u043a\u043d\u0430. \u0414\u043b\u044f \u0441\u0440\u0430\u0432\u043d\u0435\u043d\u0438\u044f: \u0434\u043e \u0432\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u044f graceful \u0432\u0441\u044f \u043f\u0440\u043e\u0446\u0435\u0434\u0443\u0440\u0430 \u043e\u0442 \u043a\u043e\u043c\u0430\u043d\u0434\u044b \u0434\u043e <code>ACTIVE<\/code> \u0432 Nova \u0443\u043a\u043b\u0430\u0434\u044b\u0432\u0430\u043b\u0430\u0441\u044c \u0432 28 \u0441\u0435\u043a\u0443\u043d\u0434. \u0420\u0430\u0437\u043d\u0438\u0446\u0430 \u0438 \u0435\u0441\u0442\u044c \u0442\u043e \u0432\u0440\u0435\u043c\u044f, \u043a\u043e\u0442\u043e\u0440\u043e\u0435 \u043c\u044b \u0441\u043e\u0437\u043d\u0430\u0442\u0435\u043b\u044c\u043d\u043e \u0432\u044b\u0434\u0430\u0451\u043c \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u044f\u043c \u043d\u0430 \u0437\u0430\u0432\u0435\u0440\u0448\u0435\u043d\u0438\u0435.<\/p>\n<h4>\u041f\u0440\u043e\u0433\u043e\u043d 4: \u043f\u043e\u043b\u043d\u044b\u0439 \u0441\u0442\u0435\u043d\u0434, \u043e\u043a\u043d\u043e 120 \u0441 \u2014 stateless \u043f\u0435\u0440\u0435\u0435\u0437\u0436\u0430\u0435\u0442, stateful \u0436\u0434\u0451\u0442 \u0442\u043e\u043c<\/h4>\n<p>\u0418\u0442\u043e\u0433\u043e\u0432\u0430\u044f \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044f (150s\/30s), \u043d\u0430 \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u043e\u0439 \u043d\u043e\u0434\u0435 \u043e\u0434\u043d\u043e\u0432\u0440\u0435\u043c\u0435\u043d\u043d\u043e:<\/p>\n<ul>\n<li>\n<p><code>holder<\/code> \u2014 \u043f\u043e\u0434, \u0438\u0433\u043d\u043e\u0440\u0438\u0440\u0443\u044e\u0449\u0438\u0439 SIGTERM, <code>terminationGracePeriodSeconds: 300<\/code>;<\/p>\n<\/li>\n<li>\n<p><code>migrant<\/code> \u2014 Deployment \u043d\u0430 8 \u0440\u0435\u043f\u043b\u0438\u043a (4 \u043d\u0430 \u043f\u043e\u0434\u043e\u043f\u044b\u0442\u043d\u043e\u0439 \u043d\u043e\u0434\u0435), \u0432\u044b\u0445\u043e\u0434\u044f\u0442 \u043f\u043e SIGTERM \u043c\u0433\u043d\u043e\u0432\u0435\u043d\u043d\u043e, <code>tolerationSeconds: 10<\/code> \u0434\u043b\u044f <code>not-ready<\/code>\/<code>unreachable<\/code>;<\/p>\n<\/li>\n<li>\n<p><code>fakedb-0<\/code> \u2014 StatefulSet \u0441 Cinder-\u0442\u043e\u043c\u043e\u043c (<code>universal<\/code>, RWO), \u043f\u0438\u0448\u0435\u0442 \u0432 \u0442\u043e\u043c \u0438 \u043f\u043e SIGTERM \u0434\u0435\u043b\u0430\u0435\u0442 15-\u0441\u0435\u043a\u0443\u043d\u0434\u043d\u044b\u0439 flush; \u0432\u0442\u043e\u0440\u0430\u044f \u0440\u0435\u043f\u043b\u0438\u043a\u0430 \u043d\u0430 \u0441\u043e\u0441\u0435\u0434\u043d\u0435\u0439 \u043d\u043e\u0434\u0435, \u043c\u0435\u0436\u0434\u0443 \u043d\u0438\u043c\u0438 <code>requiredDuringScheduling<\/code> antiAffinity.<\/p>\n<\/li>\n<\/ul>\n<p>\u041d\u043e\u0434\u0443, \u043f\u043e\u0434\u044b \u0438 <code>VolumeAttachment<\/code> \u043e\u043f\u0440\u0430\u0448\u0438\u0432\u0430\u043b\u0438 \u0440\u0430\u0437 \u0432 \u0441\u0435\u043a\u0443\u043d\u0434\u0443. <code>shelve<\/code> \u0432\u044b\u0434\u0430\u043b\u0438 \u0432 <code>06:49:14<\/code>:<\/p>\n<div>\n<div class=\"table\">\n<table>\n<tbody>\n<tr>\n<th>\n<p align=\"left\">\u0432\u0440\u0435\u043c\u044f<\/p>\n<\/th>\n<th>\n<p align=\"left\">\u0394<\/p>\n<\/th>\n<th>\n<p align=\"left\">\u0441\u043e\u0431\u044b\u0442\u0438\u0435<\/p>\n<\/th>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">06:49:14<\/p>\n<\/td>\n<td>\n<p align=\"left\">+0 \u0441<\/p>\n<\/td>\n<td>\n<p align=\"left\">SIGTERM \u0432\u0441\u0435\u043c \u043f\u043e\u0434\u0430\u043c \u043d\u043e\u0434\u044b \u043e\u0434\u043d\u043e\u0432\u0440\u0435\u043c\u0435\u043d\u043d\u043e<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">06:49:14.42<\/p>\n<\/td>\n<td>\n<p align=\"left\">+0.4 \u0441<\/p>\n<\/td>\n<td>\n<p align=\"left\"><code>Ready=False<\/code> \/ <code>KubeletNotReady<\/code><\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">06:49:16.14<\/p>\n<\/td>\n<td>\n<p align=\"left\">+2 \u0441<\/p>\n<\/td>\n<td>\n<p align=\"left\">taint <code>node.kubernetes.io\/not-ready:NoSchedule<\/code><\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">06:49:17\u201321<\/p>\n<\/td>\n<td>\n<p align=\"left\">+3\u20267 \u0441<\/p>\n<\/td>\n<td>\n<p align=\"left\">\u0432\u0441\u0435 8 \u0440\u0435\u043f\u043b\u0438\u043a <code>migrant<\/code> \u0440\u0430\u0431\u043e\u0442\u0430\u044e\u0442 \u043d\u0430 \u0441\u043e\u0441\u0435\u0434\u043d\u0435\u0439 \u043d\u043e\u0434\u0435<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">06:49:29<\/p>\n<\/td>\n<td>\n<p align=\"left\">+15 \u0441<\/p>\n<\/td>\n<td>\n<p align=\"left\"><code>fakedb-0<\/code> \u0434\u043e\u043f\u0438\u0441\u0430\u043b flush, \u0437\u0430\u0432\u0435\u0440\u0448\u0438\u043b\u0441\u044f<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">06:49:30<\/p>\n<\/td>\n<td>\n<p align=\"left\">+16 \u0441<\/p>\n<\/td>\n<td>\n<p align=\"left\">StatefulSet \u0443\u0434\u0430\u043b\u0438\u043b \u0438 \u0437\u0430\u043d\u043e\u0432\u043e \u0441\u043e\u0437\u0434\u0430\u043b <code>fakedb-0<\/code> \u2192 <code>Pending<\/code><\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">06:49:58<\/p>\n<\/td>\n<td>\n<p align=\"left\">+44 \u0441<\/p>\n<\/td>\n<td>\n<p align=\"left\">taint <code>node.kubernetes.io\/not-ready:NoExecute<\/code><\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">06:50:40<\/p>\n<\/td>\n<td>\n<p align=\"left\">+86 \u0441<\/p>\n<\/td>\n<td>\n<p align=\"left\">autoscaler <code>TriggeredScaleUp<\/code> 2\u21923 \u0438\u0437-\u0437\u0430 \u0432\u0438\u0441\u044f\u0449\u0435\u0433\u043e <code>Pending<\/code><\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">06:51:13<\/p>\n<\/td>\n<td>\n<p align=\"left\">+119 \u0441<\/p>\n<\/td>\n<td>\n<p align=\"left\"><code>holder<\/code> \u0434\u043e\u043f\u0438\u0441\u0430\u043b <code>term+119s<\/code> \u2014 \u043e\u043a\u043d\u043e \u0432\u044b\u0431\u0440\u0430\u043d\u043e \u0440\u043e\u0432\u043d\u043e<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">06:51:14<\/p>\n<\/td>\n<td>\n<p align=\"left\">+120 \u0441<\/p>\n<\/td>\n<td>\n<p align=\"left\">DaemonSet controller \u043f\u0435\u0440\u0435\u0441\u043e\u0437\u0434\u0430\u0451\u0442 \u043f\u043e\u0434\u044b (\u0440\u0435\u0430\u0433\u0438\u0440\u0443\u0435\u0442 \u043d\u0430 \u0438\u0445 <code>Failed<\/code>, \u043d\u043e\u0434\u0430 \u0435\u0449\u0451 \u0433\u0430\u0441\u043d\u0435\u0442)<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">06:52:57<\/p>\n<\/td>\n<td>\n<p align=\"left\">+224 \u0441<\/p>\n<\/td>\n<td>\n<p align=\"left\"><code>Ready=Unknown<\/code> \/ <code>NodeStatusUnknown<\/code> \u2014 controller \u0437\u0430\u0444\u0438\u043a\u0441\u0438\u0440\u043e\u0432\u0430\u043b \u043f\u0440\u043e\u043f\u0430\u0436\u0443 heartbeat\u2019\u043e\u0432<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">06:53:09<\/p>\n<\/td>\n<td>\n<p align=\"left\">+235 \u0441<\/p>\n<\/td>\n<td>\n<p align=\"left\"><code>Rebooted<\/code> \u0441 \u043d\u043e\u0432\u044b\u043c boot id \u0438 <code>Starting kubelet<\/code> \u2014 \u043c\u0430\u0448\u0438\u043d\u0430 \u0437\u0430\u0433\u0440\u0443\u0437\u0438\u043b\u0430\u0441\u044c<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">06:53:10<\/p>\n<\/td>\n<td>\n<p align=\"left\">+236 \u0441<\/p>\n<\/td>\n<td>\n<p align=\"left\">\u043d\u043e\u0434\u0430 \u0441\u043d\u043e\u0432\u0430 <code>Ready<\/code><\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">06:53:41<\/p>\n<\/td>\n<td>\n<p align=\"left\">+267 \u0441<\/p>\n<\/td>\n<td>\n<p align=\"left\">\u0442\u043e\u043c \u043e\u0442\u0432\u044f\u0437\u0430\u043b\u0441\u044f \u043e\u0442 \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u043d\u043e\u0439 \u043d\u043e\u0434\u044b<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">06:53:53<\/p>\n<\/td>\n<td>\n<p align=\"left\">+279 \u0441<\/p>\n<\/td>\n<td>\n<p align=\"left\"><code>fakedb-0<\/code> \u0437\u0430\u043f\u0443\u0441\u0442\u0438\u043b\u0441\u044f \u043d\u0430 \u0434\u0440\u0443\u0433\u043e\u0439 \u043d\u043e\u0434\u0435, \u0434\u0430\u043d\u043d\u044b\u0435 \u0446\u0435\u043b\u044b<\/p>\n<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<\/div>\n<\/div>\n<p>\u0412\u044b\u0432\u043e\u0434\u044b:<\/p>\n<p><strong>\u041d\u043e\u0434\u0430 \u0437\u0430\u043a\u0440\u044b\u0432\u0430\u0435\u0442\u0441\u044f \u0434\u043b\u044f \u043f\u043b\u0430\u043d\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f \u043f\u043e\u0447\u0442\u0438 \u043c\u0433\u043d\u043e\u0432\u0435\u043d\u043d\u043e.<\/strong> Condition \u043f\u0435\u0440\u0435\u043a\u043b\u044e\u0447\u0430\u0435\u0442\u0441\u044f \u0437\u0430 \u0434\u043e\u043b\u0438 \u0441\u0435\u043a\u0443\u043d\u0434\u044b, taint <code>NoSchedule<\/code> \u2014 \u0437\u0430 \u0434\u0432\u0435. \u0417\u0430\u0434\u0435\u0440\u0436\u043a\u0430 \u043f\u043e\u044f\u0432\u043b\u0435\u043d\u0438\u044f <code>NoExecute<\/code> \u043f\u043b\u0430\u0432\u0430\u0435\u0442: 44 \u0441\u0435\u043a\u0443\u043d\u0434\u044b \u0437\u0434\u0435\u0441\u044c \u0438 5 \u0441\u0435\u043a\u0443\u043d\u0434 \u0432 \u0434\u0440\u0443\u0433\u043e\u043c \u043f\u0440\u043e\u0433\u043e\u043d\u0435.<\/p>\n<p><strong>\u041e\u0441\u043d\u043e\u0432\u043d\u043e\u0435 \u0432\u0440\u0435\u043c\u044f \u0446\u0438\u043a\u043b\u0430 \u0441\u044a\u0435\u0434\u0430\u0435\u0442 graceful, \u0430 \u043d\u0435 \u043f\u0435\u0440\u0435\u0437\u0430\u0433\u0440\u0443\u0437\u043a\u0430.<\/strong> \u041e\u0442 \u043a\u043e\u043c\u0430\u043d\u0434\u044b \u0434\u043e \u0440\u0430\u0431\u043e\u0442\u0430\u044e\u0449\u0435\u0439 \u043d\u043e\u0434\u044b \u043f\u0440\u043e\u0448\u043b\u043e 236 \u0441\u0435\u043a\u0443\u043d\u0434, \u0438\u0437 \u043d\u0438\u0445 120 \u2014 \u043e\u043a\u043d\u043e, \u043a\u043e\u0442\u043e\u0440\u043e\u0435 \u0446\u0435\u043b\u0438\u043a\u043e\u043c \u0432\u044b\u0431\u0440\u0430\u043b <code>holder<\/code>, \u0434\u0430\u043b\u044c\u0448\u0435 \u043a\u0440\u0438\u0442\u0438\u0447\u0435\u0441\u043a\u0430\u044f \u0444\u0430\u0437\u0430 \u0438 \u043e\u0431\u044b\u0447\u043d\u0430\u044f \u043f\u043e\u0441\u043b\u0435\u0434\u043e\u0432\u0430\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u044c systemd-shutdown. \u0417\u0430\u0433\u0440\u0443\u0437\u0438\u0432\u0448\u0438\u0439\u0441\u044f kubelet \u043e\u0442\u0447\u0438\u0442\u0430\u043b\u0441\u044f \u0432 <code>Ready<\/code> \u0447\u0435\u0440\u0435\u0437 \u0441\u0435\u043a\u0443\u043d\u0434\u0443 \u043f\u043e\u0441\u043b\u0435 \u0441\u0442\u0430\u0440\u0442\u0430.<\/p>\n<p>\u0422\u043e\u0447\u043d\u044b\u0439 \u043c\u043e\u043c\u0435\u043d\u0442, \u043a\u043e\u0433\u0434\u0430 \u043c\u0430\u0448\u0438\u043d\u0430 \u043f\u043e\u0433\u0430\u0441\u043b\u0430, \u043c\u044b \u043d\u0435 \u0437\u0430\u0444\u0438\u043a\u0441\u0438\u0440\u043e\u0432\u0430\u043b\u0438, \u0438 \u0440\u0430\u0437\u043b\u043e\u0436\u0438\u0442\u044c \u044d\u0442\u0438 236 \u0441\u0435\u043a\u0443\u043d\u0434 \u043f\u043e \u0447\u0430\u0441\u0442\u044f\u043c \u043d\u0435 \u043f\u043e\u043b\u0443\u0447\u0438\u0442\u0441\u044f. <code>Ready=Unknown<\/code> \u0434\u043b\u044f \u044d\u0442\u043e\u0433\u043e \u043d\u0435 \u0433\u043e\u0434\u0438\u0442\u0441\u044f: <code>NodeStatusUnknown<\/code> \u0441\u0442\u0430\u0432\u0438\u0442 \u043d\u0435 kubelet, \u0430 node lifecycle controller \u2014 \u043f\u043e\u0441\u043b\u0435 <code>--node-monitor-grace-period<\/code> \u0431\u0435\u0437 heartbeat\u2019\u043e\u0432, \u0442\u043e \u0435\u0441\u0442\u044c \u0441 \u0437\u0430\u043f\u0430\u0437\u0434\u044b\u0432\u0430\u043d\u0438\u0435\u043c \u043f\u043e\u0440\u044f\u0434\u043a\u0430 \u0441\u043e\u0440\u043e\u043a\u0430 \u0441\u0435\u043a\u0443\u043d\u0434. \u041d\u0430\u0434\u0451\u0436\u043d\u044b\u0439 \u044f\u043a\u043e\u0440\u044c \u0442\u0443\u0442 \u0442\u043e\u043b\u044c\u043a\u043e <code>journalctl --list-boots<\/code> \u043d\u0430 \u0441\u0430\u043c\u043e\u0439 \u043d\u043e\u0434\u0435, \u0441\u043d\u044f\u0442\u044b\u0439 \u0434\u043e \u0442\u043e\u0433\u043e, \u043a\u0430\u043a \u0435\u0451 \u0437\u0430\u0431\u0435\u0440\u0451\u0442 autoscaler.<\/p>\n<p><strong>Stateless-\u043c\u0438\u0433\u0440\u0430\u0446\u0438\u044f \u043e\u0431\u0433\u043e\u043d\u044f\u0435\u0442 taint-\u044d\u0432\u0430\u043a\u0443\u0430\u0446\u0438\u044e.<\/strong> \u0420\u0435\u043f\u043b\u0438\u043a\u0438 \u0443\u0436\u0435 \u0440\u0430\u0431\u043e\u0442\u0430\u043b\u0438 \u043d\u0430 \u0441\u043e\u0441\u0435\u0434\u043d\u0435\u0439 \u043d\u043e\u0434\u0435 \u043a <code>+7 \u0441<\/code>, \u0442\u043e \u0435\u0441\u0442\u044c \u0437\u0430 37 \u0441\u0435\u043a\u0443\u043d\u0434 \u0434\u043e \u043f\u043e\u044f\u0432\u043b\u0435\u043d\u0438\u044f <code>NoExecute<\/code>. \u041f\u0435\u0440\u0435\u0435\u0437\u0434 \u0434\u0435\u043b\u0430\u0435\u0442 \u0441\u0432\u044f\u0437\u043a\u0430 \u00abkubelet \u0437\u0430\u0432\u0435\u0440\u0448\u0438\u043b \u043f\u043e\u0434 \u2192 ReplicaSet \u0441\u043e\u0437\u0434\u0430\u043b \u0437\u0430\u043c\u0435\u043d\u0443\u00bb, \u0430 <code>tolerationSeconds<\/code> \u0434\u043b\u044f \u0442\u0430\u043a\u0438\u0445 \u043f\u043e\u0434\u043e\u0432 \u0432\u043e\u043e\u0431\u0449\u0435 \u043d\u0435 \u0443\u0441\u043f\u0435\u0432\u0430\u0435\u0442 \u0441\u044b\u0433\u0440\u0430\u0442\u044c.<\/p>\n<p><strong>Stateful \u043d\u0435 \u043c\u0438\u0433\u0440\u0438\u0440\u0443\u0435\u0442, \u0430 \u0436\u0434\u0451\u0442 \u043e\u0441\u0432\u043e\u0431\u043e\u0436\u0434\u0435\u043d\u0438\u044f \u0442\u043e\u043c\u0430.<\/strong> \u041f\u0440\u043e\u0441\u0442\u043e\u0439 <code>fakedb-0<\/code> \u0441\u043e\u0441\u0442\u0430\u0432\u0438\u043b 279 \u0441\u0435\u043a\u0443\u043d\u0434 \u043f\u0440\u043e\u0442\u0438\u0432 7 \u0441\u0435\u043a\u0443\u043d\u0434 \u0443 stateless \u2014 \u0432 \u0441\u043e\u0440\u043e\u043a \u0440\u0430\u0437 \u0431\u043e\u043b\u044c\u0448\u0435. \u0421\u043e\u0431\u044b\u0442\u0438\u044f\u043c\u0438 \u044d\u0442\u043e \u0432\u0438\u0434\u043d\u043e \u0431\u0443\u043a\u0432\u0430\u043b\u044c\u043d\u043e:<\/p>\n<pre><code>06:52:01  Scheduled \u2192 tuna-node-hprry06:52:01  FailedAttachVolume: Multi-Attach error for volume \"pvc-a0e7c02d\u2026\"          Volume is already exclusively attached to one node and can't be attached to another06:53:51  SuccessfulAttachVolume06:53:53  Container started<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p>\u042d\u0442\u0438 279 \u0441\u0435\u043a\u0443\u043d\u0434 \u0441\u043a\u043b\u0430\u0434\u044b\u0432\u0430\u044e\u0442\u0441\u044f \u0442\u0430\u043a: 16 \u0441\u0435\u043a\u0443\u043d\u0434 \u0443\u0448\u043b\u043e \u043d\u0430 flush \u0438 \u043f\u0435\u0440\u0435\u0441\u043e\u0437\u0434\u0430\u043d\u0438\u0435 \u043f\u043e\u0434\u0430, \u0434\u0430\u043b\u044c\u0448\u0435 \u043e\u043a\u043e\u043b\u043e \u0434\u0432\u0443\u0445 \u0441 \u043f\u043e\u043b\u043e\u0432\u0438\u043d\u043e\u0439 \u043c\u0438\u043d\u0443\u0442 \u043e\u043d \u0436\u0434\u0430\u043b \u043f\u043b\u0430\u043d\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f, \u0438 \u0441 <code>06:52:01<\/code> \u0434\u043e <code>06:53:53<\/code> \u2014 \u0435\u0449\u0451 \u043f\u043e\u0447\u0442\u0438 \u0434\u0432\u0435 \u043c\u0438\u043d\u0443\u0442\u044b \u0441\u0442\u043e\u044f\u043b \u043d\u0430 <code>Multi-Attach<\/code> \u0443\u0436\u0435 \u043d\u0430\u0437\u043d\u0430\u0447\u0435\u043d\u043d\u044b\u043c \u043d\u0430 \u0436\u0438\u0432\u0443\u044e \u043d\u043e\u0434\u0443. \u0417\u043d\u0430\u0447\u0438\u0442 \u0434\u043e\u0431\u0430\u0432\u043b\u0435\u043d\u0438\u0435 \u0441\u0432\u043e\u0431\u043e\u0434\u043d\u044b\u0445 \u043d\u043e\u0434 \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u0443 \u043d\u0435 \u0440\u0435\u0448\u0430\u0435\u0442: \u0442\u043e\u043c RWO \u043e\u0441\u0442\u0430\u0451\u0442\u0441\u044f \u043f\u0440\u0438\u0432\u044f\u0437\u0430\u043d\u043d\u044b\u043c \u043a \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u043d\u043e\u0439 \u043d\u043e\u0434\u0435, \u0438 \u0436\u0434\u0430\u0442\u044c \u043f\u0440\u0438\u0445\u043e\u0434\u0438\u0442\u0441\u044f \u043d\u0435 \u043f\u043b\u0430\u043d\u0438\u0440\u043e\u0432\u0449\u0438\u043a, \u0430 detach.<\/p>\n<p>\u041f\u0440\u0438\u0447\u0438\u043d\u0430 \u043f\u043e\u0434\u0432\u0438\u0441\u0430\u043d\u0438\u044f \u043d\u0435 \u0432 \u0442\u043e\u043c, \u0447\u0442\u043e <code>csi-cinder-nodeplugin<\/code> \u0433\u0430\u0441\u0438\u0442\u0441\u044f \u0432 \u043f\u0435\u0440\u0432\u043e\u0439 \u0444\u0430\u0437\u0435 \u2014 detach \u0432\u044b\u043f\u043e\u043b\u043d\u044f\u0435\u0442 \u0432\u043e\u043e\u0431\u0449\u0435 \u0434\u0440\u0443\u0433\u043e\u0439 \u043a\u043e\u043c\u043f\u043e\u043d\u0435\u043d\u0442, <code>csi-cinder-controllerplugin<\/code>, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0436\u0438\u0432\u0451\u0442 \u043d\u0430 \u0438\u043d\u0444\u0440\u0430\u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u043d\u043e\u0439 \u043d\u043e\u0434\u0435 \u0438 \u0432\u0441\u0451 \u044d\u0442\u043e \u0432\u0440\u0435\u043c\u044f \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442. \u0414\u0435\u043b\u043e \u0432 \u0442\u043e\u043c, \u0447\u0442\u043e <strong>kubelet \u043f\u0440\u0438 \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0438 \u043d\u0435 \u043e\u0442\u043c\u043e\u043d\u0442\u0438\u0440\u0443\u0435\u0442 \u0442\u043e\u043c<\/strong>: \u0432 \u0436\u0443\u0440\u043d\u0430\u043b\u0435 \u0437\u0430 \u0442\u0443 \u0437\u0430\u0433\u0440\u0443\u0437\u043a\u0443 \u043d\u0435\u0442 \u043d\u0438 \u043e\u0434\u043d\u043e\u0433\u043e <code>NodeUnpublish<\/code>\/<code>UnmountVolume<\/code>, \u0432\u0441\u0435 unmount\u2019\u044b \u0434\u0430\u0442\u0438\u0440\u043e\u0432\u0430\u043d\u044b \u0443\u0436\u0435 \u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0435\u0439 \u0437\u0430\u0433\u0440\u0443\u0437\u043a\u043e\u0439. \u0410 attach-detach controller \u043d\u0435 \u043e\u0442\u0432\u044f\u0436\u0435\u0442 \u0442\u043e\u043c, \u043f\u043e\u043a\u0430 \u043d\u043e\u0434\u0430 \u043d\u0435 \u043f\u043e\u0434\u0442\u0432\u0435\u0440\u0434\u0438\u0442 \u0447\u0435\u0440\u0435\u0437 <code>node.status.volumesInUse<\/code>, \u0447\u0442\u043e \u043e\u043d \u0441\u0432\u043e\u0431\u043e\u0434\u0435\u043d \u2014 \u0447\u0435\u0433\u043e \u043c\u0451\u0440\u0442\u0432\u044b\u0439 kubelet \u0441\u0434\u0435\u043b\u0430\u0442\u044c \u043d\u0435 \u043c\u043e\u0436\u0435\u0442. \u0412 \u044d\u0442\u043e\u043c \u043f\u0440\u043e\u0433\u043e\u043d\u0435 detach \u0440\u0430\u0437\u0431\u043b\u043e\u043a\u0438\u0440\u043e\u0432\u0430\u043b \u0441\u0430\u043c \u0432\u043e\u0437\u0432\u0440\u0430\u0442 \u043d\u043e\u0434\u044b; \u0435\u0441\u043b\u0438 \u0431\u044b \u043e\u043d\u0430 \u043d\u0435 \u0432\u0435\u0440\u043d\u0443\u043b\u0430\u0441\u044c, \u0441\u0440\u0430\u0431\u043e\u0442\u0430\u043b \u0431\u044b force detach \u043f\u043e \u0442\u0430\u0439\u043c\u0430\u0443\u0442\u0443 <code>maxWaitForUnmountDuration<\/code> (6 \u043c\u0438\u043d\u0443\u0442).<\/p>\n<p><strong>\u0414\u0430\u043d\u043d\u044b\u0435 \u043d\u0435 \u0442\u0435\u0440\u044f\u044e\u0442\u0441\u044f.<\/strong> \u041f\u044f\u0442\u043d\u0430\u0434\u0446\u0430\u0442\u0438\u0441\u0435\u043a\u0443\u043d\u0434\u043d\u044b\u0439 flush \u0443\u043b\u043e\u0436\u0438\u043b\u0441\u044f \u0432 \u043e\u043a\u043d\u043e, <code>clean shutdown<\/code> \u0437\u0430\u043f\u0438\u0441\u0430\u043d \u043d\u0430 \u0434\u0438\u0441\u043a, \u043f\u043e\u0441\u043b\u0435 \u043f\u0435\u0440\u0435\u0435\u0437\u0434\u0430 \u0442\u043e\u043c \u043f\u0440\u043e\u0447\u0438\u0442\u0430\u043b\u0441\u044f \u043f\u043e\u043b\u043d\u043e\u0441\u0442\u044c\u044e.<\/p>\n<p><strong>Autoscaler \u0440\u0435\u0430\u0433\u0438\u0440\u0443\u0435\u0442 \u043d\u0430 <\/strong><code><strong>Pending<\/strong><\/code><strong>.<\/strong> \u0412\u0438\u0441\u044f\u0449\u0438\u0439 stateful-\u043f\u043e\u0434 \u0441\u043f\u0440\u043e\u0432\u043e\u0446\u0438\u0440\u043e\u0432\u0430\u043b \u043f\u043e\u0434\u044a\u0451\u043c \u0442\u0440\u0435\u0442\u044c\u0435\u0439 \u043d\u043e\u0434\u044b, \u0445\u043e\u0442\u044f \u0438\u0441\u0445\u043e\u0434\u043d\u0430\u044f \u0432\u0435\u0440\u043d\u0443\u043b\u0430\u0441\u044c \u0431\u044b \u0441\u0430\u043c\u0430. \u0427\u0435\u043c \u0434\u043b\u0438\u043d\u043d\u0435\u0435 \u043e\u043a\u043d\u043e, \u0442\u0435\u043c \u0432\u044b\u0448\u0435 \u0448\u0430\u043d\u0441 \u0432\u0440\u0435\u043c\u0435\u043d\u043d\u043e \u043e\u043f\u043b\u0430\u0442\u0438\u0442\u044c \u043b\u0438\u0448\u043d\u044e\u044e \u043d\u043e\u0434\u0443.<\/p>\n<p><strong>\u041e\u0434\u0438\u043d \u043f\u043e\u0434 \u0437\u0430\u0434\u0435\u0440\u0436\u0438\u0432\u0430\u0435\u0442 \u0432\u0441\u044e \u043d\u043e\u0434\u0443.<\/strong> <code>holder<\/code> \u0432\u044b\u0431\u0440\u0430\u043b \u0440\u043e\u0432\u043d\u043e 120 \u0441\u0435\u043a\u0443\u043d\u0434, \u0445\u043e\u0442\u044f \u0432\u0441\u0435 \u043e\u0441\u0442\u0430\u043b\u044c\u043d\u044b\u0435 \u0443\u0448\u043b\u0438 \u0437\u0430 15.<\/p>\n<h3>\u041c\u0435\u0445\u0430\u043d\u0438\u043a\u0430 \u0437\u0430\u0432\u0435\u0440\u0448\u0435\u043d\u0438\u044f \u2014 \u0438 \u0447\u0435\u0433\u043e \u0432 \u043d\u0435\u0439 \u043d\u0435\u0442<\/h3>\n<p>\u0421\u043e\u0431\u0440\u0430\u043d\u043d\u0430\u044f \u0438\u0437 \u0447\u0435\u0442\u044b\u0440\u0451\u0445 \u043f\u0440\u043e\u0433\u043e\u043d\u043e\u0432 \u0438 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u0430\u0446\u0438\u0438 Kubernetes \u043a\u0430\u0440\u0442\u0438\u043d\u0430:<\/p>\n<ol>\n<li>\n<p>\u0413\u0438\u043f\u0435\u0440\u0432\u0438\u0437\u043e\u0440 \u0438\u043d\u0438\u0446\u0438\u0438\u0440\u0443\u0435\u0442 \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435, logind \u0440\u0430\u0441\u0441\u044b\u043b\u0430\u0435\u0442 <code>PrepareForShutdown<\/code> \u0434\u0435\u0440\u0436\u0430\u0442\u0435\u043b\u044f\u043c delay-\u043b\u043e\u043a\u043e\u0432 \u0438 \u0436\u0434\u0451\u0442.<\/p>\n<\/li>\n<li>\n<p>Kubelet <strong>\u043d\u0435\u043c\u0435\u0434\u043b\u0435\u043d\u043d\u043e<\/strong> \u0432\u044b\u0441\u0442\u0430\u0432\u043b\u044f\u0435\u0442 \u043d\u043e\u0434\u0435 <code>Ready=False<\/code> \u0438 \u0441\u0438\u043d\u0445\u0440\u043e\u043d\u0438\u0437\u0438\u0440\u0443\u0435\u0442 \u0441\u0442\u0430\u0442\u0443\u0441 \u0441 API. Reason \u043f\u0440\u0438 \u044d\u0442\u043e\u043c \u043e\u0431\u044b\u0447\u043d\u044b\u0439 \u2014 <code>KubeletNotReady<\/code>, \u0430 \u0442\u0435\u043a\u0441\u0442 \u00abnode is shutting down\u00bb \u043f\u0440\u0438\u0445\u043e\u0434\u0438\u0442 \u0432 message: kubelet \u0441\u043a\u043b\u0430\u0434\u044b\u0432\u0430\u0435\u0442 \u043e\u0448\u0438\u0431\u043a\u0443 \u043e\u0442 shutdown manager \u0432 \u0442\u043e\u0442 \u0436\u0435 \u0430\u0433\u0440\u0435\u0433\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u044b\u0439 \u0441\u043f\u0438\u0441\u043e\u043a, \u0447\u0442\u043e \u0438 \u043e\u0448\u0438\u0431\u043a\u0438 runtime, \u0441\u0435\u0442\u0438 \u0438 \u0445\u0440\u0430\u043d\u0438\u043b\u0438\u0449\u0430. \u0414\u0430\u043b\u044c\u0448\u0435 \u0441\u0440\u0430\u0431\u0430\u0442\u044b\u0432\u0430\u0435\u0442 \u0448\u0442\u0430\u0442\u043d\u0430\u044f \u043c\u0435\u0445\u0430\u043d\u0438\u043a\u0430: node lifecycle controller \u0432\u0435\u0448\u0430\u0435\u0442 <code>node.kubernetes.io\/not-ready<\/code> \u2014 <code>NoSchedule<\/code> \u0437\u0430\u043a\u0440\u044b\u0432\u0430\u0435\u0442 \u043d\u043e\u0434\u0443 \u0434\u043b\u044f \u043f\u043b\u0430\u043d\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f, <code>NoExecute<\/code> \u0437\u0430\u043f\u0443\u0441\u043a\u0430\u0435\u0442 \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0435 \u043f\u043e\u0434\u043e\u0432 \u043f\u043e \u0438\u0445 <code>tolerationSeconds<\/code>. \u0414\u043e\u043f\u043e\u043b\u043d\u0438\u0442\u0435\u043b\u044c\u043d\u043e kubelet \u0440\u0435\u0436\u0435\u0442 \u043d\u043e\u0432\u044b\u0435 \u043f\u043e\u0434\u044b \u043d\u0430 PodAdmission, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 \u0434\u0430\u0436\u0435 \u043f\u043e\u0434 \u0441 \u0442\u043e\u043b\u0435\u0440\u0430\u0446\u0438\u0435\u0439 \u043a <code>not-ready:NoSchedule<\/code> \u0442\u0430\u043c \u043d\u0435 \u0441\u0442\u0430\u0440\u0442\u0443\u0435\u0442.<\/p>\n<\/li>\n<li>\n<p>Kubelet \u0434\u0435\u043b\u0438\u0442 \u043f\u043e\u0434\u044b \u043d\u0430 \u0444\u0430\u0437\u044b \u0438 \u043f\u0440\u043e\u0445\u043e\u0434\u0438\u0442 \u0438\u0445 <strong>\u043f\u043e\u0441\u043b\u0435\u0434\u043e\u0432\u0430\u0442\u0435\u043b\u044c\u043d\u043e<\/strong>: \u0441\u043d\u0430\u0447\u0430\u043b\u0430 \u043e\u0431\u044b\u0447\u043d\u044b\u0435, \u0437\u0430\u0442\u0435\u043c <code>system-node-critical<\/code>. \u041f\u043e\u0440\u044f\u0434\u043e\u043a \u0432\u0430\u0436\u0435\u043d: \u0441\u0435\u0442\u044c \u0438 CSI \u0433\u0430\u0441\u044f\u0442\u0441\u044f \u043f\u043e\u0441\u043b\u0435\u0434\u043d\u0438\u043c\u0438, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 \u043e\u0431\u044b\u0447\u043d\u044b\u0435 \u043f\u043e\u0434\u044b \u0434\u043e\u0436\u0438\u0432\u0430\u044e\u0442 \u0441 \u0440\u0430\u0431\u043e\u0447\u0435\u0439 \u0441\u0435\u0442\u044c\u044e \u0438 \u043f\u0440\u0438\u043c\u043e\u043d\u0442\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u044b\u043c\u0438 \u0442\u043e\u043c\u0430\u043c\u0438.<\/p>\n<\/li>\n<li>\n<p>\u041a\u0430\u0436\u0434\u043e\u043c\u0443 \u043f\u043e\u0434\u0443 \u0434\u0430\u0451\u0442\u0441\u044f <strong>\u043c\u0438\u043d\u0438\u043c\u0443\u043c<\/strong> \u0438\u0437 \u0435\u0433\u043e <code>terminationGracePeriodSeconds<\/code> \u0438 \u043e\u043a\u043d\u0430 \u0435\u0433\u043e \u0444\u0430\u0437\u044b.<\/p>\n<\/li>\n<li>\n<p>\u0424\u0430\u0437\u0430 \u0436\u0434\u0451\u0442 \u0441\u0430\u043c\u044b\u0439 \u043c\u0435\u0434\u043b\u0435\u043d\u043d\u044b\u0439 \u043f\u043e\u0434 \u0432 \u0433\u0440\u0443\u043f\u043f\u0435, \u043d\u043e \u043d\u0435 \u0434\u043e\u043b\u044c\u0448\u0435 \u0441\u0432\u043e\u0435\u0433\u043e \u043e\u043a\u043d\u0430.<\/p>\n<\/li>\n<li>\n<p>\u041a\u0430\u043a \u0442\u043e\u043b\u044c\u043a\u043e \u0432\u0441\u0435 \u0444\u0430\u0437\u044b \u043e\u0442\u0440\u0430\u0431\u043e\u0442\u0430\u043b\u0438, kubelet \u043e\u0442\u043f\u0443\u0441\u043a\u0430\u0435\u0442 lock \u2014 \u0441\u0438\u0441\u0442\u0435\u043c\u0430 \u0433\u0430\u0441\u043d\u0435\u0442, \u043d\u0435 \u0434\u043e\u0441\u0438\u0436\u0438\u0432\u0430\u044f \u043e\u0441\u0442\u0430\u0442\u043e\u043a.<\/p>\n<\/li>\n<\/ol>\n<p>\u0422\u043e \u0435\u0441\u0442\u044c \u043f\u043e \u044d\u0444\u0444\u0435\u043a\u0442\u0443 \u044d\u0442\u043e \u0434\u0435\u0439\u0441\u0442\u0432\u0438\u0442\u0435\u043b\u044c\u043d\u043e cordon \u043f\u043b\u044e\u0441 drain, \u0442\u043e\u043b\u044c\u043a\u043e \u0432\u044b\u043f\u043e\u043b\u043d\u044f\u0435\u043c\u044b\u0435 \u043d\u0435 \u0430\u0434\u043c\u0438\u043d\u0438\u0441\u0442\u0440\u0430\u0442\u043e\u0440\u043e\u043c, \u0430 \u0441\u0430\u043c\u0438\u043c \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u043e\u043c: \u043d\u043e\u0434\u0430 \u0437\u0430\u043a\u0440\u044b\u0432\u0430\u0435\u0442\u0441\u044f \u0434\u043b\u044f \u043f\u043b\u0430\u043d\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f \u0432 \u043f\u0435\u0440\u0432\u044b\u0435 \u0436\u0435 \u0441\u0435\u043a\u0443\u043d\u0434\u044b, \u0430 \u043f\u043e\u0434\u044b \u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u044c\u043d\u043e \u0438 \u0437\u0430\u0432\u0435\u0440\u0448\u0430\u044e\u0442\u0441\u044f \u043d\u0430 \u043c\u0435\u0441\u0442\u0435 (kubelet), \u0438 \u0432\u044b\u0442\u0435\u0441\u043d\u044f\u044e\u0442\u0441\u044f \u043f\u043e taint (taint manager).<\/p>\n<p>\u0427\u0435\u0433\u043e \u043f\u0440\u0438 \u044d\u0442\u043e\u043c \u0432\u0441\u0451 \u0436\u0435 <strong>\u043d\u0435<\/strong> \u043f\u0440\u043e\u0438\u0441\u0445\u043e\u0434\u0438\u0442:<\/p>\n<ul>\n<li>\n<p><strong>PodDisruptionBudget \u043d\u0435 \u0441\u043e\u0431\u043b\u044e\u0434\u0430\u0435\u0442\u0441\u044f<\/strong> \u043d\u0438 \u043d\u0430 \u043e\u0434\u043d\u043e\u043c \u0438\u0437 \u0434\u0432\u0443\u0445 \u043f\u0443\u0442\u0435\u0439. Kubelet \u0437\u0430\u0432\u0435\u0440\u0448\u0430\u0435\u0442 \u043f\u043e\u0434\u044b \u043f\u043e \u0440\u0430\u0441\u043f\u0438\u0441\u0430\u043d\u0438\u044e \u0444\u0430\u0437, \u0430 taint manager \u0443\u0434\u0430\u043b\u044f\u0435\u0442 \u0438\u0445 \u043d\u0430\u043f\u0440\u044f\u043c\u0443\u044e \u2014 \u043e\u0431\u0430 \u0432 \u043e\u0431\u0445\u043e\u0434 Eviction API. \u041f\u043e\u043b\u0430\u0433\u0430\u0442\u044c\u0441\u044f \u043d\u0430 PDB \u0434\u043b\u044f \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0445 \u043d\u043e\u0434 \u043d\u0435\u043b\u044c\u0437\u044f, \u043d\u0443\u0436\u0435\u043d <code>topologySpread<\/code> \u043f\u043e \u0442\u0438\u043f\u0443 \u043d\u043e\u0434 \u0438 \u0437\u0430\u043f\u0430\u0441 \u0440\u0435\u043f\u043b\u0438\u043a.<\/p>\n<\/li>\n<li>\n<p><strong>\u041f\u043e\u0434\u044b \u043d\u0435 \u043f\u0435\u0440\u0435\u0435\u0437\u0436\u0430\u044e\u0442 \u0437\u0430\u0440\u0430\u043d\u0435\u0435.<\/strong> \u041c\u0438\u0433\u0440\u0430\u0446\u0438\u0438 \u00ab\u0434\u043e \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u044f\u00bb \u043d\u0435\u0442: \u043f\u043e\u0434 \u0434\u043e\u0436\u0438\u0432\u0430\u0435\u0442 \u043d\u0430 \u0443\u0445\u043e\u0434\u044f\u0449\u0435\u0439 \u043d\u043e\u0434\u0435, \u0430 \u0437\u0430\u043c\u0435\u043d\u0443 \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u043b\u0435\u0440 \u043f\u043e\u0434\u043d\u0438\u043c\u0430\u0435\u0442 \u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u044c\u043d\u043e. \u0414\u043b\u044f stateless \u044d\u0442\u043e \u043d\u0435\u0437\u0430\u043c\u0435\u0442\u043d\u043e, \u0434\u043b\u044f \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0438, \u043a\u043e\u0442\u043e\u0440\u043e\u0439 \u043d\u0443\u0436\u043d\u043e \u043f\u0435\u0440\u0435\u0434\u0430\u0442\u044c \u0440\u043e\u043b\u044c \u043f\u0435\u0440\u0435\u0434 \u0443\u0445\u043e\u0434\u043e\u043c, \u2014 \u043d\u0435\u0442.<\/p>\n<\/li>\n<\/ul>\n<p>\u041f\u0440\u0430\u043a\u0442\u0438\u0447\u0435\u0441\u043a\u043e\u0435 \u0441\u043b\u0435\u0434\u0441\u0442\u0432\u0438\u0435 \u0434\u043b\u044f \u0442\u0430\u0439\u043c\u0438\u043d\u0433\u0430: \u0435\u0441\u043b\u0438 <code>tolerationSeconds<\/code> \u043f\u043e\u0434\u0430 \u043c\u0435\u043d\u044c\u0448\u0435 \u043e\u043a\u043d\u0430 \u0444\u0430\u0437\u044b, \u0437\u0430\u043c\u0435\u043d\u0430 \u043f\u043e\u044f\u0432\u0438\u0442\u0441\u044f \u0440\u0430\u043d\u044c\u0448\u0435, \u0447\u0435\u043c \u043e\u0440\u0438\u0433\u0438\u043d\u0430\u043b \u0431\u0443\u0434\u0435\u0442 \u0434\u043e\u0431\u0438\u0442, \u0438 \u043a\u0430\u043a\u043e\u0435-\u0442\u043e \u0432\u0440\u0435\u043c\u044f \u043e\u043d\u0438 \u043f\u0440\u043e\u0440\u0430\u0431\u043e\u0442\u0430\u044e\u0442 \u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u044c\u043d\u043e.<\/p>\n<p>\u0417\u043d\u0430\u0447\u0435\u043d\u0438\u0435 <code>tolerationSeconds<\/code> \u0432 \u043c\u0430\u043d\u0438\u0444\u0435\u0441\u0442\u0430\u0445 \u043e\u0431\u044b\u0447\u043d\u043e \u043d\u0435 \u043f\u0438\u0448\u0443\u0442 \u2014 \u0435\u0433\u043e \u043f\u043e\u0434\u0441\u0442\u0430\u0432\u043b\u044f\u0435\u0442 apiserver \u0438\u0437 <code>--default-not-ready-toleration-seconds<\/code>. \u0412 \u044d\u0442\u043e\u043c \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0435 \u043e\u043d\u043e \u0440\u0430\u0432\u043d\u043e 120 \u0441\u0435\u043a\u0443\u043d\u0434\u0430\u043c, \u0447\u0442\u043e \u0432\u0438\u0434\u043d\u043e \u0443 \u043b\u044e\u0431\u043e\u0433\u043e \u043f\u043e\u0434\u0430 \u0431\u0435\u0437 \u044f\u0432\u043d\u044b\u0445 tolerations:<\/p>\n<pre><code class=\"bash\">$ kubectl get pod -n kube-system &lt;\u043b\u044e\u0431\u043e\u0439-\u043f\u043e\u0434&gt; -o jsonpath='{.spec.tolerations}' | jq[{\"key\":\"node.kubernetes.io\/not-ready\",\"operator\":\"Exists\",  \"effect\":\"NoExecute\",\"tolerationSeconds\":120}, \u2026]<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p>\u0422\u043e \u0435\u0441\u0442\u044c \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e \u043e\u043d\u043e \u0441\u043e\u0432\u043f\u0430\u0434\u0430\u0435\u0442 \u0441 \u043d\u0430\u0448\u0438\u043c \u043e\u043a\u043d\u043e\u043c \u0444\u0430\u0437\u044b (\u0442\u043e\u0436\u0435 120 \u0441\u0435\u043a\u0443\u043d\u0434), \u0438 \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0435 \u043f\u043e taint \u0441\u0445\u043e\u0434\u0438\u0442\u0441\u044f \u0441 \u0437\u0430\u0432\u0435\u0440\u0448\u0435\u043d\u0438\u0435\u043c kubelet\u2019\u043e\u043c \u043f\u0440\u0438\u043c\u0435\u0440\u043d\u043e \u0432 \u043e\u0434\u043d\u043e\u0439 \u0442\u043e\u0447\u043a\u0435. \u041f\u0440\u043e\u0432\u0435\u0440\u044c\u0442\u0435 \u044d\u0442\u043e \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u0435 \u0432 \u0441\u0432\u043e\u0451\u043c \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0435: \u0430\u043f\u0441\u0442\u0440\u0438\u043c\u043d\u044b\u0439 \u0434\u0435\u0444\u043e\u043b\u0442 Kubernetes \u2014 300 \u0441\u0435\u043a\u0443\u043d\u0434, \u0438 \u0441 \u043d\u0438\u043c \u0437\u0430\u043c\u0435\u043d\u0430 \u043f\u043e\u044f\u0432\u0438\u0442\u0441\u044f \u0443\u0436\u0435 \u043f\u043e\u0441\u043b\u0435 \u0442\u043e\u0433\u043e, \u043a\u0430\u043a \u043e\u0440\u0438\u0433\u0438\u043d\u0430\u043b \u0434\u043e\u0431\u044c\u044e\u0442.<\/p>\n<h3>\u041a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044f<\/h3>\n<p>\u0415\u0434\u0438\u043d\u0441\u0442\u0432\u0435\u043d\u043d\u044b\u0439 \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u0438\u0432\u0430\u0435\u043c\u044b\u0439 \u0441\u043f\u043e\u0441\u043e\u0431 \u0434\u043e\u043d\u0435\u0441\u0442\u0438 \u043d\u0430\u0441\u0442\u0440\u043e\u0439\u043a\u0438 \u0434\u043e \u043a\u0430\u0436\u0434\u043e\u0439 \u043d\u043e\u0432\u043e\u0439 \u043d\u043e\u0434\u044b \u2014 <code>user_data<\/code> \u0433\u0440\u0443\u043f\u043f\u044b \u043d\u043e\u0434. \u042d\u0442\u043e base64-\u043a\u043e\u0434\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u044b\u0439 \u0441\u043a\u0440\u0438\u043f\u0442, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 cloud-init \u0432\u044b\u043f\u043e\u043b\u043d\u044f\u0435\u0442 \u043f\u0440\u0438 \u0438\u043d\u0438\u0446\u0438\u0430\u043b\u0438\u0437\u0430\u0446\u0438\u0438 \u043d\u043e\u0434\u044b.<\/p>\n<p>\u0412\u0430\u0436\u043d\u043e\u0435 \u043e\u0433\u0440\u0430\u043d\u0438\u0447\u0435\u043d\u0438\u0435: <code><strong>user_data<\/strong><\/code><strong> \u043d\u0435\u043b\u044c\u0437\u044f \u0438\u0437\u043c\u0435\u043d\u0438\u0442\u044c \u0443 \u0441\u0443\u0449\u0435\u0441\u0442\u0432\u0443\u044e\u0449\u0435\u0439 \u0433\u0440\u0443\u043f\u043f\u044b<\/strong> \u2014 \u0432 \u0442\u0435\u0440\u043c\u0438\u043d\u0430\u0445 Terraform \u044d\u0442\u043e ForceNew, \u043b\u044e\u0431\u0430\u044f \u043f\u0440\u0430\u0432\u043a\u0430 \u043e\u0437\u043d\u0430\u0447\u0430\u0435\u0442 \u043f\u0435\u0440\u0435\u0441\u043e\u0437\u0434\u0430\u043d\u0438\u0435 \u0433\u0440\u0443\u043f\u043f\u044b \u043d\u043e\u0434. \u0417\u043d\u0430\u0447\u0435\u043d\u0438\u044f \u0441\u0442\u043e\u0438\u0442 \u043f\u043e\u0434\u043e\u0431\u0440\u0430\u0442\u044c \u0437\u0430\u0440\u0430\u043d\u0435\u0435.<\/p>\n<h4>\u0421\u043a\u0440\u0438\u043f\u0442 \u0434\u043b\u044f user_data<\/h4>\n<p><code>preemptible-user-data.sh<\/code>:<\/p>\n<pre><code class=\"bash\">#!\/bin\/bash# \u0412\u043a\u043b\u044e\u0447\u0430\u0435\u0442 kubelet graceful node shutdown: \u043f\u0440\u0438 \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0438 \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u043e\u0439 \u043d\u043e\u0434\u044b# logind \u0440\u0430\u0441\u0441\u044b\u043b\u0430\u0435\u0442 PrepareForShutdown \u0438 \u0436\u0434\u0451\u0442 delay-lock, kubelet \u0443\u0441\u043f\u0435\u0432\u0430\u0435\u0442# \u043f\u043e\u0441\u043b\u0430\u0442\u044c \u043f\u043e\u0434\u0430\u043c SIGTERM \u0438 \u0434\u0430\u0442\u044c \u0438\u043c \u0434\u043e\u0440\u0430\u0431\u043e\u0442\u0430\u0442\u044c.## \u0421\u0432\u043e\u0439 drop-in \u0434\u043b\u044f logind \u043e\u0431\u044f\u0437\u0430\u0442\u0435\u043b\u0435\u043d: unattended-upgrades \u043a\u043b\u0430\u0434\u0451\u0442# InhibitDelayMaxSec=30 \u0432 \/usr\/lib\/systemd\/logind.conf.d\/, drop-in'\u044b \u0441\u043e\u0440\u0442\u0438\u0440\u0443\u044e\u0442\u0441\u044f# \u043f\u043e \u0438\u043c\u0435\u043d\u0438 \u0444\u0430\u0439\u043b\u0430 \u0433\u043b\u043e\u0431\u0430\u043b\u044c\u043d\u043e \u043f\u043e \u0432\u0441\u0435\u043c \u043a\u0430\u0442\u0430\u043b\u043e\u0433\u0430\u043c, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 \u043d\u0430\u0448 \u043d\u0430\u0447\u0438\u043d\u0430\u0435\u0442\u0441\u044f \u0441 zz.# \u0411\u0435\u0437 \u044d\u0442\u043e\u0433\u043e kubelet \u043f\u0430\u0434\u0430\u0435\u0442 \u0441 \"Failed to start node shutdown manager\".set -euGRACE=150sGRACE_CRITICAL=30sINHIBIT_MAX=180install -d \/etc\/systemd\/logind.conf.dcat &gt; \/etc\/systemd\/logind.conf.d\/zz-kubelet-graceful.conf &lt;&lt;EOF[Login]InhibitDelayMaxSec=${INHIBIT_MAX}EOFsystemctl restart systemd-logindCONF=\/etc\/kubernetes\/kubelet-config.conffor _ in $(seq 60); do  [ -f \"$CONF\" ] &amp;&amp; break  sleep 5doneif [ ! -f \"$CONF\" ]; then  echo \"kubelet config did not appear in time\" &gt;&amp;2  exit 1fiif ! grep -q '^shutdownGracePeriod:' \"$CONF\"; then  cat &gt;&gt; \"$CONF\" &lt;&lt;EOFshutdownGracePeriod: ${GRACE}shutdownGracePeriodCriticalPods: ${GRACE_CRITICAL}EOFfiif systemctl is-active --quiet kubelet; then  systemctl restart kubeletfi<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p>\u041f\u043e\u044f\u0441\u043d\u0435\u043d\u0438\u044f \u043a \u0434\u0435\u0442\u0430\u043b\u044f\u043c, \u043a\u0430\u0436\u0434\u0430\u044f \u0438\u0437 \u043a\u043e\u0442\u043e\u0440\u044b\u0445 \u0441\u0442\u043e\u0438\u043b\u0430 \u043e\u0442\u0434\u0435\u043b\u044c\u043d\u043e\u0439 \u0438\u0442\u0435\u0440\u0430\u0446\u0438\u0438:<\/p>\n<ul>\n<li>\n<p><code>INHIBIT_MAX<\/code> (180) <strong>\u0431\u043e\u043b\u044c\u0448\u0435<\/strong> <code>GRACE<\/code> (150) \u2014 \u0438\u043d\u0430\u0447\u0435 kubelet \u043e\u0442\u043a\u0430\u0436\u0435\u0442\u0441\u044f \u0441\u0442\u0430\u0440\u0442\u043e\u0432\u0430\u0442\u044c. \u0417\u0430\u043f\u0430\u0441 \u0432 30 \u0441\u0435\u043a\u0443\u043d\u0434.<\/p>\n<\/li>\n<li>\n<p><code>GRACE<\/code> \u043c\u0438\u043d\u0443\u0441 <code>GRACE_CRITICAL<\/code> = 120 \u0441\u0435\u043a\u0443\u043d\u0434 \u0434\u043e\u0441\u0442\u0430\u0451\u0442\u0441\u044f \u043e\u0431\u044b\u0447\u043d\u044b\u043c \u043f\u043e\u0434\u0430\u043c. \u0415\u0441\u043b\u0438 \u043d\u0443\u0436\u043d\u043e \u0434\u0430\u0442\u044c \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u044f\u043c \u0440\u043e\u0432\u043d\u043e N \u0441\u0435\u043a\u0443\u043d\u0434, <code>GRACE<\/code> \u0434\u043e\u043b\u0436\u0435\u043d \u0431\u044b\u0442\u044c <code>N + GRACE_CRITICAL<\/code>.<\/p>\n<\/li>\n<li>\n<p><code>install -d<\/code> \u0434\u043b\u044f \u043a\u0430\u0442\u0430\u043b\u043e\u0433\u0430 logind \u043e\u0431\u044f\u0437\u0430\u0442\u0435\u043b\u0435\u043d: \u043d\u0430 \u0441\u0432\u0435\u0436\u0435\u0439 \u043d\u043e\u0434\u0435 \u0435\u0433\u043e \u043d\u0435\u0442. \u041e\u043d \u043f\u043e\u044f\u0432\u043b\u044f\u0435\u0442\u0441\u044f \u0442\u043e\u043b\u044c\u043a\u043e \u0435\u0441\u043b\u0438 kubelet \u0443\u0441\u043f\u0435\u043b \u0441\u043e\u0437\u0434\u0430\u0442\u044c \u0442\u0430\u043c \u0441\u0432\u043e\u0439 <code>99-kubelet.conf<\/code>.<\/p>\n<\/li>\n<li>\n<p><code>systemctl restart systemd-logind<\/code> \u2014 \u0437\u0434\u0435\u0441\u044c \u0445\u0432\u0430\u0442\u0438\u043b\u043e \u0431\u044b \u0438 <code>reload<\/code> (\u043f\u0440\u043e\u0432\u0435\u0440\u0435\u043d\u043e \u0432\u044b\u0448\u0435), \u043d\u043e \u0432 cloud-init \u0441\u0435\u0441\u0441\u0438\u0439 \u0435\u0449\u0451 \u043d\u0435\u0442, \u0430 \u0440\u0435\u0441\u0442\u0430\u0440\u0442 \u0433\u0430\u0440\u0430\u043d\u0442\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u043e \u043f\u0435\u0440\u0435\u0447\u0438\u0442\u044b\u0432\u0430\u0435\u0442 \u043a\u043e\u043d\u0444\u0438\u0433.<\/p>\n<\/li>\n<li>\n<p>\u041e\u0436\u0438\u0434\u0430\u043d\u0438\u0435 <code>kubelet-config.conf<\/code> \u0434\u043e 5 \u043c\u0438\u043d\u0443\u0442: cloud-init \u043c\u043e\u0436\u0435\u0442 \u043e\u0442\u0440\u0430\u0431\u043e\u0442\u0430\u0442\u044c \u0440\u0430\u043d\u044c\u0448\u0435, \u0447\u0435\u043c MKS \u0440\u0430\u0437\u0432\u0435\u0440\u043d\u0451\u0442 \u043a\u043e\u043c\u043f\u043e\u043d\u0435\u043d\u0442\u044b \u043d\u043e\u0434\u044b.<\/p>\n<\/li>\n<li>\n<p>\u041f\u0435\u0440\u0435\u0437\u0430\u043f\u0443\u0441\u043a kubelet \u0442\u043e\u043b\u044c\u043a\u043e \u0435\u0441\u043b\u0438 \u043e\u043d \u0443\u0436\u0435 \u043f\u043e\u0434\u043d\u044f\u0442 \u2014 \u0438\u043d\u0430\u0447\u0435 \u043e\u043d \u0441\u0442\u0430\u0440\u0442\u0443\u0435\u0442 \u043f\u043e\u0437\u0436\u0435 \u0441\u0430\u043c \u0438 \u043f\u043e\u0434\u0445\u0432\u0430\u0442\u0438\u0442 \u0433\u043e\u0442\u043e\u0432\u044b\u0439 \u043a\u043e\u043d\u0444\u0438\u0433.<\/p>\n<\/li>\n<\/ul>\n<p>\u0414\u043e\u043f\u0438\u0441\u044b\u0432\u0430\u043d\u0438\u0435 \u0432 \u043e\u0441\u043d\u043e\u0432\u043d\u043e\u0439 \u043a\u043e\u043d\u0444\u0438\u0433 \u2014 \u0432\u044b\u043d\u0443\u0436\u0434\u0435\u043d\u043d\u043e\u0435 \u0440\u0435\u0448\u0435\u043d\u0438\u0435: \u044d\u0442\u0438\u043c \u0444\u0430\u0439\u043b\u043e\u043c \u0432\u043b\u0430\u0434\u0435\u0435\u0442 MKS, \u0438 \u043f\u0440\u0438 \u043e\u0431\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0438 \u043a\u043e\u043c\u043f\u043e\u043d\u0435\u043d\u0442\u043e\u0432 \u043d\u043e\u0434\u044b \u043f\u0440\u0430\u0432\u043a\u0430 \u043c\u043e\u0436\u0435\u0442 \u0431\u044b\u0442\u044c \u0437\u0430\u0442\u0451\u0440\u0442\u0430. \u041e\u0431\u043e\u0439\u0442\u0438\u0441\u044c \u0444\u043b\u0430\u0433\u043e\u043c \u0437\u0430\u043f\u0443\u0441\u043a\u0430 \u043d\u0435\u043b\u044c\u0437\u044f: \u0430\u0440\u0433\u0443\u043c\u0435\u043d\u0442\u044b kubelet \u0437\u0430\u0434\u0430\u043d\u044b \u0447\u0435\u0440\u0435\u0437 <code>Environment=<\/code> \u0432\u043d\u0443\u0442\u0440\u0438 \u0441\u0430\u043c\u043e\u0433\u043e \u044e\u043d\u0438\u0442\u0430, <code>EnvironmentFile<\/code> \u0432 \u043d\u0451\u043c \u043d\u0435\u0442, \u0442\u0430\u043a \u0447\u0442\u043e \u0434\u043e\u0431\u0430\u0432\u0438\u0442\u044c <code>--config-dir<\/code> \u043c\u043e\u0436\u043d\u043e \u0442\u043e\u043b\u044c\u043a\u043e \u043f\u0435\u0440\u0435\u043e\u043f\u0440\u0435\u0434\u0435\u043b\u0438\u0432 <code>ExecStart<\/code> \u2014 \u0430 \u044d\u0442\u043e \u0443\u0436\u0435 \u0437\u0430\u0432\u044f\u0437\u043a\u0430 \u043d\u0430 \u0432\u043d\u0443\u0442\u0440\u0435\u043d\u043d\u0435\u0435 \u0443\u0441\u0442\u0440\u043e\u0439\u0441\u0442\u0432\u043e MKS. \u041f\u043e\u0434\u0440\u043e\u0431\u043d\u0435\u0435 \u0441 \u043f\u0440\u0438\u043c\u0435\u0440\u0430\u043c\u0438 \u2014 \u0432 \u0440\u0430\u0437\u0434\u0435\u043b\u0435 \u00ab\u0420\u0435\u043a\u043e\u043c\u0435\u043d\u0434\u0430\u0446\u0438\u0438 \u043f\u0440\u043e\u0432\u0430\u0439\u0434\u0435\u0440\u0443\u00bb.<\/p>\n<h4>Terraform: \u0433\u0440\u0443\u043f\u043f\u0430 \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0445 \u043d\u043e\u0434<\/h4>\n<pre><code>resource \"selectel_mks_nodegroup_v1\" \"preemptible\" {  cluster_id        = selectel_mks_cluster_v1.cluster.id  project_id        = local.project_id  region            = local.region  availability_zone = \"ru-7a\"  nodes_count         = 2  enable_autoscale    = true  autoscale_min_nodes = 2  autoscale_max_nodes = 6  cpus      = 4  ram_mb    = 8192  volume_gb = 40  # \u0421\u0435\u0442\u0435\u0432\u043e\u0439 \u0437\u0430\u0433\u0440\u0443\u0437\u043e\u0447\u043d\u044b\u0439 \u0434\u0438\u0441\u043a: \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u043d\u0430\u044f \u043d\u043e\u0434\u0430 \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0430\u0435\u0442\u0441\u044f \u0437\u0430 \u043c\u0438\u043d\u0443\u0442\u0443 \u0432\u043c\u0435\u0441\u0442\u043e  # 10 \u0438 \u0441 \u0441\u043e\u0445\u0440\u0430\u043d\u0435\u043d\u0438\u0435\u043c \u0441\u043e\u0441\u0442\u043e\u044f\u043d\u0438\u044f, \u043b\u043e\u043a\u0430\u043b\u044c\u043d\u044b\u0439 \u0434\u0438\u0441\u043a \u043f\u0440\u0438 \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0438 \u0442\u0435\u0440\u044f\u0435\u0442\u0441\u044f.  local_volume = false  volume_type  = \"universal.ru-7a\"  preemptible = true  user_data   = base64encode(file(\"${path.module}\/preemptible-user-data.sh\"))  labels = {    \"type\"        = \"preemptible\"    \"preemptible\" = \"true\"  }  taints {    key    = \"preemptible\"    value  = \"true\"    effect = \"NoSchedule\"  }}<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p><code>local_volume<\/code>, <code>volume_type<\/code> \u0438 <code>user_data<\/code> \u2014 \u0432\u0441\u0435 \u0442\u0440\u0438 ForceNew.<\/p>\n<h4>\u041f\u0440\u043e \u0441\u0435\u0442\u0435\u0432\u043e\u0439 \u0434\u0438\u0441\u043a: \u0441\u0430\u043c\u0430\u044f \u0432\u044b\u0433\u043e\u0434\u043d\u0430\u044f \u0441\u0442\u0440\u043e\u0447\u043a\u0430 \u0432 \u043a\u043e\u043d\u0444\u0438\u0433\u0435<\/h4>\n<p>\u0418\u0437 \u0432\u0441\u0435\u0439 \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u0438 <code>local_volume = false<\/code> \u2014 \u0441\u0430\u043c\u0430\u044f \u0432\u044b\u0433\u043e\u0434\u043d\u0430\u044f \u0441\u0442\u0440\u043e\u0447\u043a\u0430, \u0438 \u043f\u043e\u0441\u0442\u0430\u0432\u0438\u0442\u044c \u0435\u0451 \u0441\u0442\u043e\u0438\u0442 \u0434\u0430\u0436\u0435 \u0442\u0435\u043c, \u043a\u043e\u043c\u0443 graceful shutdown \u043d\u0435 \u043d\u0443\u0436\u0435\u043d \u0432\u043e\u0432\u0441\u0435: \u0438\u043c\u0435\u043d\u043d\u043e \u043e\u043d\u0430 \u043e\u043f\u0440\u0435\u0434\u0435\u043b\u044f\u0435\u0442, \u0432\u0435\u0440\u043d\u0451\u0442\u0441\u044f \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u043d\u0430\u044f \u043d\u043e\u0434\u0430 \u0437\u0430 \u0434\u0435\u0441\u044f\u0442\u043a\u0438 \u0441\u0435\u043a\u0443\u043d\u0434 \u0438\u043b\u0438 \u0437\u0430 \u0434\u0435\u0441\u044f\u0442\u044c \u043c\u0438\u043d\u0443\u0442.<\/p>\n<p>\u0421 \u043b\u043e\u043a\u0430\u043b\u044c\u043d\u044b\u043c \u0434\u0438\u0441\u043a\u043e\u043c \u043d\u043e\u0434\u0430 <strong>\u043f\u0435\u0440\u0435\u0441\u043e\u0437\u0434\u0430\u0451\u0442\u0441\u044f \u0438\u0437 \u043e\u0431\u0440\u0430\u0437\u0430<\/strong>: hostname \u0441\u043e\u0445\u0440\u0430\u043d\u044f\u0435\u0442\u0441\u044f, \u043d\u043e \u0441\u0435\u0440\u0432\u0435\u0440 \u043d\u043e\u0432\u044b\u0439, IP \u043d\u043e\u0432\u044b\u0439, Node-\u043e\u0431\u044a\u0435\u043a\u0442 \u0432 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0435 \u043f\u0435\u0440\u0435\u0441\u043e\u0437\u0434\u0430\u0451\u0442\u0441\u044f, \u0432\u0441\u0451 \u0441\u043e\u0434\u0435\u0440\u0436\u0438\u043c\u043e\u0435 \u0434\u0438\u0441\u043a\u0430 \u0442\u0435\u0440\u044f\u0435\u0442\u0441\u044f, \u0432\u043e\u0441\u0441\u0442\u0430\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0435 \u0434\u043e 10 \u043c\u0438\u043d\u0443\u0442. \u041a\u0430\u0436\u0434\u044b\u0435 \u0441\u0443\u0442\u043a\u0438, \u043d\u0430 \u043a\u0430\u0436\u0434\u043e\u0439 \u043d\u043e\u0434\u0435 \u0433\u0440\u0443\u043f\u043f\u044b.<\/p>\n<p>\u0421 \u0441\u0435\u0442\u0435\u0432\u044b\u043c \u0434\u0438\u0441\u043a\u043e\u043c \u043d\u043e\u0434\u0430 \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0430\u0435\u0442\u0441\u044f \u0441\u043e \u0441\u0432\u043e\u0438\u043c \u0441\u043e\u0441\u0442\u043e\u044f\u043d\u0438\u0435\u043c \u0437\u0430 \u0434\u0435\u0441\u044f\u0442\u043a\u0438 \u0441\u0435\u043a\u0443\u043d\u0434 \u2014 \u0432\u043c\u0435\u0441\u0442\u0435 \u0441 \u043a\u044d\u0448\u0435\u043c \u043e\u0431\u0440\u0430\u0437\u043e\u0432 containerd, \u0442\u043e \u0435\u0441\u0442\u044c \u043f\u043e\u0441\u043b\u0435 \u0432\u043e\u0437\u0432\u0440\u0430\u0442\u0430 \u0435\u0439 \u043d\u0435 \u043d\u0443\u0436\u043d\u043e \u0437\u0430\u043d\u043e\u0432\u043e \u0442\u044f\u043d\u0443\u0442\u044c \u043e\u0431\u0440\u0430\u0437\u044b. \u041f\u043b\u0430\u0442\u0430 \u2014 40 \u0413\u0411 \u0441\u0435\u0442\u0435\u0432\u043e\u0433\u043e \u0434\u0438\u0441\u043a\u0430 \u043f\u0440\u043e\u0434\u043e\u043b\u0436\u0430\u044e\u0442 \u0442\u0430\u0440\u0438\u0444\u0438\u0446\u0438\u0440\u043e\u0432\u0430\u0442\u044c\u0441\u044f, \u043f\u043e\u043a\u0430 \u043d\u043e\u0434\u0430 \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0430. \u041d\u0430 \u0444\u043e\u043d\u0435 70% \u0441\u043a\u0438\u0434\u043a\u0438 \u043d\u0430 vCPU\/RAM \u044d\u0442\u043e \u043d\u0435\u0441\u0443\u0449\u0435\u0441\u0442\u0432\u0435\u043d\u043d\u043e.<\/p>\n<p>\u041e\u0442\u0434\u0435\u043b\u044c\u043d\u043e\u0433\u043e \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u0430 \u0434\u043b\u044f \u0441\u043e\u0445\u0440\u0430\u043d\u0435\u043d\u0438\u044f \u0434\u0438\u0441\u043a\u0430 \u0432 Terraform \u043d\u0435\u0442: MKS \u0441\u0430\u043c \u0441\u043e\u0437\u0434\u0430\u0451\u0442 \u0442\u043e\u043c\u0430 \u0441 <code>delete_on_termination: false<\/code>, \u043a\u043e\u0433\u0434\u0430 \u0433\u0440\u0443\u043f\u043f\u0430 \u043e\u0431\u044a\u044f\u0432\u043b\u0435\u043d\u0430 \u0441 <code>local_volume = false<\/code>. \u041f\u0440\u043e\u0432\u0435\u0440\u0438\u0442\u044c \u043c\u043e\u0436\u043d\u043e \u0442\u043e\u043b\u044c\u043a\u043e \u0441\u043e \u0441\u0442\u043e\u0440\u043e\u043d\u044b \u043e\u0431\u043b\u0430\u043a\u0430:<\/p>\n<pre><code class=\"bash\">$ openstack server show &lt;node&gt; -f json | jq '.volumes_attached'[{\"id\": \"5d4f4f3f-\u2026\", \"delete_on_termination\": false}]<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<h3>\u041f\u0440\u043e\u0432\u0435\u0440\u043a\u0430 \u043f\u043e\u0441\u043b\u0435 \u043f\u0440\u0438\u043c\u0435\u043d\u0435\u043d\u0438\u044f<\/h3>\n<pre><code class=\"bash\">$ kubectl get --raw \"\/api\/v1\/nodes\/&lt;node&gt;\/proxy\/configz\" \\    | jq -c '.kubeletconfig | {shutdownGracePeriod, shutdownGracePeriodCriticalPods}'{\"shutdownGracePeriod\":\"2m30s\",\"shutdownGracePeriodCriticalPods\":\"30s\"}<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p>\u0414\u0430\u043b\u044c\u0448\u0435 \u2014 \u0441 \u0441\u0430\u043c\u043e\u0439 \u043d\u043e\u0434\u044b (\u043d\u0430\u043f\u0440\u0438\u043c\u0435\u0440, \u0447\u0435\u0440\u0435\u0437 <code>kubectl debug node\/&lt;node&gt; --profile=sysadmin<\/code>):<\/p>\n<pre><code class=\"bash\"># \u043f\u043e\u0442\u043e\u043b\u043e\u043a logind \u043f\u043e\u0434\u043d\u044f\u043b\u0441\u044f$ busctl get-property org.freedesktop.login1 \/org\/freedesktop\/login1 \\    org.freedesktop.login1.Manager InhibitDelayMaxUSect 180000000# \u043c\u0435\u043d\u0435\u0434\u0436\u0435\u0440 \u0441\u0442\u0430\u0440\u0442\u043e\u0432\u0430\u043b \u0438 \u0440\u0430\u0437\u0434\u0430\u043b \u043e\u043a\u043d\u0430 \u043f\u043e \u0444\u0430\u0437\u0430\u043c$ journalctl -b 0 -u kubelet | grep \"shutdown manager\"\"Creating node shutdown manager\" shutdownGracePeriodRequested=\"2m30s\"  shutdownGracePeriodCriticalPods=\"30s\"  shutdownGracePeriodByPodPriority=[{\"Priority\":0,\"ShutdownGracePeriodSeconds\":120},                                    {\"Priority\":2000000000,\"ShutdownGracePeriodSeconds\":30}]# lock \u0432\u0437\u044f\u0442$ systemd-inhibit --list | grep kubeletkubelet  0  root  2303  kubelet  shutdown  Kubelet needs time to handle node shutdown  delay<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p>\u0413\u043b\u0430\u0432\u043d\u044b\u0439 \u043f\u0440\u0438\u0437\u043d\u0430\u043a \u043e\u0448\u0438\u0431\u043a\u0438 \u2014 \u0441\u0442\u0440\u043e\u043a\u0430 <code>Failed to start node shutdown manager<\/code> \u0432 \u0436\u0443\u0440\u043d\u0430\u043b\u0435 kubelet. \u041e\u043d\u0430 \u043e\u0437\u043d\u0430\u0447\u0430\u0435\u0442, \u0447\u0442\u043e \u0437\u0430\u043f\u0440\u043e\u0448\u0435\u043d\u043d\u044b\u0439 <code>shutdownGracePeriod<\/code> \u0431\u043e\u043b\u044c\u0448\u0435 \u0442\u0435\u043a\u0443\u0449\u0435\u0433\u043e <code>InhibitDelayMaxSec<\/code>.<\/p>\n<h4>\u041f\u0440\u043e\u0432\u0435\u0440\u043a\u0430 \u0431\u043e\u0435\u043c: \u043a\u0430\u043d\u0430\u0440\u0435\u0439\u043a\u0430 \u0438 \u0440\u0443\u0447\u043d\u043e\u0439 shelve<\/h4>\n<p>\u0427\u0442\u043e\u0431\u044b \u0443\u0431\u0435\u0434\u0438\u0442\u044c\u0441\u044f, \u0447\u0442\u043e \u0432\u0441\u0451 \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 end-to-end, \u0434\u043e\u0441\u0442\u0430\u0442\u043e\u0447\u043d\u043e \u043a\u0430\u043d\u0430\u0440\u0435\u0439\u043a\u0438, \u043b\u043e\u0433\u0438\u0440\u0443\u044e\u0449\u0435\u0439 \u043d\u0430 \u0434\u0438\u0441\u043a \u043d\u043e\u0434\u044b, \u0438 \u0440\u0443\u0447\u043d\u043e\u0433\u043e <code>shelve<\/code>. \u041a\u043b\u044e\u0447\u0435\u0432\u043e\u0439 \u043c\u043e\u043c\u0435\u043d\u0442 \u2014 \u043f\u0438\u0441\u0430\u0442\u044c \u043b\u043e\u0433 \u043d\u0430 <code>hostPath<\/code>: \u0444\u0430\u0439\u043b\u044b \u0432 <code>\/var\/log\/pods\/<\/code> kubelet \u0443\u0434\u0430\u043b\u044f\u0435\u0442 \u0432\u043c\u0435\u0441\u0442\u0435 \u0441 \u043f\u043e\u0434\u043e\u043c, \u043a\u043e\u0433\u0434\u0430 \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u043b\u0435\u0440 \u043f\u043e\u0434\u043d\u0438\u043c\u0430\u0435\u0442 \u0437\u0430\u043c\u0435\u043d\u0443, \u0438 \u0440\u0430\u0437\u0431\u0438\u0440\u0430\u0442\u044c\u0441\u044f \u0431\u0443\u0434\u0435\u0442 \u0443\u0436\u0435 \u043d\u0435 \u0441 \u0447\u0435\u043c.<\/p>\n<pre><code class=\"yaml\">apiVersion: v1kind: Podmetadata:  name: canaryspec:  restartPolicy: Never  terminationGracePeriodSeconds: 600  nodeName: &lt;preemptible-node&gt;  tolerations:    - key: preemptible      operator: Equal      value: \"true\"      effect: NoSchedule  volumes:    - name: hostlog      hostPath:        path: \/var\/log\/preempt-canary        type: DirectoryOrCreate  containers:    - name: canary      image: busybox:1.36      command: [\"sh\", \"-c\"]      args:        - |          LOG=\/hostlog\/canary.log          log() { echo \"$(date -u +%H:%M:%S) $1\" | tee -a $LOG; }          term() {            log \"*** SIGTERM RECEIVED ***\"            i=0            while [ $i -lt 590 ]; do              log \"term+${i}s\"; i=$((i+1)); sleep 1 &amp; wait $!            done            exit 0          }          trap term TERM          log \"=== started ===\"          while true; do log alive; sleep 1 &amp; wait $!; done      volumeMounts:        - name: hostlog          mountPath: \/hostlog<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p>\u0412\u0430\u0436\u043d\u0430\u044f \u0434\u0435\u0442\u0430\u043b\u044c \u0441\u043a\u0440\u0438\u043f\u0442\u0430 \u2014 <code>sleep 1 &amp; wait $!<\/code> \u0432\u043c\u0435\u0441\u0442\u043e \u043f\u0440\u043e\u0441\u0442\u043e\u0433\u043e <code>sleep 1<\/code>: shell \u0434\u043e\u0441\u0442\u0430\u0432\u043b\u044f\u0435\u0442 \u0441\u0438\u0433\u043d\u0430\u043b\u044b \u0442\u043e\u043b\u044c\u043a\u043e \u043c\u0435\u0436\u0434\u0443 \u043a\u043e\u043c\u0430\u043d\u0434\u0430\u043c\u0438, \u0438 \u043e\u0431\u044b\u0447\u043d\u044b\u0439 <code>sleep<\/code> \u0437\u0430\u0434\u0435\u0440\u0436\u0430\u043b \u0431\u044b \u0440\u0435\u0430\u043a\u0446\u0438\u044e \u043d\u0430 SIGTERM.<\/p>\n<h3>\u0422\u0440\u0435\u0431\u043e\u0432\u0430\u043d\u0438\u044f \u043a \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0435<\/h3>\n<p><code><strong>terminationGracePeriodSeconds<\/strong><\/code><strong> \u0432 \u043c\u0430\u043d\u0438\u0444\u0435\u0441\u0442\u0435 \u043f\u043e\u0434\u0430.<\/strong> Kubelet \u0431\u0435\u0440\u0451\u0442 \u043c\u0438\u043d\u0438\u043c\u0443\u043c \u0438\u0437 \u043e\u043a\u043d\u0430 \u0444\u0430\u0437\u044b \u0438 \u044d\u0442\u043e\u0433\u043e \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u044f, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 \u043f\u043e\u0434 \u0441 \u0434\u0435\u0444\u043e\u043b\u0442\u043d\u044b\u043c\u0438 30 \u0441\u0435\u043a\u0443\u043d\u0434\u0430\u043c\u0438 \u043f\u043e\u043b\u0443\u0447\u0438\u0442 \u0438\u0445 \u0436\u0435, \u0430 \u043d\u0435 120: \u043d\u0430\u0441\u0442\u0440\u043e\u0439\u043a\u0430 \u043d\u043e\u0434\u044b \u0441\u0430\u043c\u0430 \u043f\u043e \u0441\u0435\u0431\u0435 \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u044e \u0432\u0440\u0435\u043c\u0435\u043d\u0438 \u043d\u0435 \u0434\u043e\u0431\u0430\u0432\u043b\u044f\u0435\u0442. \u0422\u0435\u043c, \u043a\u043e\u043c\u0443 \u043d\u0443\u0436\u043d\u043e \u0434\u0432\u0435 \u043c\u0438\u043d\u0443\u0442\u044b, \u043d\u0430\u0434\u043e \u0443\u043a\u0430\u0437\u0430\u0442\u044c \u044d\u0442\u043e \u044f\u0432\u043d\u043e:<\/p>\n<pre><code class=\"yaml\">spec:  terminationGracePeriodSeconds: 120<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p><strong>\u0422\u043e\u043b\u044c\u043a\u043e \u0442\u0435, \u043a\u043e\u043c\u0443 \u0440\u0435\u0430\u043b\u044c\u043d\u043e \u043d\u0443\u0436\u043d\u043e.<\/strong> \u0424\u0430\u0437\u0430 \u0436\u0434\u0451\u0442 \u0441\u0430\u043c\u044b\u0439 \u043c\u0435\u0434\u043b\u0435\u043d\u043d\u044b\u0439 \u043f\u043e\u0434 \u0432 \u0433\u0440\u0443\u043f\u043f\u0435: \u043e\u0434\u0438\u043d \u0432\u043e\u0440\u043a\u0435\u0440 \u0441 \u0434\u043b\u0438\u043d\u043d\u044b\u043c grace, \u043d\u0435 \u0440\u0435\u0430\u0433\u0438\u0440\u0443\u044e\u0449\u0438\u0439 \u043d\u0430 SIGTERM, \u0437\u0430\u0434\u0435\u0440\u0436\u0438\u0442 \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435 \u0432\u0441\u0435\u0439 \u043d\u043e\u0434\u044b \u043d\u0430 \u0432\u0441\u0451 \u043e\u043a\u043d\u043e, \u0434\u0430\u0436\u0435 \u0435\u0441\u043b\u0438 \u043e\u0441\u0442\u0430\u043b\u044c\u043d\u044b\u0435 \u0443\u0448\u043b\u0438 \u043c\u0433\u043d\u043e\u0432\u0435\u043d\u043d\u043e.<\/p>\n<p><strong>\u0417\u0430\u043f\u0430\u0441 \u0440\u0435\u043f\u043b\u0438\u043a \u0438 \u0440\u0430\u0441\u043a\u043b\u0430\u0434\u043a\u0430.<\/strong> PDB \u043f\u0440\u0438 node shutdown \u043d\u0435 \u0441\u043e\u0431\u043b\u044e\u0434\u0430\u0435\u0442\u0441\u044f, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 \u0437\u0430\u0449\u0438\u0442\u0430 \u043e\u0442 \u043e\u0434\u043d\u043e\u0432\u0440\u0435\u043c\u0435\u043d\u043d\u043e\u0439 \u043f\u043e\u0442\u0435\u0440\u0438 \u0440\u0435\u043f\u043b\u0438\u043a \u2014 \u0442\u043e\u043b\u044c\u043a\u043e <code>topologySpreadConstraints<\/code> \u043f\u043e \u043b\u0435\u0439\u0431\u043b\u0443 \u0442\u0438\u043f\u0430 \u043d\u043e\u0434 \u0438 <code>replicas &gt;= 2<\/code>.<\/p>\n<p><strong>\u041d\u0438\u043a\u0430\u043a\u043e\u0433\u043e stateful.<\/strong> \u0414\u0430\u043d\u043d\u044b\u0435 \u043d\u0430 \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0445 \u043d\u043e\u0434\u0430\u0445 \u0436\u0438\u0442\u044c \u043d\u0435 \u0434\u043e\u043b\u0436\u043d\u044b, \u043d\u0435\u0441\u043c\u043e\u0442\u0440\u044f \u043d\u0430 \u0441\u0435\u0442\u0435\u0432\u043e\u0439 \u0434\u0438\u0441\u043a: 24-\u0447\u0430\u0441\u043e\u0432\u043e\u0439 \u0446\u0438\u043a\u043b \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u044f \u0433\u0430\u0440\u0430\u043d\u0442\u0438\u0440\u0443\u0435\u0442 \u0440\u0435\u0433\u0443\u043b\u044f\u0440\u043d\u0443\u044e \u043d\u0435\u0434\u043e\u0441\u0442\u0443\u043f\u043d\u043e\u0441\u0442\u044c. \u0417\u0430\u043c\u0435\u0440 \u0432\u044b\u0448\u0435 \u043f\u043e\u043a\u0430\u0437\u044b\u0432\u0430\u0435\u0442 \u043f\u043e\u0447\u0435\u043c\u0443: \u043f\u043e\u0434 \u0441 RWO-\u0442\u043e\u043c\u043e\u043c \u043f\u0440\u043e\u0441\u0442\u0430\u0438\u0432\u0430\u0435\u0442 \u043c\u0438\u043d\u0443\u0442\u044b, \u0430 \u043d\u0435 \u0441\u0435\u043a\u0443\u043d\u0434\u044b, \u0438 \u0434\u043e\u0431\u0430\u0432\u043b\u0435\u043d\u0438\u0435 \u0441\u0432\u043e\u0431\u043e\u0434\u043d\u044b\u0445 \u043d\u043e\u0434 \u044d\u0442\u043e\u0433\u043e \u043d\u0435 \u043b\u0435\u0447\u0438\u0442 \u2014 \u0442\u043e\u043c \u043e\u0441\u0442\u0430\u0451\u0442\u0441\u044f \u043f\u0440\u0438\u0432\u044f\u0437\u0430\u043d\u043d\u044b\u043c \u043a \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u043d\u043e\u0439 \u043d\u043e\u0434\u0435 \u0434\u043e detach. \u0415\u0441\u043b\u0438 stateful \u0442\u0430\u043c \u0432\u0441\u0451 \u0436\u0435 \u043d\u0443\u0436\u0435\u043d, \u0441\u0442\u043e\u0438\u0442 \u0437\u0430\u043a\u043b\u0430\u0434\u044b\u0432\u0430\u0442\u044c\u0441\u044f \u043d\u0430 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u043c\u0438\u043d\u0443\u0442 \u043d\u0435\u0434\u043e\u0441\u0442\u0443\u043f\u043d\u043e\u0441\u0442\u0438 \u043f\u0440\u0438 \u043a\u0430\u0436\u0434\u043e\u043c \u0441\u0443\u0442\u043e\u0447\u043d\u043e\u043c \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0438 \u0438 \u043d\u0435 \u0441\u0442\u0430\u0432\u0438\u0442\u044c <code>requiredDuringScheduling<\/code> antiAffinity, \u043a\u043e\u0442\u043e\u0440\u0430\u044f \u0434\u043e\u043f\u043e\u043b\u043d\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u0441\u0443\u0436\u0430\u0435\u0442 \u0432\u044b\u0431\u043e\u0440.<\/p>\n<p><strong>\u0413\u043e\u0442\u043e\u0432\u043d\u043e\u0441\u0442\u044c \u043a \u043e\u0442\u0441\u0443\u0442\u0441\u0442\u0432\u0438\u044e \u043d\u043e\u0434\u044b.<\/strong> \u041f\u043e\u043a\u0430 \u043d\u043e\u0434\u0430 \u0432\u044b\u043a\u043b\u044e\u0447\u0430\u0435\u0442\u0441\u044f \u0438 \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0430\u0435\u0442\u0441\u044f, \u0435\u0451 \u043d\u0435\u0442 \u0432 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0435 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u043c\u0438\u043d\u0443\u0442. Autoscaler \u0432 \u044d\u0442\u043e \u0432\u0440\u0435\u043c\u044f \u043c\u043e\u0436\u0435\u0442 \u043f\u043e\u0434\u043d\u044f\u0442\u044c \u0432\u0440\u0435\u043c\u0435\u043d\u043d\u0443\u044e \u0437\u0430\u043c\u0435\u043d\u0443, \u0438 \u0433\u0440\u0443\u043f\u043f\u0430 \u043a\u0440\u0430\u0442\u043a\u043e\u0432\u0440\u0435\u043c\u0435\u043d\u043d\u043e \u0432\u044b\u0440\u0430\u0441\u0442\u0435\u0442 \u0441\u0432\u0435\u0440\u0445 <code>nodes_count<\/code>.<\/p>\n<h3>\u0421\u0440\u0430\u0432\u043d\u0435\u043d\u0438\u0435 \u0441 \u0433\u0438\u043f\u0435\u0440\u0441\u043a\u0435\u0439\u043b\u0435\u0440\u0430\u043c\u0438: notice \u043f\u0440\u043e\u0442\u0438\u0432 \u0434\u0435\u0434\u043b\u0430\u0439\u043d\u0430<\/h3>\n<div>\n<div class=\"table\">\n<table>\n<tbody>\n<tr>\n<th>\n<p align=\"left\">\u043e\u0431\u043b\u0430\u043a\u043e<\/p>\n<\/th>\n<th>\n<p align=\"left\">\u043f\u0440\u0435\u0434\u0443\u043f\u0440\u0435\u0436\u0434\u0435\u043d\u0438\u0435 \u0437\u0430\u0440\u0430\u043d\u0435\u0435<\/p>\n<\/th>\n<th>\n<p align=\"left\">\u043e\u043a\u043d\u043e \u043d\u0430 \u0437\u0430\u0432\u0435\u0440\u0448\u0435\u043d\u0438\u0435<\/p>\n<\/th>\n<th>\n<p align=\"left\">\u0436\u0451\u0441\u0442\u043a\u0438\u0439 \u0434\u0435\u0434\u043b\u0430\u0439\u043d<\/p>\n<\/th>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">AWS Spot<\/p>\n<\/td>\n<td>\n<p align=\"left\">2 \u043c\u0438\u043d\u0443\u0442\u044b (IMDS <code>spot\/instance-action<\/code>)<\/p>\n<\/td>\n<td>\n<p align=\"left\">2 \u043c\u0438\u043d\u0443\u0442\u044b<\/p>\n<\/td>\n<td>\n<p align=\"left\">\u0434\u0430<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">GCP Spot VM<\/p>\n<\/td>\n<td>\n<p align=\"left\">\u043d\u0435\u0442, \u0441\u0440\u0430\u0437\u0443 ACPI G2 Soft Off<\/p>\n<\/td>\n<td>\n<p align=\"left\">~30 \u0441\u0435\u043a\u0443\u043d\u0434, best effort<\/p>\n<\/td>\n<td>\n<p align=\"left\">\u0434\u0430<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">Azure Spot<\/p>\n<\/td>\n<td>\n<p align=\"left\">30 \u0441\u0435\u043a\u0443\u043d\u0434 (Scheduled Events)<\/p>\n<\/td>\n<td>\n<p align=\"left\">30 \u0441\u0435\u043a\u0443\u043d\u0434, best effort<\/p>\n<\/td>\n<td>\n<p align=\"left\">\u0434\u0430<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\"><strong>Selectel MKS<\/strong><\/p>\n<\/td>\n<td>\n<p align=\"left\"><strong>\u043d\u0435\u0442<\/strong><\/p>\n<\/td>\n<td>\n<p align=\"left\"><strong>\u043d\u0435 \u043e\u0433\u0440\u0430\u043d\u0438\u0447\u0435\u043d\u043e<\/strong> (280 \u0441 \u043f\u0440\u043e\u0432\u0435\u0440\u0435\u043d\u043e)<\/p>\n<\/td>\n<td>\n<p align=\"left\"><strong>\u043d\u0435 \u043e\u0431\u043d\u0430\u0440\u0443\u0436\u0435\u043d<\/strong><\/p>\n<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<\/div>\n<\/div>\n<p>\u0423 Selectel \u043d\u0435\u0442 \u0441\u0430\u043c\u043e\u0433\u043e \u0443\u0434\u043e\u0431\u043d\u043e\u0433\u043e \u2014 \u0437\u0430\u0431\u043b\u0430\u0433\u043e\u0432\u0440\u0435\u043c\u0435\u043d\u043d\u043e\u0433\u043e \u0443\u0432\u0435\u0434\u043e\u043c\u043b\u0435\u043d\u0438\u044f, \u043f\u043e \u043a\u043e\u0442\u043e\u0440\u043e\u043c\u0443 \u043c\u043e\u0436\u043d\u043e \u0431\u044b\u043b\u043e \u0431\u044b \u0443\u0432\u0435\u0441\u0442\u0438 \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0443 \u0441 \u043d\u043e\u0434\u044b <strong>\u0434\u043e<\/strong> \u043d\u0430\u0447\u0430\u043b\u0430 \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u044f. \u0417\u0430\u0442\u043e \u043d\u0435\u0442 \u0438 \u0434\u0435\u0434\u043b\u0430\u0439\u043d\u0430: \u0433\u0438\u043f\u0435\u0440\u0432\u0438\u0437\u043e\u0440 \u0436\u0434\u0451\u0442, \u043f\u043e\u043a\u0430 \u0433\u043e\u0441\u0442\u044c \u0437\u0430\u043a\u043e\u043d\u0447\u0438\u0442.<\/p>\n<p>\u0414\u043b\u044f stateless-\u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0438 \u0441 \u043a\u043e\u0440\u0440\u0435\u043a\u0442\u043d\u043e\u0439 \u043e\u0431\u0440\u0430\u0431\u043e\u0442\u043a\u043e\u0439 SIGTERM \u044d\u0442\u043e \u0432\u044b\u0433\u043e\u0434\u043d\u044b\u0439 \u0440\u0430\u0437\u043c\u0435\u043d: \u043f\u044f\u0442\u0438\u043c\u0438\u043d\u0443\u0442\u043d\u044b\u0439 \u0432\u043e\u0440\u043a\u0435\u0440, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u043d\u0430 AWS \u0431\u044b\u043b \u0431\u044b \u0443\u0431\u0438\u0442 \u043d\u0430 \u0432\u0442\u043e\u0440\u043e\u0439 \u043c\u0438\u043d\u0443\u0442\u0435, \u0437\u0434\u0435\u0441\u044c \u0443\u0441\u043f\u0435\u0435\u0442 \u0434\u043e\u0440\u0430\u0431\u043e\u0442\u0430\u0442\u044c. \u0414\u043b\u044f \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0438, \u043a\u043e\u0442\u043e\u0440\u043e\u0439 \u043d\u0443\u0436\u043d\u043e \u043f\u0435\u0440\u0435\u0434\u0430\u0442\u044c \u0440\u043e\u043b\u044c \u043f\u0435\u0440\u0435\u0434 \u0443\u0445\u043e\u0434\u043e\u043c, \u043e\u0442\u0441\u0443\u0442\u0441\u0442\u0432\u0438\u0435 notice \u043f\u0440\u0438\u043d\u0446\u0438\u043f\u0438\u0430\u043b\u044c\u043d\u043e \u2014 \u0442\u0430\u043a\u043e\u0439 \u0441\u0446\u0435\u043d\u0430\u0440\u0438\u0439 \u043d\u0430 \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0445 \u043d\u043e\u0434\u0430\u0445 Selectel \u043d\u0435 \u0440\u0435\u0430\u043b\u0438\u0437\u0443\u0435\u0442\u0441\u044f.<\/p>\n<h3>\u0418\u0442\u043e\u0433\u043e\u0432\u044b\u0435 \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u044f<\/h3>\n<pre><code>InhibitDelayMaxSec               180sshutdownGracePeriod              150sshutdownGracePeriodCriticalPods   30s\u2192 \u043e\u0431\u044b\u0447\u043d\u044b\u0435 \u043f\u043e\u0434\u044b                   120s\u2192 system-node-critical            30s<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p>\u0412\u044b\u0431\u0440\u0430\u043d\u044b \u043f\u043e \u043e\u0431\u0440\u0430\u0437\u0446\u0443 AWS Spot. \u0417\u0430\u043c\u0435\u0440\u044b \u043f\u043e\u043a\u0430\u0437\u044b\u0432\u0430\u044e\u0442, \u0447\u0442\u043e \u043e\u043a\u043d\u043e \u043c\u043e\u0436\u043d\u043e \u043f\u043e\u0434\u043d\u0438\u043c\u0430\u0442\u044c \u043f\u0440\u0430\u043a\u0442\u0438\u0447\u0435\u0441\u043a\u0438 \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u043b\u044c\u043d\u043e (\u043f\u0440\u043e\u0432\u0435\u0440\u0435\u043d\u043e \u0434\u043e 280 \u0441\u0435\u043a\u0443\u043d\u0434 \u043e\u0431\u044b\u0447\u043d\u044b\u043c \u043f\u043e\u0434\u0430\u043c) \u2014 \u043e\u0433\u0440\u0430\u043d\u0438\u0447\u0435\u043d\u0438\u0435 \u0442\u043e\u043b\u044c\u043a\u043e \u0432 \u0442\u043e\u043c, \u0447\u0442\u043e \u043d\u043e\u0434\u0430 \u0434\u043e\u043b\u044c\u0448\u0435 \u043e\u0442\u0441\u0443\u0442\u0441\u0442\u0432\u0443\u0435\u0442 \u0432 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0435.<\/p>\n<h3>\u0412\u044b\u0432\u043e\u0434\u044b<\/h3>\n<p>\u041c\u0435\u0445\u0430\u043d\u0438\u043a\u0430 \u043d\u0430 \u0441\u0442\u043e\u0440\u043e\u043d\u0435 Selectel \u043e\u043a\u0430\u0437\u0430\u043b\u0430\u0441\u044c \u0430\u043a\u043a\u0443\u0440\u0430\u0442\u043d\u0435\u0435, \u0447\u0435\u043c \u043c\u043e\u0436\u043d\u043e \u0431\u044b\u043b\u043e \u043e\u0436\u0438\u0434\u0430\u0442\u044c \u043e\u0442 \u0444\u0438\u0447\u0438, \u043f\u0440\u043e\u0434\u0430\u0432\u0430\u0435\u043c\u043e\u0439 \u0441\u043e \u0441\u043b\u043e\u0432\u0430\u043c\u0438 \u00abwithout notice\u00bb: \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0435 \u2014 \u044d\u0442\u043e \u0448\u0442\u0430\u0442\u043d\u043e\u0435 \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435 \u0433\u043e\u0441\u0442\u044f, \u0433\u0438\u043f\u0435\u0440\u0432\u0438\u0437\u043e\u0440 \u0442\u0435\u0440\u043f\u0435\u043b\u0438\u0432\u043e \u0436\u0434\u0451\u0442, \u0434\u0435\u0434\u043b\u0430\u0439\u043d\u0430 \u043c\u044b \u043d\u0435 \u043d\u0430\u0448\u043b\u0438 \u0434\u0430\u0436\u0435 \u043d\u0430 280 \u0441\u0435\u043a\u0443\u043d\u0434\u0430\u0445. \u0412\u0441\u0451, \u0447\u0442\u043e \u043d\u0443\u0436\u043d\u043e \u0434\u043b\u044f \u043c\u044f\u0433\u043a\u043e\u0433\u043e \u0437\u0430\u0432\u0435\u0440\u0448\u0435\u043d\u0438\u044f \u043f\u043e\u0434\u043e\u0432, \u0432 kubelet \u0443\u0436\u0435 \u0435\u0441\u0442\u044c \u2014 \u043d\u043e \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u043e, \u0438 \u0432\u043a\u043b\u044e\u0447\u0438\u0442\u044c \u044d\u0442\u043e \u043c\u043e\u0436\u043d\u043e \u0442\u043e\u043b\u044c\u043a\u043e \u0441\u0430\u043c\u043e\u043c\u0443, \u0447\u0435\u0440\u0435\u0437 <code>user_data<\/code>. \u041e\u0442\u0441\u044e\u0434\u0430 \u043f\u0435\u0440\u0432\u044b\u0439 \u0438 \u0441\u0430\u043c\u044b\u0439 \u0441\u043a\u0443\u0447\u043d\u044b\u0439 \u043f\u0440\u0430\u043a\u0442\u0438\u0447\u0435\u0441\u043a\u0438\u0439 \u0432\u044b\u0432\u043e\u0434: \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u044f \u043d\u0443\u0436\u043d\u043e \u043f\u043e\u0434\u043e\u0431\u0440\u0430\u0442\u044c <strong>\u0434\u043e<\/strong> \u0441\u043e\u0437\u0434\u0430\u043d\u0438\u044f \u0433\u0440\u0443\u043f\u043f\u044b \u043d\u043e\u0434, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e <code>user_data<\/code> \u2014 ForceNew, \u0438 \u043f\u0435\u0440\u0435\u0434\u0443\u043c\u0430\u0442\u044c \u0431\u0435\u0437 \u043f\u0435\u0440\u0435\u0441\u043e\u0437\u0434\u0430\u043d\u0438\u044f \u0433\u0440\u0443\u043f\u043f\u044b \u043d\u0435 \u043f\u043e\u043b\u0443\u0447\u0438\u0442\u0441\u044f.<\/p>\n<p>\u0412\u0442\u043e\u0440\u043e\u0439: \u043e\u0433\u0440\u0430\u043d\u0438\u0447\u0435\u043d\u0438\u0435 \u0437\u0434\u0435\u0441\u044c \u043d\u0435 \u043a\u043e\u043b\u0438\u0447\u0435\u0441\u0442\u0432\u043e \u0432\u0440\u0435\u043c\u0435\u043d\u0438, \u0430 \u0435\u0433\u043e \u0440\u0430\u0441\u043f\u043e\u043b\u043e\u0436\u0435\u043d\u0438\u0435. \u0414\u0432\u0443\u0445 \u043c\u0438\u043d\u0443\u0442 (\u0438, \u0441\u0443\u0434\u044f \u043f\u043e \u0437\u0430\u043c\u0435\u0440\u0430\u043c, \u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0443\u0433\u043e\u0434\u043d\u043e \u0431\u043e\u043b\u044c\u0448\u0435) \u0445\u0432\u0430\u0442\u0430\u0435\u0442 \u043f\u0440\u0430\u043a\u0442\u0438\u0447\u0435\u0441\u043a\u0438 \u043d\u0430 \u043b\u044e\u0431\u043e\u0435 \u043a\u043e\u0440\u0440\u0435\u043a\u0442\u043d\u043e\u0435 \u0437\u0430\u0432\u0435\u0440\u0448\u0435\u043d\u0438\u0435, \u043d\u043e \u043f\u043e\u043b\u0443\u0447\u0438\u0442\u044c \u0438\u0445 \u043c\u043e\u0436\u043d\u043e \u0442\u043e\u043b\u044c\u043a\u043e \u043f\u043e\u0441\u043b\u0435 \u0442\u043e\u0433\u043e, \u043a\u0430\u043a \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435 \u0443\u0436\u0435 \u043d\u0430\u0447\u0430\u043b\u043e\u0441\u044c. \u0417\u0430\u0440\u0430\u043d\u0435\u0435 \u0443\u0432\u0435\u0441\u0442\u0438 \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0443 \u043d\u0435 \u043d\u0430 \u0447\u0442\u043e \u2014 \u0438\u0441\u0442\u043e\u0447\u043d\u0438\u043a\u0430 \u0441\u043e\u0431\u044b\u0442\u0438\u044f \u043d\u0435 \u0441\u0443\u0449\u0435\u0441\u0442\u0432\u0443\u0435\u0442. \u0412\u0441\u0451, \u0447\u0442\u043e \u0442\u0440\u0435\u0431\u0443\u0435\u0442 \u00ab\u043f\u0435\u0440\u0435\u0434\u0430\u0442\u044c \u0440\u043e\u043b\u044c \u0438 \u0443\u0439\u0442\u0438\u00bb, \u043d\u0430 \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0445 \u043d\u043e\u0434\u0430\u0445 \u043d\u0435 \u0436\u0438\u0432\u0451\u0442; \u0432\u0441\u0451, \u0447\u0442\u043e \u0443\u043c\u0435\u0435\u0442 \u0434\u043e\u043f\u0438\u0441\u0430\u0442\u044c \u0442\u0435\u043a\u0443\u0449\u0443\u044e \u0440\u0430\u0431\u043e\u0442\u0443 \u043f\u043e SIGTERM \u0438 \u0443\u043c\u0435\u0440\u0435\u0442\u044c, \u0436\u0438\u0432\u0451\u0442 \u0445\u043e\u0440\u043e\u0448\u043e.<\/p>\n<p>\u0422\u0440\u0435\u0442\u0438\u0439: \u0441\u0430\u043c \u043f\u0435\u0440\u0435\u0435\u0437\u0434 stateless-\u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0438 \u043e\u043a\u0430\u0437\u0430\u043b\u0441\u044f \u0431\u044b\u0441\u0442\u0440\u0435\u0435, \u0447\u0435\u043c \u043e\u0436\u0438\u0434\u0430\u043b\u043e\u0441\u044c \u043e\u0442 \u043c\u0435\u0445\u0430\u043d\u0438\u043a\u0438 taint\u2019\u043e\u0432, \u2014 \u0440\u0435\u043f\u043b\u0438\u043a\u0438 \u0440\u0430\u0431\u043e\u0442\u0430\u043b\u0438 \u043d\u0430 \u0441\u043e\u0441\u0435\u0434\u043d\u0435\u0439 \u043d\u043e\u0434\u0435 \u0447\u0435\u0440\u0435\u0437 \u0441\u0435\u043c\u044c \u0441\u0435\u043a\u0443\u043d\u0434, \u0437\u0430 \u043f\u043e\u043b\u043c\u0438\u043d\u0443\u0442\u044b \u0434\u043e \u043f\u043e\u044f\u0432\u043b\u0435\u043d\u0438\u044f <code>NoExecute<\/code>. \u041e\u0442\u0432\u0435\u0447\u0430\u0435\u0442 \u0437\u0430 \u044d\u0442\u043e \u043d\u0435 \u0442\u0430\u0439\u043c\u0430\u0443\u0442 \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u044f, \u0430 \u043e\u0431\u044b\u0447\u043d\u0430\u044f \u0441\u0432\u044f\u0437\u043a\u0430 \u00abkubelet \u0437\u0430\u0432\u0435\u0440\u0448\u0438\u043b \u043f\u043e\u0434 \u2192 \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u043b\u0435\u0440 \u0441\u043e\u0437\u0434\u0430\u043b \u0437\u0430\u043c\u0435\u043d\u0443\u00bb. \u041f\u043e\u044d\u0442\u043e\u043c\u0443 \u043e\u0442 \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u044f \u043d\u0443\u0436\u043d\u044b \u0432\u0441\u0435\u0433\u043e \u0434\u0432\u0435 \u0432\u0435\u0449\u0438: \u0440\u0435\u0430\u043b\u044c\u043d\u0430\u044f \u043e\u0431\u0440\u0430\u0431\u043e\u0442\u043a\u0430 SIGTERM \u0438 \u044f\u0432\u043d\u044b\u0439 <code>terminationGracePeriodSeconds<\/code> \u2014 \u0441 \u0434\u0435\u0444\u043e\u043b\u0442\u043d\u044b\u043c\u0438 30 \u0441\u0435\u043a\u0443\u043d\u0434\u0430\u043c\u0438 \u043f\u043e\u0434 \u043f\u043e\u043b\u0443\u0447\u0438\u0442 30 \u0441\u0435\u043a\u0443\u043d\u0434, \u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0431\u044b \u043d\u0438 \u0431\u044b\u043b\u043e \u0432\u044b\u0441\u0442\u0430\u0432\u043b\u0435\u043d\u043e \u043d\u0430 \u043d\u043e\u0434\u0435.<\/p>\n<p>\u0427\u0435\u0442\u0432\u0451\u0440\u0442\u044b\u0439: stateful \u0442\u0443\u0434\u0430 \u0441\u0442\u0430\u0432\u0438\u0442\u044c \u043d\u0435 \u043d\u0443\u0436\u043d\u043e, \u0438 \u0441\u0435\u0442\u0435\u0432\u043e\u0439 \u0437\u0430\u0433\u0440\u0443\u0437\u043e\u0447\u043d\u044b\u0439 \u0434\u0438\u0441\u043a \u044d\u0442\u043e\u0433\u043e \u043d\u0435 \u043c\u0435\u043d\u044f\u0435\u0442. RWO-\u0442\u043e\u043c \u043e\u0441\u0442\u0430\u0451\u0442\u0441\u044f \u043f\u0440\u0438\u0432\u044f\u0437\u0430\u043d\u043d\u044b\u043c \u043a \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u043d\u043e\u0439 \u043d\u043e\u0434\u0435, \u043f\u043e\u043a\u0430 \u0435\u0451 kubelet \u043d\u0435 \u043f\u043e\u0434\u0442\u0432\u0435\u0440\u0434\u0438\u0442 \u043e\u0441\u0432\u043e\u0431\u043e\u0436\u0434\u0435\u043d\u0438\u0435, \u2014 \u0430 \u043e\u043d \u0443\u0436\u0435 \u043c\u0451\u0440\u0442\u0432, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 \u043f\u043e\u0434 \u0436\u0434\u0451\u0442 \u043c\u0438\u043d\u0443\u0442\u044b, \u0430 \u043d\u0435 \u0441\u0435\u043a\u0443\u043d\u0434\u044b, \u0438 \u0441\u0432\u043e\u0431\u043e\u0434\u043d\u044b\u0435 \u043d\u043e\u0434\u044b \u0432 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0435 \u043d\u0435 \u043f\u043e\u043c\u043e\u0433\u0430\u044e\u0442. \u041f\u043b\u044e\u0441 PDB \u043f\u0440\u0438 node shutdown \u043d\u0435 \u0441\u043e\u0431\u043b\u044e\u0434\u0430\u0435\u0442\u0441\u044f \u043d\u0438 \u043d\u0430 \u043e\u0434\u043d\u043e\u043c \u0438\u0437 \u0434\u0432\u0443\u0445 \u043f\u0443\u0442\u0435\u0439 \u0437\u0430\u0432\u0435\u0440\u0448\u0435\u043d\u0438\u044f, \u0442\u0430\u043a \u0447\u0442\u043e \u0435\u0434\u0438\u043d\u0441\u0442\u0432\u0435\u043d\u043d\u0430\u044f \u0437\u0430\u0449\u0438\u0442\u0430 \u0440\u0435\u043f\u043b\u0438\u043a \u2014 <code>topologySpreadConstraints<\/code> \u043f\u043e \u0442\u0438\u043f\u0443 \u043d\u043e\u0434 \u0438 \u0437\u0430\u043f\u0430\u0441 \u0440\u0435\u043f\u043b\u0438\u043a.<\/p>\n<p>\u0418 \u043f\u044f\u0442\u044b\u0439: \u0443 \u0434\u043b\u0438\u043d\u043d\u043e\u0433\u043e \u043e\u043a\u043d\u0430 \u0435\u0441\u0442\u044c \u0446\u0435\u043d\u0430, \u043f\u0440\u0438\u0447\u0451\u043c \u043d\u0435 \u0442\u043e\u043b\u044c\u043a\u043e \u0432 \u043e\u0436\u0438\u0434\u0430\u043d\u0438\u0438. \u0427\u0435\u043c \u0434\u043e\u043b\u044c\u0448\u0435 \u0437\u0430\u0432\u0435\u0440\u0448\u0435\u043d\u0438\u0435, \u0442\u0435\u043c \u0434\u043e\u043b\u044c\u0448\u0435 \u043d\u043e\u0434\u0430 \u043e\u0442\u0441\u0443\u0442\u0441\u0442\u0432\u0443\u0435\u0442 \u0432 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0435 \u0438 \u0442\u0435\u043c \u0432\u044b\u0448\u0435 \u0448\u0430\u043d\u0441, \u0447\u0442\u043e autoscaler \u0443\u0441\u043f\u0435\u0435\u0442 \u043f\u043e\u0434\u043d\u044f\u0442\u044c \u0432\u0440\u0435\u043c\u0435\u043d\u043d\u0443\u044e \u0437\u0430\u043c\u0435\u043d\u0443, \u0437\u0430 \u043a\u043e\u0442\u043e\u0440\u0443\u044e \u043f\u0440\u0438\u0434\u0451\u0442\u0441\u044f \u0437\u0430\u043f\u043b\u0430\u0442\u0438\u0442\u044c. \u0412 \u043f\u0440\u043e\u0433\u043e\u043d\u0435 \u0441 \u043e\u043a\u043d\u043e\u043c 280 \u0441\u0435\u043a\u0443\u043d\u0434 \u043f\u043e\u043b\u043d\u044b\u0439 \u0446\u0438\u043a\u043b \u00ab\u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0435 \u2192 \u0432\u043e\u0437\u0432\u0440\u0430\u0442\u00bb \u0432\u044b\u0440\u043e\u0441 \u0441 \u0442\u0440\u0438\u0434\u0446\u0430\u0442\u0438 \u0441\u0435\u043a\u0443\u043d\u0434 \u0434\u043e \u0448\u0435\u0441\u0442\u0438 \u043c\u0438\u043d\u0443\u0442. \u041c\u044b \u043e\u0441\u0442\u0430\u043d\u043e\u0432\u0438\u043b\u0438\u0441\u044c \u043d\u0430 120 \u0441\u0435\u043a\u0443\u043d\u0434\u0430\u0445 \u043e\u0431\u044b\u0447\u043d\u044b\u043c \u043f\u043e\u0434\u0430\u043c \u2014 \u044d\u0442\u043e \u0441\u043e\u0432\u043f\u0430\u0434\u0430\u0435\u0442 \u0441 \u043f\u0440\u0438\u0432\u044b\u0447\u043d\u044b\u043c \u043e\u043a\u043d\u043e\u043c AWS Spot, \u0445\u0432\u0430\u0442\u0430\u0435\u0442 \u043f\u043e\u0434\u0430\u0432\u043b\u044f\u044e\u0449\u0435\u043c\u0443 \u0431\u043e\u043b\u044c\u0448\u0438\u043d\u0441\u0442\u0432\u0443 \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0438 \u0438 \u0435\u0449\u0451 \u043d\u0435 \u043d\u0430\u0447\u0438\u043d\u0430\u0435\u0442 \u0437\u0430\u043c\u0435\u0442\u043d\u043e \u043c\u0435\u0448\u0430\u0442\u044c.<\/p>\n<p>\u041f\u0440\u0438 \u044d\u0442\u043e\u043c \u0441\u043e\u0431\u0441\u0442\u0432\u0435\u043d\u043d\u043e \u043f\u0435\u0440\u0435\u0437\u0430\u0433\u0440\u0443\u0437\u043a\u0430 \u0432 \u044d\u0442\u043e\u0439 \u0441\u0443\u043c\u043c\u0435 \u0437\u0430\u043d\u0438\u043c\u0430\u0435\u0442 \u043c\u0430\u043b\u0443\u044e \u0447\u0430\u0441\u0442\u044c \u2014 \u0438 \u044d\u0442\u043e \u0441\u043b\u0435\u0434\u0441\u0442\u0432\u0438\u0435 \u0435\u0449\u0451 \u043e\u0434\u043d\u043e\u0433\u043e \u0440\u0435\u0448\u0435\u043d\u0438\u044f. \u0414\u043e \u0432\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u044f graceful \u0432\u0435\u0441\u044c \u0446\u0438\u043a\u043b \u00ab\u043a\u043e\u043c\u0430\u043d\u0434\u0430 \u2192 <code>ACTIVE<\/code> \u0432 Nova\u00bb \u0443\u043a\u043b\u0430\u0434\u044b\u0432\u0430\u043b\u0441\u044f \u0432 28 \u0441\u0435\u043a\u0443\u043d\u0434, \u0442\u043e \u0435\u0441\u0442\u044c \u0441 \u0441\u0435\u0442\u0435\u0432\u044b\u043c \u0437\u0430\u0433\u0440\u0443\u0437\u043e\u0447\u043d\u044b\u043c \u0434\u0438\u0441\u043a\u043e\u043c \u043d\u043e\u0434\u0430 \u0433\u0430\u0441\u043d\u0435\u0442 \u0438 \u043f\u043e\u0434\u043d\u0438\u043c\u0430\u0435\u0442\u0441\u044f \u0441\u043e \u0441\u0432\u043e\u0438\u043c \u0441\u043e\u0441\u0442\u043e\u044f\u043d\u0438\u0435\u043c \u0438 \u043f\u0440\u043e\u0433\u0440\u0435\u0442\u044b\u043c \u043a\u044d\u0448\u0435\u043c \u043e\u0431\u0440\u0430\u0437\u043e\u0432 \u0437\u0430 \u0434\u0435\u0441\u044f\u0442\u043a\u0438 \u0441\u0435\u043a\u0443\u043d\u0434. \u0421 \u043b\u043e\u043a\u0430\u043b\u044c\u043d\u044b\u043c \u043e\u043d\u0430 \u043f\u0435\u0440\u0435\u0441\u043e\u0437\u0434\u0430\u0432\u0430\u043b\u0430\u0441\u044c \u0431\u044b \u0438\u0437 \u043e\u0431\u0440\u0430\u0437\u0430 \u0434\u043e \u0434\u0435\u0441\u044f\u0442\u0438 \u043c\u0438\u043d\u0443\u0442, \u0442\u0435\u0440\u044f\u044f \u0432\u0441\u0451 \u0441\u043e\u0434\u0435\u0440\u0436\u0438\u043c\u043e\u0435. <code>local_volume = false<\/code> \u2014 \u0441\u0430\u043c\u0430\u044f \u0434\u0435\u0448\u0451\u0432\u0430\u044f \u043f\u043e \u0443\u0441\u0438\u043b\u0438\u044f\u043c \u0441\u0442\u0440\u043e\u0447\u043a\u0430 \u0432\u043e \u0432\u0441\u0435\u0439 \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u0438 \u0438 \u0435\u0434\u0438\u043d\u0441\u0442\u0432\u0435\u043d\u043d\u0430\u044f, \u043a\u043e\u0442\u043e\u0440\u0443\u044e \u0441\u0442\u043e\u0438\u0442 \u043f\u043e\u0441\u0442\u0430\u0432\u0438\u0442\u044c \u0434\u0430\u0436\u0435 \u0431\u0435\u0437 \u0432\u0441\u0435\u0433\u043e \u043e\u0441\u0442\u0430\u043b\u044c\u043d\u043e\u0433\u043e.<\/p>\n<p>\u0418\u0442\u043e\u0433\u043e \u0440\u0430\u0437\u043c\u0435\u043d \u0432\u044b\u0433\u043b\u044f\u0434\u0438\u0442 \u0442\u0430\u043a: \u043c\u0438\u043d\u0443\u0441 ~70% \u0441\u0442\u043e\u0438\u043c\u043e\u0441\u0442\u0438 vCPU \u0438 RAM \u0432 \u043e\u0431\u043c\u0435\u043d \u043d\u0430 \u043e\u0434\u043d\u043e \u0442\u0440\u0435\u0431\u043e\u0432\u0430\u043d\u0438\u0435 \u043a \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u044e \u2014 \u0443\u043c\u0435\u0439 \u043a\u043e\u0440\u0440\u0435\u043a\u0442\u043d\u043e \u0443\u043c\u0438\u0440\u0430\u0442\u044c \u0437\u0430 \u0434\u0432\u0435 \u043c\u0438\u043d\u0443\u0442\u044b, \u0438 \u0443\u043c\u0435\u0439 \u0434\u0435\u043b\u0430\u0442\u044c \u044d\u0442\u043e \u0440\u0430\u0437 \u0432 \u0441\u0443\u0442\u043a\u0438.<\/p>\n<p>\u0415\u0441\u043b\u0438 \u043a\u043e\u0440\u043e\u0442\u043a\u043e, \u043f\u043e \u0441\u0446\u0435\u043d\u0430\u0440\u0438\u044f\u043c:<\/p>\n<ul>\n<li>\n<p><strong>Stateless \u0441 \u043a\u043e\u0440\u0440\u0435\u043a\u0442\u043d\u043e\u0439 \u043e\u0431\u0440\u0430\u0431\u043e\u0442\u043a\u043e\u0439 SIGTERM<\/strong> \u2014 \u0431\u0435\u0440\u0438\u0442\u0435, \u043e\u0433\u043e\u0432\u043e\u0440\u043e\u043a \u043f\u043e\u0447\u0442\u0438 \u043d\u0435\u0442. \u0422\u043e\u043b\u044c\u043a\u043e \u043d\u0435 \u0437\u0430\u0431\u0443\u0434\u044c\u0442\u0435 \u044f\u0432\u043d\u044b\u0439 <code>terminationGracePeriodSeconds<\/code> \u0438 <code>topologySpreadConstraints<\/code> \u043f\u043e \u0442\u0438\u043f\u0443 \u043d\u043e\u0434.<\/p>\n<\/li>\n<li>\n<p><strong>\u0411\u0430\u0442\u0447\u0438 \u0438 \u0432\u043e\u0440\u043a\u0435\u0440\u044b, \u043a\u043e\u0442\u043e\u0440\u044b\u043c \u043d\u0443\u0436\u043d\u043e \u0431\u043e\u043b\u044c\u0448\u0435 \u0434\u0432\u0443\u0445 \u043c\u0438\u043d\u0443\u0442<\/strong> \u2014 \u0431\u0435\u0440\u0438\u0442\u0435. \u0416\u0451\u0441\u0442\u043a\u043e\u0433\u043e \u0434\u0435\u0434\u043b\u0430\u0439\u043d\u0430 \u043d\u0435\u0442, \u043e\u043a\u043d\u043e \u043f\u043e\u0434\u043d\u0438\u043c\u0430\u0435\u0442\u0441\u044f \u043f\u043e\u0447\u0442\u0438 \u0434\u043e \u043f\u044f\u0442\u0438 \u043c\u0438\u043d\u0443\u0442 (\u043f\u0440\u043e\u0432\u0435\u0440\u0435\u043d\u043e 280 \u0441\u0435\u043a\u0443\u043d\u0434), \u0438 \u0442\u0430\u043a\u043e\u0433\u043e \u043d\u0435 \u0434\u0430\u0451\u0442 \u043d\u0438 \u043e\u0434\u0438\u043d \u0433\u0438\u043f\u0435\u0440\u0441\u043a\u0435\u0439\u043b\u0435\u0440.<\/p>\n<\/li>\n<li>\n<p><strong>\u041d\u0430\u0433\u0440\u0443\u0437\u043a\u0430, \u043a\u043e\u0442\u043e\u0440\u043e\u0439 \u043d\u0443\u0436\u043d\u043e \u043f\u0435\u0440\u0435\u0434\u0430\u0442\u044c \u0440\u043e\u043b\u044c \u043f\u0435\u0440\u0435\u0434 \u0443\u0445\u043e\u0434\u043e\u043c<\/strong> \u2014 \u043d\u0435 \u0431\u0435\u0440\u0438\u0442\u0435. \u0411\u0435\u0437 preemption notice \u0443\u0432\u0435\u0441\u0442\u0438 \u0435\u0451 \u0441 \u043d\u043e\u0434\u044b \u0437\u0430\u0440\u0430\u043d\u0435\u0435 \u043f\u0440\u043e\u0441\u0442\u043e \u043d\u0435\u0447\u0435\u043c.<\/p>\n<\/li>\n<li>\n<p><strong>Stateful \u0441 RWO-\u0442\u043e\u043c\u043e\u043c<\/strong> \u2014 \u043d\u0435 \u0431\u0435\u0440\u0438\u0442\u0435. \u042d\u0442\u043e \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u043c\u0438\u043d\u0443\u0442 \u043d\u0435\u0434\u043e\u0441\u0442\u0443\u043f\u043d\u043e\u0441\u0442\u0438 \u043d\u0430 detach \u043a\u0430\u0436\u0434\u044b\u0435 \u0441\u0443\u0442\u043a\u0438, \u0438 \u0441\u0432\u043e\u0431\u043e\u0434\u043d\u044b\u0435 \u043d\u043e\u0434\u044b \u0432 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0435 \u0442\u0443\u0442 \u043d\u0435 \u043f\u043e\u043c\u043e\u0433\u0430\u044e\u0442.<\/p>\n<\/li>\n<li>\n<p><strong>\u041d\u0430\u0441\u0442\u0440\u0430\u0438\u0432\u0430\u0442\u044c \u043d\u0438\u0447\u0435\u0433\u043e \u043d\u0435 \u0445\u043e\u0447\u0435\u0442\u0441\u044f<\/strong> \u2014 \u043f\u043e\u0441\u0442\u0430\u0432\u044c\u0442\u0435 \u0445\u043e\u0442\u044f \u0431\u044b <code>local_volume = false<\/code>. \u041e\u0434\u043d\u0430 \u0441\u0442\u0440\u043e\u0447\u043a\u0430, \u043a\u043e\u0442\u043e\u0440\u0430\u044f \u043f\u0440\u0435\u0432\u0440\u0430\u0449\u0430\u0435\u0442 \u0434\u0435\u0441\u044f\u0442\u044c \u043c\u0438\u043d\u0443\u0442 \u043f\u0435\u0440\u0435\u0441\u043e\u0437\u0434\u0430\u043d\u0438\u044f \u043d\u043e\u0434\u044b \u0438\u0437 \u043e\u0431\u0440\u0430\u0437\u0430 \u0432 \u0434\u0435\u0441\u044f\u0442\u043a\u0438 \u0441\u0435\u043a\u0443\u043d\u0434 \u0432\u043e\u0437\u0432\u0440\u0430\u0442\u0430 \u0441\u043e \u0441\u0432\u043e\u0438\u043c \u0441\u043e\u0441\u0442\u043e\u044f\u043d\u0438\u0435\u043c.<\/p>\n<\/li>\n<\/ul>\n<h3>\u0420\u0435\u043a\u043e\u043c\u0435\u043d\u0434\u0430\u0446\u0438\u0438 \u043f\u0440\u043e\u0432\u0430\u0439\u0434\u0435\u0440\u0443<\/h3>\n<p>\u041d\u0430\u0441\u0442\u0440\u043e\u0439\u043a\u0430 \u0432\u044b\u0448\u0435 \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442, \u043d\u043e \u043e\u043f\u0438\u0440\u0430\u0435\u0442\u0441\u044f \u043d\u0430 \u043f\u0440\u0430\u0432\u043a\u0443 \u0444\u0430\u0439\u043b\u0430, \u043a\u043e\u0442\u043e\u0440\u044b\u043c \u0432\u043b\u0430\u0434\u0435\u0435\u0442 MKS. \u041d\u0438\u0436\u0435 \u2014 \u0447\u0442\u043e, \u043d\u0430 \u043d\u0430\u0448 \u0432\u0437\u0433\u043b\u044f\u0434, \u0441\u0442\u043e\u0438\u043b\u043e \u0431\u044b \u043f\u043e\u043f\u0440\u0430\u0432\u0438\u0442\u044c \u043d\u0430 \u0441\u0442\u043e\u0440\u043e\u043d\u0435 Selectel: \u0447\u0430\u0441\u0442\u044c \u043f\u0440\u0430\u0432\u043e\u043a \u0441\u0434\u0435\u043b\u0430\u043b\u0430 \u0431\u044b \u044d\u0442\u0443 \u043d\u0430\u0441\u0442\u0440\u043e\u0439\u043a\u0443 \u0448\u0442\u0430\u0442\u043d\u043e\u0439, \u0447\u0430\u0441\u0442\u044c \u043f\u0440\u043e\u0441\u0442\u043e \u0443\u0431\u0440\u0430\u043b\u0430 \u0431\u044b \u043d\u0435\u043e\u0447\u0435\u0432\u0438\u0434\u043d\u044b\u0435 \u0440\u0430\u0441\u0445\u043e\u0436\u0434\u0435\u043d\u0438\u044f \u0441 \u0430\u043f\u0441\u0442\u0440\u0438\u043c\u043e\u043c.<\/p>\n<h4>\u0414\u0430\u0442\u044c \u0448\u0442\u0430\u0442\u043d\u0443\u044e \u0442\u043e\u0447\u043a\u0443 \u0440\u0430\u0441\u0448\u0438\u0440\u0435\u043d\u0438\u044f \u0434\u043b\u044f kubelet: EnvironmentFile \u0438\u043b\u0438 &#8212;config-dir<\/h4>\n<p>\u0421\u0435\u0439\u0447\u0430\u0441 \u0435\u0434\u0438\u043d\u0441\u0442\u0432\u0435\u043d\u043d\u044b\u0439 \u0441\u043f\u043e\u0441\u043e\u0431 \u0438\u0437\u043c\u0435\u043d\u0438\u0442\u044c <code>KubeletConfiguration<\/code> \u2014 \u0434\u043e\u043f\u0438\u0441\u044b\u0432\u0430\u0442\u044c \u0432 <code>\/etc\/kubernetes\/kubelet-config.conf<\/code>. \u042d\u0442\u0438\u043c \u0444\u0430\u0439\u043b\u043e\u043c \u0432\u043b\u0430\u0434\u0435\u0435\u0442 <code>mk-node-adm<\/code> (\u00abReceives requests from mk-master-adm to install\/upgrade node components\u00bb), \u0442\u043e \u0435\u0441\u0442\u044c \u043f\u0440\u0438 \u043e\u0447\u0435\u0440\u0435\u0434\u043d\u043e\u043c \u043e\u0431\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0438 \u043a\u043e\u043c\u043f\u043e\u043d\u0435\u043d\u0442\u043e\u0432 \u043d\u043e\u0434\u044b \u043f\u0440\u0430\u0432\u043a\u0430 \u043c\u043e\u0436\u0435\u0442 \u043c\u043e\u043b\u0447\u0430 \u0438\u0441\u0447\u0435\u0437\u043d\u0443\u0442\u044c \u0432\u043c\u0435\u0441\u0442\u0435 \u0441 graceful shutdown.<\/p>\n<p>\u041e\u0431\u043e\u0439\u0442\u0438 \u044d\u0442\u043e \u0447\u0435\u0440\u0435\u0437 \u0430\u0440\u0433\u0443\u043c\u0435\u043d\u0442\u044b \u0437\u0430\u043f\u0443\u0441\u043a\u0430 \u0442\u043e\u0436\u0435 \u043d\u0435 \u0432\u044b\u0439\u0434\u0435\u0442. \u0410\u0440\u0433\u0443\u043c\u0435\u043d\u0442\u044b \u0437\u0430\u0434\u0430\u044e\u0442\u0441\u044f \u043d\u0435 \u0432\u043e \u0432\u043d\u0435\u0448\u043d\u0435\u043c \u0444\u0430\u0439\u043b\u0435, \u0430 \u043f\u0440\u044f\u043c\u043e \u0432 \u044e\u043d\u0438\u0442\u0435, \u043a\u043e\u0442\u043e\u0440\u044b\u043c \u0432\u043b\u0430\u0434\u0435\u0435\u0442 MKS:<\/p>\n<pre><code># \/etc\/systemd\/system\/kubelet.service[Service]Environment=\"KUBELET_ARGS= \\  --bootstrap-kubeconfig=\/etc\/kubernetes\/kubelet-bootstrap.conf \\  --kubeconfig=\/etc\/kubernetes\/kubelet-kubeconfig.conf \\  --config=\/etc\/kubernetes\/kubelet-config.conf \\  --cloud-provider=external \\  --node-labels=\u2026\"ExecStart=\/usr\/bin\/kubelet $KUBELET_ARGS<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p>\u041d\u0438\u043a\u0430\u043a\u043e\u0433\u043e <code>EnvironmentFile<\/code> \u0432 \u044e\u043d\u0438\u0442\u0435 \u043d\u0435\u0442, \u0442\u0430\u043a \u0447\u0442\u043e \u00ab\u0434\u043e\u043f\u0438\u0441\u0430\u0442\u044c \u043e\u0434\u0438\u043d \u0444\u043b\u0430\u0433\u00bb \u043d\u0435\u043a\u0443\u0434\u0430: \u043a\u043b\u0438\u0435\u043d\u0442\u0443 \u043e\u0441\u0442\u0430\u0451\u0442\u0441\u044f \u043b\u0438\u0431\u043e \u043f\u0440\u0430\u0432\u0438\u0442\u044c \u0441\u0430\u043c \u044e\u043d\u0438\u0442, \u043b\u0438\u0431\u043e \u043f\u0435\u0440\u0435\u043e\u043f\u0440\u0435\u0434\u0435\u043b\u044f\u0442\u044c <code>ExecStart<\/code> \u0447\u0435\u0440\u0435\u0437 drop-in \u2014 \u0438 \u0442\u043e \u0438 \u0434\u0440\u0443\u0433\u043e\u0435 \u0437\u0430\u0432\u044f\u0437\u044b\u0432\u0430\u0435\u0442\u0441\u044f \u043d\u0430 \u0432\u043d\u0443\u0442\u0440\u0435\u043d\u043d\u0435\u0435 \u0443\u0441\u0442\u0440\u043e\u0439\u0441\u0442\u0432\u043e MKS.<\/p>\n<p>\u0414\u043e\u0441\u0442\u0430\u0442\u043e\u0447\u043d\u043e <strong>\u043e\u0434\u043d\u043e\u0439 \u0441\u0442\u0440\u043e\u043a\u0438<\/strong>, \u0447\u0442\u043e\u0431\u044b \u044d\u0442\u043e \u0438\u0441\u043f\u0440\u0430\u0432\u0438\u0442\u044c, \u2014 \u0440\u043e\u0432\u043d\u043e \u0442\u0430\u043a \u0434\u0435\u043b\u0430\u0435\u0442 kubeadm:<\/p>\n<pre><code>EnvironmentFile=-\/etc\/default\/kubelet<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p>\u0414\u0435\u0444\u0438\u0441 \u043e\u0437\u043d\u0430\u0447\u0430\u0435\u0442 \u00ab\u043d\u0435\u0442 \u0444\u0430\u0439\u043b\u0430 \u2014 \u043d\u0435 \u0441\u0442\u0440\u0430\u0448\u043d\u043e\u00bb, \u0442\u0430\u043a \u0447\u0442\u043e \u043d\u0430 \u043f\u043e\u0432\u0435\u0434\u0435\u043d\u0438\u0435 \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e \u044d\u0442\u043e \u043d\u0438\u043a\u0430\u043a \u043d\u0435 \u0432\u043b\u0438\u044f\u0435\u0442. \u0417\u0430\u0442\u043e \u0443 \u043a\u043b\u0438\u0435\u043d\u0442\u0430 \u043f\u043e\u044f\u0432\u043b\u044f\u0435\u0442\u0441\u044f \u0437\u0430\u043a\u043e\u043d\u043d\u043e\u0435 \u043c\u0435\u0441\u0442\u043e \u0434\u043b\u044f \u0441\u0432\u043e\u0438\u0445 \u0444\u043b\u0430\u0433\u043e\u0432, \u0438 <code>--config-dir=\/etc\/kubernetes\/kubelet.conf.d<\/code> \u043a\u0430\u0436\u0434\u044b\u0439 \u0441\u043c\u043e\u0436\u0435\u0442 \u0432\u043a\u043b\u044e\u0447\u0438\u0442\u044c \u0441\u0435\u0431\u0435 \u0441\u0430\u043c, \u043d\u0435 \u0442\u0440\u043e\u0433\u0430\u044f \u043d\u0438\u0447\u0435\u0433\u043e, \u043f\u0440\u0438\u043d\u0430\u0434\u043b\u0435\u0436\u0430\u0449\u0435\u0433\u043e MKS.<\/p>\n<p>\u0410\u043b\u044c\u0442\u0435\u0440\u043d\u0430\u0442\u0438\u0432\u0430, \u0435\u0441\u043b\u0438 \u043c\u0435\u043d\u044f\u0442\u044c \u044e\u043d\u0438\u0442 \u043d\u0435\u0436\u0435\u043b\u0430\u0442\u0435\u043b\u044c\u043d\u043e, \u2014 \u0432\u043a\u043b\u044e\u0447\u0438\u0442\u044c <code>--config-dir<\/code> \u0441\u0440\u0430\u0437\u0443 \u043d\u0430 \u0441\u0442\u043e\u0440\u043e\u043d\u0435 MKS. Kubelet \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u0438\u0432\u0430\u0435\u0442 \u0435\u0433\u043e \u0441 1.28: \u0444\u0430\u0439\u043b\u044b <code>*.conf<\/code> \u0438\u0437 \u043a\u0430\u0442\u0430\u043b\u043e\u0433\u0430 \u043c\u0435\u0440\u0436\u0430\u0442\u0441\u044f \u043f\u043e\u0432\u0435\u0440\u0445 \u043e\u0441\u043d\u043e\u0432\u043d\u043e\u0433\u043e \u043a\u043e\u043d\u0444\u0438\u0433\u0430 \u0432 \u0430\u043b\u0444\u0430\u0432\u0438\u0442\u043d\u043e\u043c \u043f\u043e\u0440\u044f\u0434\u043a\u0435 \u043f\u043e \u0441\u0442\u0440\u0430\u0442\u0435\u0433\u0438\u0438 replace. \u041f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u0435\u043b\u044c\u0441\u043a\u0438\u0435 \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u044b \u043b\u0435\u0436\u0430\u0442 \u043e\u0442\u0434\u0435\u043b\u044c\u043d\u044b\u043c \u0444\u0430\u0439\u043b\u043e\u043c, MKS \u0441\u0432\u043e\u0431\u043e\u0434\u043d\u043e \u043f\u0435\u0440\u0435\u0433\u0435\u043d\u0435\u0440\u0438\u0440\u0443\u0435\u0442 \u043e\u0441\u043d\u043e\u0432\u043d\u043e\u0439 \u043a\u043e\u043d\u0444\u0438\u0433, \u043a\u043e\u043d\u0444\u043b\u0438\u043a\u0442\u0430 \u043d\u0435\u0442.<\/p>\n<p>\u0421\u0434\u0435\u043b\u0430\u0442\u044c \u044d\u0442\u043e \u0441\u0430\u043c\u043e\u0441\u0442\u043e\u044f\u0442\u0435\u043b\u044c\u043d\u043e \u043a\u043b\u0438\u0435\u043d\u0442 \u043c\u043e\u0436\u0435\u0442 \u0442\u043e\u043b\u044c\u043a\u043e \u043f\u0435\u0440\u0435\u043e\u043f\u0440\u0435\u0434\u0435\u043b\u0438\u0432 <code>ExecStart<\/code> \u0441\u0432\u043e\u0438\u043c drop-in\u2019\u043e\u043c. \u0410\u043a\u043a\u0443\u0440\u0430\u0442\u043d\u0435\u0435 \u0432\u0441\u0435\u0433\u043e \u2014 \u043d\u0435 \u0434\u0443\u0431\u043b\u0438\u0440\u0443\u044f \u0441\u043f\u0438\u0441\u043e\u043a \u0444\u043b\u0430\u0433\u043e\u0432:<\/p>\n<pre><code># \/etc\/systemd\/system\/kubelet.service.d\/20-config-dir.conf[Service]Environment=\"KUBELET_EXTRA_ARGS=--config-dir=\/etc\/kubernetes\/kubelet.conf.d\"ExecStart=ExecStart=\/usr\/bin\/kubelet $KUBELET_ARGS $KUBELET_EXTRA_ARGS<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p>\u0417\u0434\u0435\u0441\u044c <code>KUBELET_ARGS<\/code> \u043e\u0441\u0442\u0430\u0451\u0442\u0441\u044f \u0437\u0430 MKS \u0438 \u043f\u0440\u043e\u0434\u043e\u043b\u0436\u0430\u0435\u0442 \u043e\u0431\u043d\u043e\u0432\u043b\u044f\u0442\u044c\u0441\u044f \u0432\u043c\u0435\u0441\u0442\u0435 \u0441 \u044e\u043d\u0438\u0442\u043e\u043c, \u0430 \u0434\u0443\u0431\u043b\u0438\u0440\u0443\u0435\u0442\u0441\u044f \u0442\u043e\u043b\u044c\u043a\u043e \u0441\u0442\u0440\u043e\u043a\u0430 \u0437\u0430\u043f\u0443\u0441\u043a\u0430. \u041d\u043e \u0437\u0430\u0432\u0438\u0441\u0438\u043c\u043e\u0441\u0442\u044c \u043e\u0442 \u043d\u0435\u0451 \u0438 \u043e\u0441\u0442\u0430\u0451\u0442\u0441\u044f: \u0441\u0442\u043e\u0438\u0442 MKS \u0438\u0437\u043c\u0435\u043d\u0438\u0442\u044c \u043f\u0443\u0442\u044c \u043a \u0431\u0438\u043d\u0430\u0440\u044e \u0438\u043b\u0438 \u0434\u043e\u0431\u0430\u0432\u0438\u0442\u044c \u0432 <code>ExecStart<\/code> \u0435\u0449\u0451 \u043e\u0434\u043d\u0443 \u043f\u0435\u0440\u0435\u043c\u0435\u043d\u043d\u0443\u044e \u2014 \u043d\u043e\u0434\u0430 \u043f\u043e\u0434\u043d\u0438\u043c\u0435\u0442\u0441\u044f \u0431\u0435\u0437 \u0447\u0430\u0441\u0442\u0438 \u0444\u043b\u0430\u0433\u043e\u0432 \u0438\u043b\u0438 \u043d\u0435 \u043f\u043e\u0434\u043d\u0438\u043c\u0435\u0442\u0441\u044f \u0432\u043e\u0432\u0441\u0435, \u043f\u0440\u0438\u0447\u0451\u043c \u043c\u043e\u043b\u0447\u0430. \u041c\u044b \u044d\u0442\u043e\u0442 \u0432\u0430\u0440\u0438\u0430\u043d\u0442 \u0432 \u0431\u043e\u044e \u043d\u0435 \u043f\u0440\u043e\u0432\u0435\u0440\u044f\u043b\u0438 \u0438 \u0432 \u0438\u0442\u043e\u0433\u043e\u0432\u043e\u0439 \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u0438 \u043d\u0435 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u043c: \u0442\u0438\u0445\u0430\u044f \u043f\u043e\u0442\u0435\u0440\u044f graceful shutdown \u043f\u0440\u0438 \u043f\u0435\u0440\u0435\u0437\u0430\u043f\u0438\u0441\u0438 \u043a\u043e\u043d\u0444\u0438\u0433\u0430 \u2014 \u043c\u0435\u043d\u044c\u0448\u0435\u0435 \u0437\u043b\u043e, \u0447\u0435\u043c \u0441\u043b\u043e\u043c\u0430\u043d\u043d\u044b\u0439 \u0437\u0430\u043f\u0443\u0441\u043a kubelet.<\/p>\n<h4>\u041f\u0440\u043e\u0441\u0442\u0430\u0432\u0438\u0442\u044c system-node-critical \u0434\u043b\u044f csi-cinder-nodeplugin<\/h4>\n<p>\u0412 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0435 \u043f\u043e\u0434 <code>csi-cinder-nodeplugin<\/code> \u0438\u0434\u0451\u0442 \u0441 <code>priority=0<\/code> \u0438 \u0431\u0435\u0437 <code>priorityClassName<\/code>, \u0442\u043e\u0433\u0434\u0430 \u043a\u0430\u043a <code>calico-node<\/code> \u0438 <code>kube-proxy<\/code> \u043a\u043e\u0440\u0440\u0435\u043a\u0442\u043d\u043e \u043f\u043e\u043c\u0435\u0447\u0435\u043d\u044b <code>system-node-critical<\/code>. \u0418\u0437-\u0437\u0430 \u044d\u0442\u043e\u0433\u043e CSI-\u043f\u043b\u0430\u0433\u0438\u043d \u0433\u0430\u0441\u0438\u0442\u0441\u044f \u0432 \u043f\u0435\u0440\u0432\u043e\u0439 \u0444\u0430\u0437\u0435 \u0432\u043c\u0435\u0441\u0442\u0435 \u0441 \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u044f\u043c\u0438, \u0430 \u043d\u0435 \u0432 \u043a\u0440\u0438\u0442\u0438\u0447\u0435\u0441\u043a\u043e\u0439.<\/p>\n<p>\u041f\u0440\u0430\u043a\u0442\u0438\u0447\u0435\u0441\u043a\u0438\u0445 \u043f\u043e\u0441\u043b\u0435\u0434\u0441\u0442\u0432\u0438\u0439 \u043f\u0440\u0438 \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0438 \u043d\u0435 \u043e\u0431\u043d\u0430\u0440\u0443\u0436\u0435\u043d\u043e. \u041a\u0430\u043a \u0432\u0438\u0434\u043d\u043e \u0438\u0437 \u043f\u0440\u043e\u0433\u043e\u043d\u0430 4, kubelet \u043f\u0440\u0438 node shutdown \u0432\u043e\u043e\u0431\u0449\u0435 \u043d\u0435 \u0432\u044b\u043f\u043e\u043b\u043d\u044f\u0435\u0442 <code>NodeUnpublish<\/code>\/<code>UnmountVolume<\/code>, \u0430 \u0442\u043e\u043c \u043e\u0441\u0432\u043e\u0431\u043e\u0436\u0434\u0430\u0435\u0442 attach-detach controller; \u0434\u043b\u044f \u0432\u0432\u043e\u0434\u0430-\u0432\u044b\u0432\u043e\u0434\u0430 \u0432 \u0443\u0436\u0435 \u0441\u043c\u043e\u043d\u0442\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u0443\u044e \u0424\u0421 \u043f\u043b\u0430\u0433\u0438\u043d \u043d\u0435 \u043d\u0443\u0436\u0435\u043d, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 \u043f\u043e\u0434 \u0441 \u0442\u043e\u043c\u043e\u043c \u0441\u043f\u043e\u043a\u043e\u0439\u043d\u043e \u0434\u043e\u043f\u0438\u0441\u044b\u0432\u0430\u0435\u0442 \u0434\u0430\u043d\u043d\u044b\u0435 \u0438 \u043f\u043e\u0441\u043b\u0435 \u0435\u0433\u043e \u0441\u043c\u0435\u0440\u0442\u0438.<\/p>\n<p>\u0422\u0435\u043c \u043d\u0435 \u043c\u0435\u043d\u0435\u0435 upstream cinder-csi \u0441\u0442\u0430\u0432\u0438\u0442 \u0441\u0432\u043e\u0435\u043c\u0443 nodeplugin <code>system-node-critical<\/code>, \u0438 \u043f\u0440\u0438\u0432\u0435\u0434\u0435\u043d\u0438\u0435 MKS \u043a \u044d\u0442\u043e\u043c\u0443 \u043f\u043e\u0432\u0435\u0434\u0435\u043d\u0438\u044e \u0443\u0431\u0440\u0430\u043b\u043e \u0431\u044b \u043d\u0435\u043e\u0447\u0435\u0432\u0438\u0434\u043d\u043e\u0435 \u0440\u0430\u0441\u0445\u043e\u0436\u0434\u0435\u043d\u0438\u0435.<\/p>\n<h4>\u041d\u0430\u0443\u0447\u0438\u0442\u044c CCM \u0440\u0430\u0441\u043f\u043e\u0437\u043d\u0430\u0432\u0430\u0442\u044c SHELVED_OFFLOADED \u043a\u0430\u043a \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u043d\u044b\u0439 \u0438\u043d\u0441\u0442\u0430\u043d\u0441<\/h4>\n<p>\u0421\u0430\u043c\u0430\u044f \u0437\u0430\u043c\u0435\u0442\u043d\u0430\u044f \u0437\u0430\u0434\u0435\u0440\u0436\u043a\u0430 \u043f\u0440\u0438 \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0438 \u0434\u043e\u0441\u0442\u0430\u0451\u0442\u0441\u044f stateful-\u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0435: \u0442\u043e\u043c \u043e\u0441\u0442\u0430\u0451\u0442\u0441\u044f \u043f\u0440\u0438\u0432\u044f\u0437\u0430\u043d\u043d\u044b\u043c \u043a \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u043d\u043e\u0439 \u043d\u043e\u0434\u0435, \u0438 \u043f\u043e\u0434 \u043f\u0440\u043e\u0441\u0442\u0430\u0438\u0432\u0430\u0435\u0442 \u043c\u0438\u043d\u0443\u0442\u044b \u043d\u0430 <code>Multi-Attach error<\/code>.<\/p>\n<p>\u0412 Kubernetes \u0434\u043b\u044f \u044d\u0442\u043e\u0433\u043e \u0435\u0441\u0442\u044c \u0448\u0442\u0430\u0442\u043d\u044b\u0439 \u043f\u0443\u0442\u044c: cloud controller manager \u043f\u043e\u043c\u0435\u0447\u0430\u0435\u0442 \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u043d\u044b\u0439 \u0438\u043d\u0441\u0442\u0430\u043d\u0441 taint\u2019\u043e\u043c <code>node.cloudprovider.kubernetes.io\/shutdown<\/code>, \u0447\u0442\u043e \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u0435\u0442 \u043e\u0442\u0432\u044f\u0437\u0430\u0442\u044c \u0442\u043e\u043c\u0430, \u043d\u0435 \u0434\u043e\u0436\u0438\u0434\u0430\u044f\u0441\u044c \u0448\u0435\u0441\u0442\u0438\u043c\u0438\u043d\u0443\u0442\u043d\u043e\u0433\u043e \u0442\u0430\u0439\u043c\u0430\u0443\u0442\u0430. \u041d\u043e \u0437\u0430 \u0432\u0435\u0441\u044c \u043f\u0440\u043e\u0433\u043e\u043d \u0442\u0430\u043a\u043e\u0439 taint \u043d\u0435 \u043f\u043e\u044f\u0432\u0438\u043b\u0441\u044f \u2014 \u043d\u0430 \u043d\u043e\u0434\u0435 \u043f\u043e\u0431\u044b\u0432\u0430\u043b\u0438 \u0442\u043e\u043b\u044c\u043a\u043e <code>not-ready<\/code>, <code>unreachable<\/code>, <code>network-unavailable<\/code> \u0438 <code>DeletionCandidateOfClusterAutoscaler<\/code>.<\/p>\n<p>\u041f\u0440\u0438\u0447\u0438\u043d\u0430 \u0432 \u0442\u043e\u043c, \u0447\u0442\u043e <code>cloud-provider-openstack<\/code> \u0441\u0447\u0438\u0442\u0430\u0435\u0442 \u0438\u043d\u0441\u0442\u0430\u043d\u0441 \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u043d\u044b\u043c \u043f\u043e \u0441\u0442\u0430\u0442\u0443\u0441\u0443 <code>SHUTOFF<\/code>, \u0430 \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0435 \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u043e\u0439 \u043d\u043e\u0434\u044b \u0434\u0430\u0451\u0442 <code>SHELVED_OFFLOADED<\/code>. \u0414\u043b\u044f Selectel \u044d\u0442\u043e \u043d\u0435 \u044d\u043a\u0437\u043e\u0442\u0438\u043a\u0430, \u0430 \u0448\u0442\u0430\u0442\u043d\u044b\u0439 \u043c\u0435\u0445\u0430\u043d\u0438\u0437\u043c \u0441\u043e\u0431\u0441\u0442\u0432\u0435\u043d\u043d\u043e\u0439 \u0444\u0438\u0447\u0438, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u043a\u0443 shelve-\u0441\u043e\u0441\u0442\u043e\u044f\u043d\u0438\u0439 \u0432 CCM (\u0438\u043b\u0438 \u043f\u0430\u0442\u0447 \u0432 \u0430\u043f\u0441\u0442\u0440\u0438\u043c <code>cloud-provider-openstack<\/code>) \u0441\u0442\u043e\u0438\u043b\u043e \u0431\u044b \u0434\u043e\u0431\u0430\u0432\u0438\u0442\u044c: \u044d\u0442\u043e \u0443\u0441\u043a\u043e\u0440\u0438\u043b\u043e \u0431\u044b \u0432\u043e\u0437\u0432\u0440\u0430\u0442 stateful-\u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0438 \u0434\u043b\u044f \u0432\u0441\u0435\u0445 \u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u0435\u043b\u0435\u0439 \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0445 \u043d\u043e\u0434, \u0431\u0435\u0437 \u043a\u043e\u0441\u0442\u044b\u043b\u0435\u0439 \u043d\u0430 \u0441\u0442\u043e\u0440\u043e\u043d\u0435 \u043a\u043b\u0438\u0435\u043d\u0442\u0430.<\/p>\n<p>\u041a\u043b\u0438\u0435\u043d\u0442\u0441\u043a\u0430\u044f \u0430\u043b\u044c\u0442\u0435\u0440\u043d\u0430\u0442\u0438\u0432\u0430 \u2014 \u0441\u0432\u043e\u0439 \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u043b\u0435\u0440, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0432\u0435\u0448\u0430\u0435\u0442 <code>node.kubernetes.io\/out-of-service=nodeshutdown:NoExecute<\/code> \u043f\u043e\u0441\u043b\u0435 \u043f\u0440\u043e\u0432\u0435\u0440\u043a\u0438 \u0441\u0442\u0430\u0442\u0443\u0441\u0430 \u0441\u0435\u0440\u0432\u0435\u0440\u0430 \u0447\u0435\u0440\u0435\u0437 Nova API. \u0420\u0430\u0431\u043e\u0442\u0430\u0435\u0442, \u043d\u043e \u0442\u0440\u0435\u0431\u0443\u0435\u0442 \u0431\u0435\u0437\u043e\u0448\u0438\u0431\u043e\u0447\u043d\u043e\u0433\u043e \u043e\u043f\u0440\u0435\u0434\u0435\u043b\u0435\u043d\u0438\u044f \u0441\u043e\u0441\u0442\u043e\u044f\u043d\u0438\u044f: taint, \u043f\u043e\u0432\u0435\u0448\u0435\u043d\u043d\u044b\u0439 \u043d\u0430 \u0436\u0438\u0432\u0443\u044e \u043d\u043e\u0434\u0443, \u043f\u0440\u0438\u0432\u043e\u0434\u0438\u0442 \u043a \u043f\u043e\u0432\u0440\u0435\u0436\u0434\u0435\u043d\u0438\u044e \u0434\u0430\u043d\u043d\u044b\u0445, \u0430 \u043d\u0435 \u043a \u043f\u0440\u043e\u0441\u0442\u043e\u044e.<\/p>\n<h4>\u0421\u043e\u0433\u043b\u0430\u0441\u043e\u0432\u0430\u0442\u044c InhibitDelayMaxSec \u0432 \u043e\u0431\u0440\u0430\u0437\u0435 \u043d\u043e\u0434\u044b<\/h4>\n<p><code>unattended-upgrades<\/code> \u0432 \u043e\u0431\u0440\u0430\u0437\u0435 Ubuntu \u043a\u043b\u0430\u0434\u0451\u0442 <code>InhibitDelayMaxSec=30<\/code>, \u0438 \u0438\u0437-\u0437\u0430 \u043f\u0440\u0430\u0432\u0438\u043b \u0441\u043e\u0440\u0442\u0438\u0440\u043e\u0432\u043a\u0438 drop-in\u2019\u043e\u0432 logind \u044d\u0442\u043e \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u0435 \u043f\u0435\u0440\u0435\u0431\u0438\u0432\u0430\u0435\u0442 \u0442\u043e, \u0447\u0442\u043e kubelet \u043f\u044b\u0442\u0430\u0435\u0442\u0441\u044f \u0432\u044b\u0441\u0442\u0430\u0432\u0438\u0442\u044c \u0441\u0430\u043c. \u0412 \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u0435 \u043b\u044e\u0431\u043e\u0439 <code>shutdownGracePeriod<\/code> \u0431\u043e\u043b\u044c\u0448\u0435 30 \u0441\u0435\u043a\u0443\u043d\u0434 \u043f\u0440\u0438\u0432\u043e\u0434\u0438\u0442 \u043a \u043e\u0442\u043a\u0430\u0437\u0443 \u0437\u0430\u043f\u0443\u0441\u043a\u0430 node shutdown manager \u2014 \u0441 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0435\u043c, \u043f\u043e \u043a\u043e\u0442\u043e\u0440\u043e\u043c\u0443 \u043d\u0435\u043e\u0447\u0435\u0432\u0438\u0434\u043d\u043e, \u0447\u0442\u043e \u0432\u0438\u043d\u043e\u0432\u0430\u0442 \u0441\u0442\u043e\u0440\u043e\u043d\u043d\u0438\u0439 \u043f\u0430\u043a\u0435\u0442.<\/p>\n<p>\u0420\u0430\u0437\u0443\u043c\u043d\u043e \u043b\u0438\u0431\u043e \u043f\u043e\u0434\u043d\u044f\u0442\u044c \u044d\u0442\u043e \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u0435 \u0432 \u043e\u0431\u0440\u0430\u0437\u0435 \u0434\u043e \u0432\u0435\u043b\u0438\u0447\u0438\u043d\u044b, \u0441\u043e\u0433\u043b\u0430\u0441\u043e\u0432\u0430\u043d\u043d\u043e\u0439 \u0441 <code>shutdownGracePeriod<\/code>, \u043b\u0438\u0431\u043e \u0437\u0430\u0434\u0430\u0432\u0430\u0442\u044c \u043e\u0431\u0430 \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u0430 \u0432\u043c\u0435\u0441\u0442\u0435 \u043f\u0440\u0438 \u0432\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0438 graceful shutdown.<\/p>\n<h4>\u0412\u043a\u043b\u044e\u0447\u0430\u0442\u044c graceful shutdown \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e<\/h4>\n<p>\u041c\u0435\u0445\u0430\u043d\u0438\u043a\u0430 \u043d\u0430 \u0438\u043d\u0444\u0440\u0430\u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u0435 Selectel \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u0431\u0435\u0437 \u043d\u0430\u0440\u0435\u043a\u0430\u043d\u0438\u0439 \u0438 \u043d\u0435 \u0438\u043c\u0435\u0435\u0442 \u0434\u0435\u0434\u043b\u0430\u0439\u043d\u0430 \u0441\u043e \u0441\u0442\u043e\u0440\u043e\u043d\u044b \u0433\u0438\u043f\u0435\u0440\u0432\u0438\u0437\u043e\u0440\u0430 \u2014 \u0442\u0435\u043c \u0434\u043e\u0441\u0430\u0434\u043d\u0435\u0435, \u0447\u0442\u043e \u0434\u043b\u044f \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0445 \u0433\u0440\u0443\u043f\u043f \u043d\u043e\u0434 \u043e\u043d\u0430 \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0430. \u0420\u0430\u0437\u0443\u043c\u043d\u044b\u0435 \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u044f \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e (\u0445\u043e\u0442\u044f \u0431\u044b 30\/10 \u0441\u0435\u043a\u0443\u043d\u0434) \u0438\u0437\u0431\u0430\u0432\u0438\u043b\u0438 \u0431\u044b \u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u0435\u043b\u0435\u0439 \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0445 \u043d\u043e\u0434 \u043e\u0442 \u0436\u0451\u0441\u0442\u043a\u043e\u0433\u043e \u0443\u0431\u0438\u0439\u0441\u0442\u0432\u0430 \u043f\u043e\u0434\u043e\u0432 \u043f\u0440\u0438 \u043a\u0430\u0436\u0434\u043e\u043c \u0441\u0443\u0442\u043e\u0447\u043d\u043e\u043c \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0438. \u0424\u0438\u0447\u0430 \u0434\u043e\u0441\u0442\u0443\u043f\u043d\u0430 \u0441 \u0444\u0435\u0432\u0440\u0430\u043b\u044f 2025 \u0433\u043e\u0434\u0430, \u0442\u0430\u043a \u0447\u0442\u043e \u0440\u0435\u0447\u044c \u0443\u0436\u0435 \u043d\u0435 \u043f\u0440\u043e \u043c\u043e\u043b\u043e\u0434\u0443\u044e \u0444\u0443\u043d\u043a\u0446\u0438\u043e\u043d\u0430\u043b\u044c\u043d\u043e\u0441\u0442\u044c.<\/p>\n<h4>\u0417\u0430\u043c\u0435\u0442\u043a\u0430: \u0441\u0432\u043e\u0439 termination handler \u0432 \u043f\u043b\u0430\u043d\u0430\u0445<\/h4>\n<p>\u041d\u0430 \u043c\u043e\u043c\u0435\u043d\u0442 \u043d\u0430\u043f\u0438\u0441\u0430\u043d\u0438\u044f \u043f\u0440\u043e\u0434\u0430\u043a\u0442-\u043c\u0435\u043d\u0435\u0434\u0436\u0435\u0440 Selectel \u0432 Telegram-\u0447\u0430\u0442\u0435 \u0441\u043e\u043e\u0431\u0449\u0435\u0441\u0442\u0432\u0430 <a href=\"https:\/\/t.me\/SelectelCommunity\/33136\" rel=\"noopener noreferrer nofollow\">\u0441\u043e\u043e\u0431\u0449\u0438\u043b<\/a>, \u0447\u0442\u043e \u0432 \u043f\u043b\u0430\u043d\u0430\u0445 \u2014 \u0441\u0434\u0435\u043b\u0430\u0442\u044c \u0441\u0432\u043e\u0439 \u0430\u043d\u0430\u043b\u043e\u0433 <code>aws-node-termination-handler<\/code>.<\/p>\n<p>\u0422\u0443\u0442 \u0441\u0442\u043e\u0438\u0442 \u0441\u043a\u0430\u0437\u0430\u0442\u044c, \u0447\u0442\u043e \u043f\u0440\u0430\u0432\u043a\u0438 \u0432\u044b\u0448\u0435 \u0437\u0430\u043a\u0440\u044b\u0432\u0430\u044e\u0442 \u0437\u0430\u0434\u0430\u0447\u0443 \u043f\u043e\u0447\u0442\u0438 \u0446\u0435\u043b\u0438\u043a\u043e\u043c \u0438 \u0431\u0435\u0437 \u043d\u0435\u0433\u043e. \u0412\u043a\u043b\u044e\u0447\u0451\u043d\u043d\u044b\u0439 \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e graceful shutdown \u0432\u043c\u0435\u0441\u0442\u0435 \u0441 \u0441\u043e\u0433\u043b\u0430\u0441\u043e\u0432\u0430\u043d\u043d\u044b\u043c <code>InhibitDelayMaxSec<\/code> \u0434\u0430\u043b \u0431\u044b \u043a\u043e\u0440\u0440\u0435\u043a\u0442\u043d\u043e\u0435 \u0437\u0430\u0432\u0435\u0440\u0448\u0435\u043d\u0438\u0435 \u0432\u0441\u0435\u043c \u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u0435\u043b\u044f\u043c \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0445 \u043d\u043e\u0434 \u0441\u0440\u0430\u0437\u0443, \u0431\u0435\u0437 \u0435\u0434\u0438\u043d\u043e\u0439 \u0441\u0442\u0440\u043e\u0447\u043a\u0438 <code>user_data<\/code>. <code>--config-dir<\/code> \u0434\u0430\u043b \u0431\u044b \u0448\u0442\u0430\u0442\u043d\u0443\u044e \u0442\u043e\u0447\u043a\u0443, \u0433\u0434\u0435 \u044d\u0442\u043e \u043c\u043e\u0436\u043d\u043e \u043f\u043e\u0434\u0441\u0442\u0440\u043e\u0438\u0442\u044c \u043f\u043e\u0434 \u0441\u0435\u0431\u044f. \u0410 \u0435\u0434\u0438\u043d\u0441\u0442\u0432\u0435\u043d\u043d\u0430\u044f \u0441\u043e\u0434\u0435\u0440\u0436\u0430\u0442\u0435\u043b\u044c\u043d\u0430\u044f \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u0430, \u043a\u043e\u0442\u043e\u0440\u0443\u044e graceful \u043d\u0435 \u0440\u0435\u0448\u0430\u0435\u0442 \u0441\u0430\u043c, \u2014 \u0437\u0430\u043b\u0438\u043f\u0448\u0438\u0439 detach RWO-\u0442\u043e\u043c\u043e\u0432 \u2014 \u0437\u0430\u043a\u0440\u044b\u0432\u0430\u0435\u0442\u0441\u044f \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u043a\u043e\u0439 <code>SHELVED_OFFLOADED<\/code> \u0432 CCM. \u0412\u0441\u0451 \u043e\u0441\u0442\u0430\u043b\u044c\u043d\u043e\u0435 \u0432 \u0437\u0430\u043c\u0435\u0440\u0430\u0445 \u043e\u0442\u0440\u0430\u0431\u043e\u0442\u0430\u043b\u043e \u0431\u0435\u0437 \u043d\u0430\u0440\u0435\u043a\u0430\u043d\u0438\u0439, \u0438 \u0438\u043c\u0435\u043d\u043d\u043e \u043f\u043e\u044d\u0442\u043e\u043c\u0443 \u0441\u043f\u0438\u0441\u043e\u043a \u0440\u0435\u043a\u043e\u043c\u0435\u043d\u0434\u0430\u0446\u0438\u0439 \u043f\u043e\u043b\u0443\u0447\u0438\u043b\u0441\u044f \u0442\u0430\u043a\u0438\u043c \u0441\u043a\u0440\u043e\u043c\u043d\u044b\u043c: \u043c\u0435\u0445\u0430\u043d\u0438\u043a\u0430 \u0443\u0436\u0435 \u0435\u0441\u0442\u044c \u0438 \u0443\u0436\u0435 \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442, \u0435\u0439 \u043d\u0435 \u0445\u0432\u0430\u0442\u0430\u0435\u0442 \u0432\u043a\u043b\u044e\u0447\u0451\u043d\u043d\u043e\u0441\u0442\u0438 \u0438 \u043e\u0434\u043d\u043e\u0439 \u0438\u043d\u0442\u0435\u0433\u0440\u0430\u0446\u0438\u0438.<\/p>\n<p>\u041f\u043e\u043b\u043d\u043e\u0446\u0435\u043d\u043d\u044b\u0439 \u0445\u0435\u043d\u0434\u043b\u0435\u0440 \u0434\u043e\u0431\u0430\u0432\u0438\u043b \u0431\u044b \u0442\u043e, \u0447\u0435\u0433\u043e \u0443 \u0442\u0435\u043a\u0443\u0449\u0435\u0439 \u043c\u0435\u0445\u0430\u043d\u0438\u043a\u0438 \u043d\u0435\u0442 \u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u043d\u043e: \u0437\u0430\u0431\u043b\u0430\u0433\u043e\u0432\u0440\u0435\u043c\u0435\u043d\u043d\u043e\u0435 \u0443\u0432\u0435\u0434\u043e\u043c\u043b\u0435\u043d\u0438\u0435, \u0430 \u0437\u043d\u0430\u0447\u0438\u0442 \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e\u0441\u0442\u044c \u0443\u0432\u0435\u0441\u0442\u0438 \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0443 <strong>\u0434\u043e<\/strong> \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u044f \u2014 \u043d\u0430\u0441\u0442\u043e\u044f\u0449\u0438\u0439 evict \u0447\u0435\u0440\u0435\u0437 Eviction API, \u0441 \u0441\u043e\u0431\u043b\u044e\u0434\u0435\u043d\u0438\u0435\u043c PDB \u0438 \u0441 \u043f\u0435\u0440\u0435\u0435\u0437\u0434\u043e\u043c \u0434\u043e \u0437\u0430\u0432\u0435\u0440\u0448\u0435\u043d\u0438\u044f, \u0430 \u043d\u0435 \u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u044c\u043d\u043e \u0441 \u043d\u0438\u043c. \u042d\u0442\u043e \u0437\u0430\u043c\u0435\u0442\u043d\u043e \u043b\u0443\u0447\u0448\u0435, \u043d\u043e \u0438 \u0441\u0442\u043e\u0438\u0442 \u0434\u043e\u0440\u043e\u0436\u0435: \u043e\u0434\u043d\u0438\u043c \u0434\u0435\u043c\u043e\u043d\u043e\u043c \u0432 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0435 \u043d\u0435 \u043e\u0431\u043e\u0439\u0442\u0438\u0441\u044c, \u0441\u043d\u0430\u0447\u0430\u043b\u0430 \u043d\u0443\u0436\u0435\u043d \u0441\u0430\u043c \u0438\u0441\u0442\u043e\u0447\u043d\u0438\u043a \u0441\u043e\u0431\u044b\u0442\u0438\u044f, \u043a\u043e\u0442\u043e\u0440\u043e\u0433\u043e \u0432 \u0430\u043f\u0441\u0442\u0440\u0438\u043c\u043d\u043e\u0439 Nova \u043d\u0435\u0442, \u2014 \u0442\u043e \u0435\u0441\u0442\u044c \u0440\u0430\u0431\u043e\u0442\u0430 \u043d\u0430 \u0441\u0442\u043e\u0440\u043e\u043d\u0435 \u043e\u0431\u043b\u0430\u043a\u0430, \u0430 \u043d\u0435 \u0442\u043e\u043b\u044c\u043a\u043e \u0432 Kubernetes. \u0420\u0430\u0437\u0440\u044b\u0432 \u043c\u0435\u0436\u0434\u0443 \u00ab\u043f\u043e\u0434\u044b \u0443\u0431\u0438\u0432\u0430\u044e\u0442 \u0436\u0451\u0441\u0442\u043a\u043e\u00bb \u0438 \u00ab\u043f\u043e\u0434\u044b \u043a\u043e\u0440\u0440\u0435\u043a\u0442\u043d\u043e \u0434\u043e\u0436\u0438\u0432\u0430\u044e\u0442\u00bb \u0437\u0430\u043a\u0440\u044b\u0432\u0430\u0435\u0442\u0441\u044f \u043d\u0435 \u0445\u0435\u043d\u0434\u043b\u0435\u0440\u043e\u043c, \u0430 \u043f\u0430\u0440\u043e\u0439 \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u0439 \u0432 \u043a\u043e\u043d\u0444\u0438\u0433\u0435 kubelet.<\/p>\n<h3>\u0421\u0441\u044b\u043b\u043a\u0438<\/h3>\n<ul>\n<li>\n<p><a href=\"https:\/\/docs.selectel.ru\/en\/managed-kubernetes\/node-groups\/preemptible-node-groups\/\" rel=\"noopener noreferrer nofollow\">\u041f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0435 \u0433\u0440\u0443\u043f\u043f\u044b \u043d\u043e\u0434 \u2014 Selectel<\/a><\/p>\n<\/li>\n<li>\n<p><a href=\"https:\/\/habr.com\/ru\/companies\/selectel\/articles\/883494\/\" rel=\"noopener noreferrer nofollow\">\u041a\u0430\u043a \u0441\u043e\u043a\u0440\u0430\u0442\u0438\u0442\u044c \u0431\u043e\u043b\u0435\u0435 \u043f\u043e\u043b\u043e\u0432\u0438\u043d\u044b \u0438\u043d\u0444\u0440\u0430\u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u043d\u044b\u0445 \u0440\u0430\u0441\u0445\u043e\u0434\u043e\u0432? \u041f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0435 \u0412\u041c \u0432 Kubernetes \u2014 \u0431\u043b\u043e\u0433 Selectel<\/a><\/p>\n<\/li>\n<li>\n<p><a href=\"https:\/\/docs.selectel.ru\/en\/cloud-servers\/about\/preemptible-servers\/\" rel=\"noopener noreferrer nofollow\">\u041f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0435 \u043e\u0431\u043b\u0430\u0447\u043d\u044b\u0435 \u0441\u0435\u0440\u0432\u0435\u0440\u044b \u2014 Selectel<\/a><\/p>\n<\/li>\n<li>\n<p><a href=\"https:\/\/docs.selectel.ru\/en\/managed-kubernetes\/node-groups\/user-data\/\" rel=\"noopener noreferrer nofollow\">User data \u0434\u043b\u044f \u0433\u0440\u0443\u043f\u043f \u043d\u043e\u0434 \u2014 Selectel<\/a><\/p>\n<\/li>\n<li>\n<p><a href=\"https:\/\/registry.terraform.io\/providers\/selectel\/selectel\/latest\/docs\/resources\/mks_nodegroup_v1\" rel=\"noopener noreferrer nofollow\">selectel_mks_nodegroup_v1 \u2014 Terraform Registry<\/a><\/p>\n<\/li>\n<li>\n<p><a href=\"https:\/\/kubernetes.io\/docs\/concepts\/cluster-administration\/node-shutdown\" rel=\"noopener noreferrer nofollow\">Node Shutdowns \u2014 Kubernetes<\/a><\/p>\n<\/li>\n<li>\n<p><a href=\"https:\/\/github.com\/kubernetes\/enhancements\/blob\/master\/keps\/sig-node\/2000-graceful-node-shutdown\/README.md\" rel=\"noopener noreferrer nofollow\">Graceful Node Shutdown KEP-2000<\/a><\/p>\n<\/li>\n<li>\n<p><a href=\"https:\/\/systemd.io\/INHIBITOR_LOCKS\/\" rel=\"noopener noreferrer nofollow\">Inhibitor Locks \u2014 systemd<\/a><\/p>\n<\/li>\n<li>\n<p><a href=\"https:\/\/docs.aws.amazon.com\/AWSEC2\/latest\/UserGuide\/spot-instance-termination-notices.html\" rel=\"noopener noreferrer nofollow\">Spot Instance interruption notices \u2014 AWS<\/a><\/p>\n<\/li>\n<li>\n<p><a href=\"https:\/\/github.com\/aws\/aws-node-termination-handler\" rel=\"noopener noreferrer nofollow\">aws-node-termination-handler<\/a><\/p>\n<\/li>\n<li>\n<p><a href=\"https:\/\/docs.cloud.google.com\/compute\/docs\/instances\/spot\" rel=\"noopener noreferrer nofollow\">Spot VMs \u2014 Google Compute Engine<\/a><\/p>\n<\/li>\n<li>\n<p><a href=\"https:\/\/learn.microsoft.com\/en-us\/azure\/virtual-machines\/spot-vms\" rel=\"noopener noreferrer nofollow\">Azure Spot Virtual Machines<\/a><\/p>\n<\/li>\n<\/ul>\n<hr\/>\n<p>P.S. \u041d\u0430 \u044d\u0442\u043e\u043c \u0443 \u043c\u0435\u043d\u044f \u0432\u0441\u0451, \u0441\u043f\u0430\u0441\u0438\u0431\u043e, \u0447\u0442\u043e \u0434\u043e\u0447\u0438\u0442\u0430\u043b\u0438 \u0434\u043e \u043a\u043e\u043d\u0446\u0430 \ud83d\ude42 \u0415\u0441\u043b\u0438 \u0442\u0435\u043c\u0430 \u0431\u043b\u0438\u0437\u043a\u0430 \u2014 \u0437\u0430\u0433\u043b\u044f\u0434\u044b\u0432\u0430\u0439\u0442\u0435 \u0432 <a href=\"https:\/\/habr.com\/ru\/users\/jidckii\/articles\/\" rel=\"noopener noreferrer nofollow\">\u0434\u0440\u0443\u0433\u0438\u0435 \u043c\u043e\u0438 \u0441\u0442\u0430\u0442\u044c\u0438 \u043d\u0430 \u0425\u0430\u0431\u0440\u0435<\/a>.<\/p>\n<\/div>\n<p>\u0441\u0441\u044b\u043b\u043a\u0430 \u043d\u0430 \u043e\u0440\u0438\u0433\u0438\u043d\u0430\u043b \u0441\u0442\u0430\u0442\u044c\u0438 <a href=\"https:\/\/habr.com\/ru\/articles\/1064830\/\">https:\/\/habr.com\/ru\/articles\/1064830\/<\/a><\/p>\n","protected":false},"excerpt":{"rendered":"<p>\u041f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0435 (preemptible) \u043d\u043e\u0434\u044b \u0432 Selectel MKS \u0434\u0435\u0448\u0435\u0432\u043b\u0435 \u043f\u0440\u0438\u043c\u0435\u0440\u043d\u043e \u043d\u0430 70%, \u0438 \u043f\u043b\u0430\u0442\u0430 \u0437\u0430 \u044d\u0442\u043e \u0447\u0435\u0441\u0442\u043d\u0430\u044f: \u043f\u0440\u043e\u0432\u0430\u0439\u0434\u0435\u0440 \u043c\u043e\u0436\u0435\u0442 \u0437\u0430\u0431\u0440\u0430\u0442\u044c \u043d\u043e\u0434\u0443 \u0432 \u043b\u044e\u0431\u043e\u0439 \u043c\u043e\u043c\u0435\u043d\u0442, \u0430 \u0431\u043e\u043b\u044c\u0448\u0435 \u0441\u0443\u0442\u043e\u043a \u043e\u043d\u0430 \u043d\u0435 \u0436\u0438\u0432\u0451\u0442 \u0432 \u043b\u044e\u0431\u043e\u043c \u0441\u043b\u0443\u0447\u0430\u0435. \u0422\u043e \u0435\u0441\u0442\u044c \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0435 \u2014 \u043d\u0435 \u0430\u0432\u0430\u0440\u0438\u044f, \u0430 \u0435\u0436\u0435\u0434\u043d\u0435\u0432\u043d\u043e\u0435 \u0448\u0442\u0430\u0442\u043d\u043e\u0435 \u0441\u043e\u0431\u044b\u0442\u0438\u0435, \u0438 \u0432\u043e\u043f\u0440\u043e\u0441 \u043d\u0435 \u00ab\u0441\u043b\u0443\u0447\u0438\u0442\u0441\u044f \u043b\u0438\u00bb, \u0430 \u00ab\u0447\u0442\u043e \u0432 \u044d\u0442\u043e\u0442 \u043c\u043e\u043c\u0435\u043d\u0442 \u043f\u0440\u043e\u0438\u0437\u043e\u0439\u0434\u0451\u0442 \u0441 \u043f\u043e\u0434\u0430\u043c\u0438\u00bb.\u0412 \u043e\u0431\u043b\u0430\u043a\u0430\u0445, \u0433\u0434\u0435 \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0435 \u0438\u043d\u0441\u0442\u0430\u043d\u0441\u044b \u043f\u043e\u044f\u0432\u0438\u043b\u0438\u0441\u044c \u0440\u0430\u043d\u044c\u0448\u0435, \u043e\u0442\u0432\u0435\u0442 \u043d\u0430 \u044d\u0442\u043e\u0442 \u0432\u043e\u043f\u0440\u043e\u0441 \u0434\u0430\u0432\u043d\u043e \u043e\u0431\u043a\u0430\u0442\u0430\u043d: \u0438\u043d\u0441\u0442\u0430\u043d\u0441 \u0437\u0430\u0440\u0430\u043d\u0435\u0435 \u043f\u043e\u043b\u0443\u0447\u0430\u0435\u0442 \u0443\u0432\u0435\u0434\u043e\u043c\u043b\u0435\u043d\u0438\u0435 \u043e \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0438, \u0430 \u0432 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0435 \u0436\u0438\u0432\u0451\u0442 \u0434\u0435\u043c\u043e\u043d, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u044d\u0442\u043e \u0443\u0432\u0435\u0434\u043e\u043c\u043b\u0435\u043d\u0438\u0435 \u043b\u043e\u0432\u0438\u0442 \u0438 \u0443\u0441\u043f\u0435\u0432\u0430\u0435\u0442 \u0443\u0432\u0435\u0441\u0442\u0438 \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0443 \u0441 \u043d\u043e\u0434\u044b \u2014 \u0443 AWS \u044d\u0442\u043e aws-node-termination-handler.\u0412 Selectel MKS \u0442\u0430\u043a\u043e\u0433\u043e \u043c\u0435\u0445\u0430\u043d\u0438\u0437\u043c\u0430 \u043d\u0435\u0442 \u043d\u0438 \u0432 \u043a\u0430\u043a\u043e\u043c \u0432\u0438\u0434\u0435: \u043d\u0435\u0442 \u0443\u0432\u0435\u0434\u043e\u043c\u043b\u0435\u043d\u0438\u044f, \u043a\u043e\u0442\u043e\u0440\u043e\u0435 \u043f\u043e\u0434\u043e\u0431\u043d\u044b\u0439 \u0434\u0435\u043c\u043e\u043d \u043c\u043e\u0433 \u0431\u044b \u043f\u043e\u0439\u043c\u0430\u0442\u044c, \u0438 \u043d\u0435\u0442 \u0432\u043a\u043b\u044e\u0447\u0451\u043d\u043d\u043e\u0433\u043e graceful node shutdown \u0443 kubelet (shutdownGracePeriod: 0s). \u0422\u043e \u0435\u0441\u0442\u044c \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e kubelet \u043f\u0440\u0438 \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0438 \u043d\u0435 \u0434\u0435\u043b\u0430\u0435\u0442 \u0434\u043b\u044f \u043f\u043e\u0434\u043e\u0432 \u0432\u043e\u043e\u0431\u0449\u0435 \u043d\u0438\u0447\u0435\u0433\u043e \u2014 \u043d\u0438 \u0440\u0430\u0441\u0441\u044b\u043b\u043a\u0438 SIGTERM, \u043d\u0438 \u043e\u0436\u0438\u0434\u0430\u043d\u0438\u044f \u0437\u0430\u0432\u0435\u0440\u0448\u0435\u043d\u0438\u044f, \u043d\u0438 \u0441\u043e\u0431\u043b\u044e\u0434\u0435\u043d\u0438\u044f terminationGracePeriodSeconds, \u2014 \u0438 \u0432\u0441\u0451, \u0447\u0442\u043e \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u043d\u0430 \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u043e\u0439 \u043d\u043e\u0434\u0435, \u043f\u0440\u0438 \u043a\u0430\u0436\u0434\u043e\u043c \u0441\u0443\u0442\u043e\u0447\u043d\u043e\u043c \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0438 \u043f\u0440\u043e\u0441\u0442\u043e \u0443\u043c\u0438\u0440\u0430\u0435\u0442 \u0432\u043c\u0435\u0441\u0442\u0435 \u0441 \u043d\u0435\u0439.\u0414\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u0430\u0446\u0438\u044f \u043f\u0440\u043e\u0432\u0430\u0439\u0434\u0435\u0440\u0430 \u043c\u0435\u0445\u0430\u043d\u0438\u043a\u0443 \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u044f \u043d\u0435 \u043e\u043f\u0438\u0441\u044b\u0432\u0430\u0435\u0442, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 \u0432\u0441\u0451 \u043d\u0438\u0436\u0435 \u043f\u043e\u043b\u0443\u0447\u0435\u043d\u043e \u044d\u043a\u0441\u043f\u0435\u0440\u0438\u043c\u0435\u043d\u0442\u0430\u043b\u044c\u043d\u043e, \u043d\u0430 \u0436\u0438\u0432\u043e\u043c \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0435: \u0447\u0442\u043e \u0438\u043c\u0435\u043d\u043d\u043e \u043f\u0440\u043e\u0438\u0441\u0445\u043e\u0434\u0438\u0442 \u043f\u0440\u0438 \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0438, \u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0432\u0440\u0435\u043c\u0435\u043d\u0438 \u0440\u0435\u0430\u043b\u044c\u043d\u043e \u0435\u0441\u0442\u044c \u0443 \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u0439 \u0438 \u043a\u0430\u043a \u044d\u0442\u043e \u0432\u0440\u0435\u043c\u044f \u0441\u0435\u0431\u0435 \u0432\u044b\u0434\u0430\u0442\u044c.\u041e\u043a\u0440\u0443\u0436\u0435\u043d\u0438\u0435: dev-\u043a\u043b\u0430\u0441\u0442\u0435\u0440 Tuna \u0432 Selectel MKS, \u0440\u0435\u0433\u0438\u043e\u043d ru-7a, Kubernetes 1.35.3, Ubuntu 24.04.4, systemd 255, containerd 2.2.4. \u0414\u0430\u0442\u0430 \u043f\u0440\u043e\u0432\u0435\u0440\u043a\u0438 \u2014 \u0438\u044e\u043b\u044c 2026.\u041a\u043e\u0440\u043e\u0442\u043a\u043e\u0412\u043e\u043f\u0440\u043e\u0441\u041e\u0442\u0432\u0435\u0442\u0415\u0441\u0442\u044c \u043b\u0438 \u0443\u0432\u0435\u0434\u043e\u043c\u043b\u0435\u043d\u0438\u0435 \u043e \u043f\u0440\u0435\u0434\u0441\u0442\u043e\u044f\u0449\u0435\u043c \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0438?\u041d\u0435\u0442. \u041d\u0438 \u0432 metadata service, \u043d\u0438 \u0447\u0435\u0440\u0435\u0437 API\u041a\u0430\u043a \u0432\u044b\u043a\u043b\u044e\u0447\u0430\u044e\u0442 \u043d\u043e\u0434\u0443?\u0428\u0442\u0430\u0442\u043d\u044b\u0439 systemd-shutdown \u043f\u043e \u0441\u0438\u0433\u043d\u0430\u043b\u0443 \u043e\u0442 \u0433\u0438\u043f\u0435\u0440\u0432\u0438\u0437\u043e\u0440\u0430\u0420\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u043b\u0438 kubelet graceful node shutdown?\u0414\u0430, \u043d\u043e \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d (shutdownGracePeriod: 0s)\u0415\u0441\u0442\u044c \u043b\u0438 \u0434\u0435\u0434\u043b\u0430\u0439\u043d \u0441\u043e \u0441\u0442\u043e\u0440\u043e\u043d\u044b \u0433\u0438\u043f\u0435\u0440\u0432\u0438\u0437\u043e\u0440\u0430?\u041d\u0435 \u043e\u0431\u043d\u0430\u0440\u0443\u0436\u0435\u043d: 280 \u0441\u0435\u043a\u0443\u043d\u0434 \u0432\u044b\u0436\u0434\u0430\u043b\u0438 \u0431\u0435\u0437 \u0432\u043c\u0435\u0448\u0430\u0442\u0435\u043b\u044c\u0441\u0442\u0432\u0430\u0427\u0435\u043c \u043e\u0433\u0440\u0430\u043d\u0438\u0447\u0435\u043d\u043e \u043e\u043a\u043d\u043e?\u0422\u043e\u043b\u044c\u043a\u043e InhibitDelayMaxSec \u0432 logind \u2014 \u0432 \u043e\u0431\u0440\u0430\u0437\u0435 \u043d\u043e\u0434\u044b 30 \u0441\u041a\u0430\u043a \u0432\u043a\u043b\u044e\u0447\u0438\u0442\u044c?user_data \u0433\u0440\u0443\u043f\u043f\u044b \u043d\u043e\u0434 \u2014 \u0441\u043a\u0440\u0438\u043f\u0442 \u0432 \u043a\u043e\u043d\u0446\u0435 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u0430\u041a\u0430\u043a \u0431\u044b\u0441\u0442\u0440\u043e \u043d\u043e\u0434\u0430 \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0430\u0435\u0442\u0441\u044f?\u0421 \u0441\u0435\u0442\u0435\u0432\u044b\u043c \u0437\u0430\u0433\u0440\u0443\u0437\u043e\u0447\u043d\u044b\u043c \u0434\u0438\u0441\u043a\u043e\u043c \u2014 \u0434\u0435\u0441\u044f\u0442\u043a\u0438 \u0441\u0435\u043a\u0443\u043d\u0434 \u0438 \u0441\u043e \u0441\u0432\u043e\u0438\u043c \u0441\u043e\u0441\u0442\u043e\u044f\u043d\u0438\u0435\u043c, \u0441 \u043b\u043e\u043a\u0430\u043b\u044c\u043d\u044b\u043c \u2014 \u0434\u043e 10 \u043c\u0438\u043d\u0443\u0442 \u0438 \u0441 \u043d\u0443\u043b\u044f\u0418\u0442\u043e\u0433\u043e\u0432\u0430\u044f \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044f \u0434\u0430\u0451\u0442 \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u044f\u043c 120 \u0441\u0435\u043a\u0443\u043d\u0434 \u043d\u0430 \u0437\u0430\u0432\u0435\u0440\u0448\u0435\u043d\u0438\u0435 \u2014 \u0441\u0442\u043e\u043b\u044c\u043a\u043e \u0436\u0435, \u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0434\u0430\u0451\u0442 AWS Spot, \u0438 \u0432\u0447\u0435\u0442\u0432\u0435\u0440\u043e \u0431\u043e\u043b\u044c\u0448\u0435, \u0447\u0435\u043c GCP Spot VM \u0438 Azure Spot.\u0427\u0442\u043e \u043e\u0431\u0435\u0449\u0430\u0435\u0442 \u043f\u0440\u043e\u0432\u0430\u0439\u0434\u0435\u0440 \u2014 \u0438 \u043e \u0447\u0451\u043c \u0443\u043c\u0430\u043b\u0447\u0438\u0432\u0430\u0435\u0442\u0424\u0438\u0447\u0430 \u043d\u0435 \u043d\u043e\u0432\u0430\u044f: \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0435 \u043d\u043e\u0434\u044b \u0432 Managed Kubernetes \u043f\u043e\u044f\u0432\u0438\u043b\u0438\u0441\u044c \u0435\u0449\u0451 \u0432 \u0444\u0435\u0432\u0440\u0430\u043b\u0435 2025 \u0433\u043e\u0434\u0430, \u0438 Selectel \u0430\u043d\u043e\u043d\u0441\u0438\u0440\u043e\u0432\u0430\u043b \u0438\u0445 \u043e\u0442\u0434\u0435\u043b\u044c\u043d\u043e\u0439 \u0441\u0442\u0430\u0442\u044c\u0451\u0439 \u0432 \u0441\u0432\u043e\u0451\u043c \u0431\u043b\u043e\u0433\u0435 \u2014 \u043f\u0440\u043e \u044d\u043a\u043e\u043d\u043e\u043c\u0438\u044e \u0434\u043e 70% \u0438 \u043f\u0440\u043e \u0442\u043e, \u0447\u0442\u043e \u00ab\u043d\u043e\u0434\u0430 \u043e\u043f\u0435\u0440\u0430\u0442\u0438\u0432\u043d\u043e \u0432\u0435\u0440\u043d\u0451\u0442\u0441\u044f \u0432 \u043a\u043b\u0430\u0441\u0442\u0435\u0440, \u0430 \u0432\u043e\u0441\u0441\u0442\u0430\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0435 \u0437\u0430\u0439\u043c\u0451\u0442 \u043d\u0435 \u0431\u043e\u043b\u0435\u0435 \u043c\u0438\u043d\u0443\u0442\u044b\u00bb. \u041f\u0440\u043e \u043f\u043e\u0434\u044b, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0432 \u044d\u0442\u043e\u0442 \u043c\u043e\u043c\u0435\u043d\u0442 \u043d\u0430 \u043d\u043e\u0434\u0435 \u0440\u0430\u0431\u043e\u0442\u0430\u044e\u0442, \u0442\u0430\u043c \u043d\u0435 \u0441\u043a\u0430\u0437\u0430\u043d\u043e \u043d\u0438\u0447\u0435\u0433\u043e: \u043d\u0438 \u043f\u0440\u043e SIGTERM, \u043d\u0438 \u043f\u0440\u043e drain, \u043d\u0438 \u043f\u0440\u043e PDB, \u043d\u0438 \u043f\u0440\u043e \u043f\u043e\u0442\u0435\u0440\u044e \u0434\u0430\u043d\u043d\u044b\u0445. \u041a\u0430\u043a \u0440\u0430\u0437 \u044d\u0442\u0443 \u0434\u044b\u0440\u043a\u0443 \u043c\u044b \u0438 \u043f\u043e\u043b\u0435\u0437\u043b\u0438 \u0437\u0430\u043a\u0440\u044b\u0432\u0430\u0442\u044c.\u0418\u0437 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u0430\u0446\u0438\u0438 Selectel:\u043d\u043e\u0434\u0430 \u0436\u0438\u0432\u0451\u0442 \u043d\u0435 \u0431\u043e\u043b\u0435\u0435 24 \u0447\u0430\u0441\u043e\u0432, \u043f\u043e\u0441\u043b\u0435 \u043a\u0430\u0436\u0434\u043e\u0433\u043e \u0432\u043e\u0441\u0441\u0442\u0430\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u044f \u043e\u0442\u0441\u0447\u0451\u0442 \u0437\u0430\u043d\u043e\u0432\u043e;Selectel \u043c\u043e\u0436\u0435\u0442 \u043e\u0441\u0442\u0430\u043d\u043e\u0432\u0438\u0442\u044c \u043d\u043e\u0434\u0443 \u0432 \u043b\u044e\u0431\u043e\u0439 \u043c\u043e\u043c\u0435\u043d\u0442, \u0430\u043d\u0433\u043b\u043e\u044f\u0437\u044b\u0447\u043d\u0430\u044f \u0432\u0435\u0440\u0441\u0438\u044f \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u0430\u0446\u0438\u0438 \u043f\u0440\u044f\u043c\u043e \u043f\u0438\u0448\u0435\u0442 \u00abmay terminate nodes without notice\u00bb;\u0432\u043e\u0441\u0441\u0442\u0430\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0435 \u043d\u0430\u0447\u0438\u043d\u0430\u0435\u0442\u0441\u044f \u0441\u0440\u0430\u0437\u0443: \u0441 \u0441\u0435\u0442\u0435\u0432\u044b\u043c \u0437\u0430\u0433\u0440\u0443\u0437\u043e\u0447\u043d\u044b\u043c \u0434\u0438\u0441\u043a\u043e\u043c \u2014 \u043c\u0435\u043d\u044c\u0448\u0435 \u043c\u0438\u043d\u0443\u0442\u044b \u0438 \u0441 \u0441\u043e\u0445\u0440\u0430\u043d\u0435\u043d\u0438\u0435\u043c \u0441\u043e\u0441\u0442\u043e\u044f\u043d\u0438\u044f, \u0441 \u043b\u043e\u043a\u0430\u043b\u044c\u043d\u044b\u043c \u2014 \u0434\u043e 10 \u043c\u0438\u043d\u0443\u0442 \u0438 \u0441 \u043f\u043e\u0442\u0435\u0440\u0435\u0439 \u0432\u0441\u0435\u0445 \u0434\u0430\u043d\u043d\u044b\u0445;SLA \u043d\u0430 \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0435 \u0433\u0440\u0443\u043f\u043f\u044b \u043d\u0435 \u0440\u0430\u0441\u043f\u0440\u043e\u0441\u0442\u0440\u0430\u043d\u044f\u0435\u0442\u0441\u044f;\u0434\u043e\u0441\u0442\u0443\u043f\u043d\u043e \u0442\u043e\u043b\u044c\u043a\u043e \u0432 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0430\u0445 \u043d\u0430 \u043e\u0431\u043b\u0430\u0447\u043d\u044b\u0445 \u0441\u0435\u0440\u0432\u0435\u0440\u0430\u0445 (\u0421\u041f\u0431, \u041c\u043e\u0441\u043a\u0432\u0430, \u041d\u043e\u0432\u043e\u0441\u0438\u0431\u0438\u0440\u0441\u043a);\u0440\u0435\u0441\u0443\u0440\u0441\u044b \u0434\u0435\u0448\u0435\u0432\u043b\u0435 \u043f\u0440\u0438\u043c\u0435\u0440\u043d\u043e \u043d\u0430 70%.\u0418\u0437 24-\u0447\u0430\u0441\u043e\u0432\u043e\u0433\u043e \u043b\u0438\u043c\u0438\u0442\u0430 \u0438 \u0441\u043b\u0435\u0434\u0443\u0435\u0442 \u0442\u043e, \u0441 \u0447\u0435\u0433\u043e \u043c\u044b \u043d\u0430\u0447\u0430\u043b\u0438: \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0435 \u044d\u0442\u043e \u0435\u0436\u0435\u0434\u043d\u0435\u0432\u043d\u043e\u0435 \u0448\u0442\u0430\u0442\u043d\u043e\u0435 \u0441\u043e\u0431\u044b\u0442\u0438\u0435, \u0430 \u043d\u0435 \u0440\u0435\u0434\u043a\u0430\u044f \u0430\u0432\u0430\u0440\u0438\u044f. \u0417\u043d\u0430\u0447\u0438\u0442 \u0438 \u043d\u0430\u0441\u0442\u0440\u0430\u0438\u0432\u0430\u0442\u044c \u043f\u043e\u0432\u0435\u0434\u0435\u043d\u0438\u0435 \u043f\u0440\u0438 \u043d\u0451\u043c \u043d\u0443\u0436\u043d\u043e \u043a\u0430\u043a \u043e\u0431\u044b\u0447\u043d\u0443\u044e \u0440\u0430\u0431\u043e\u0447\u0443\u044e \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0443, \u0430 \u043d\u0435 \u043a\u0430\u043a \u0430\u0432\u0430\u0440\u0438\u0439\u043d\u044b\u0439 \u0441\u0446\u0435\u043d\u0430\u0440\u0438\u0439 \u00ab\u043d\u0430 \u0432\u0441\u044f\u043a\u0438\u0439 \u0441\u043b\u0443\u0447\u0430\u0439\u00bb.\u0427\u0435\u0433\u043e \u043d\u0435\u0442: \u0438\u0449\u0435\u043c preemption notice \u0438 \u043d\u0435 \u043d\u0430\u0445\u043e\u0434\u0438\u043c\u041f\u0435\u0440\u0432\u043e\u0435, \u043a\u0443\u0434\u0430 \u043c\u044b \u043f\u043e\u043b\u0435\u0437\u043b\u0438 \u043f\u043e \u0430\u043d\u0430\u043b\u043e\u0433\u0438\u0438 \u0441 AWS\/GCP\/Azure, \u2014 metadata service. \u0422\u0430\u043c \u0443 \u0433\u0438\u043f\u0435\u0440\u0441\u043a\u0435\u0439\u043b\u0435\u0440\u043e\u0432 \u043b\u0435\u0436\u0438\u0442 \u043f\u0440\u0438\u0437\u043d\u0430\u043a \u043f\u0440\u0435\u0434\u0441\u0442\u043e\u044f\u0449\u0435\u0433\u043e \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u044f, \u0438 \u0432\u0441\u044f \u0438\u043d\u0434\u0443\u0441\u0442\u0440\u0438\u0430\u043b\u044c\u043d\u0430\u044f \u043f\u0440\u0430\u043a\u0442\u0438\u043a\u0430 \u043f\u043e\u0441\u0442\u0440\u043e\u0435\u043d\u0430 \u0432\u043e\u043a\u0440\u0443\u0433 \u043d\u0435\u0433\u043e: \u0434\u0435\u043c\u043e\u043d \u043e\u043f\u0440\u0430\u0448\u0438\u0432\u0430\u0435\u0442 \u044d\u043d\u0434\u043f\u043e\u0438\u043d\u0442, \u0432\u0438\u0434\u0438\u0442 \u0443\u0432\u0435\u0434\u043e\u043c\u043b\u0435\u043d\u0438\u0435, \u0441\u0430\u043c \u0434\u0435\u043b\u0430\u0435\u0442 cordon \u0438 drain \u2014 \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0430 \u0443\u0445\u043e\u0434\u0438\u0442 \u0441 \u043d\u043e\u0434\u044b \u0434\u043e \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u044f. \u0417\u0430\u043f\u0443\u0441\u043a \u043f\u043e\u0434\u0430 \u0441 hostNetwork \u043d\u0430 \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u043e\u0439 \u043d\u043e\u0434\u0435:\/latest\/meta-data\/spot\/instance-action    \u2192 404\/latest\/meta-data\/spot\/termination-time   \u2192 404\/latest\/meta-data\/instance-action         \u2192 none   (\u0441\u0442\u0430\u0442\u0438\u0447\u0435\u0441\u043a\u0430\u044f \u0437\u0430\u0433\u043b\u0443\u0448\u043a\u0430 Nova)\/openstack\/latest\/meta_data.json          \u2192 \u043d\u0438 \u043e\u0434\u043d\u043e\u0433\u043e \u043f\u043e\u043b\u044f \u043f\u0440\u043e preemptibleMetadata service \u2014 \u0441\u0442\u0430\u043d\u0434\u0430\u0440\u0442\u043d\u044b\u0439 OpenStack \u0431\u0435\u0437 \u043a\u0430\u043a\u0438\u0445-\u043b\u0438\u0431\u043e \u0440\u0430\u0441\u0448\u0438\u0440\u0435\u043d\u0438\u0439 \u043f\u043e\u0434 \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0435 \u0438\u043d\u0441\u0442\u0430\u043d\u0441\u044b. \u0412 \u0430\u043f\u0441\u0442\u0440\u0438\u043c\u043d\u043e\u0439 Nova \u043c\u0435\u0445\u0430\u043d\u0438\u0437\u043c\u0430 spot-\u0443\u0432\u0435\u0434\u043e\u043c\u043b\u0435\u043d\u0438\u0439 \u043d\u0435\u0442 \u0432\u043e\u043e\u0431\u0449\u0435, \u0438 Selectel \u0435\u0433\u043e \u043d\u0435 \u0434\u043e\u0431\u0430\u0432\u043b\u044f\u043b.\u041e\u0442\u0441\u044e\u0434\u0430 \u0432\u044b\u0432\u043e\u0434: \u0432\u0435\u0448\u0430\u0442\u044c node-termination-handler \u043f\u043e \u0430\u043d\u0430\u043b\u043e\u0433\u0438\u0438 \u0441 AWS \u043d\u0435 \u043d\u0430 \u0447\u0442\u043e \u2014 \u0438\u0441\u0442\u043e\u0447\u043d\u0438\u043a\u0430 \u0441\u043e\u0431\u044b\u0442\u0438\u044f \u043d\u0435 \u0441\u0443\u0449\u0435\u0441\u0442\u0432\u0443\u0435\u0442. \u041f\u043b\u0430\u043d\u044b \u0441\u0434\u0435\u043b\u0430\u0442\u044c \u0441\u0432\u043e\u0439 \u0445\u0435\u043d\u0434\u043b\u0435\u0440 \u0443 Selectel \u0435\u0441\u0442\u044c \u2014 \u043e\u0431 \u044d\u0442\u043e\u043c \u043e\u0442\u0434\u0435\u043b\u044c\u043d\u0430\u044f \u0437\u0430\u043c\u0435\u0442\u043a\u0430 \u0432 \u043a\u043e\u043d\u0446\u0435, \u2014 \u043d\u043e \u043f\u043e\u043a\u0430 \u0435\u0434\u0438\u043d\u0441\u0442\u0432\u0435\u043d\u043d\u044b\u0439 \u043f\u0443\u0442\u044c \u043a \u043c\u044f\u0433\u043a\u043e\u043c\u0443 \u0437\u0430\u0432\u0435\u0440\u0448\u0435\u043d\u0438\u044e \u044d\u0442\u043e \u0443\u0441\u043f\u0435\u0442\u044c \u0441\u0440\u0435\u0430\u0433\u0438\u0440\u043e\u0432\u0430\u0442\u044c \u043d\u0430 \u0441\u0430\u043c\u043e \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435.\u041f\u043e\u0431\u043e\u0447\u043d\u043e: MKS \u043d\u0435 \u043f\u043e\u043c\u0435\u0447\u0430\u0435\u0442 \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u0435\u043c\u044b\u0435 \u043d\u043e\u0434\u044b \u0441\u043e\u0431\u0441\u0442\u0432\u0435\u043d\u043d\u044b\u043c \u043b\u0435\u0439\u0431\u043b\u043e\u043c, \u0443 \u043d\u0438\u0445 mks.operational\/node-type: standard. \u041e\u0442\u043b\u0438\u0447\u0430\u0442\u044c \u0438\u0445 \u043c\u043e\u0436\u043d\u043e \u0442\u043e\u043b\u044c\u043a\u043e \u043f\u043e \u0441\u0432\u043e\u0438\u043c labels \u0438 taints, \u0437\u0430\u0434\u0430\u043d\u043d\u044b\u043c \u043f\u0440\u0438 \u0441\u043e\u0437\u0434\u0430\u043d\u0438\u0438 \u0433\u0440\u0443\u043f\u043f\u044b.\u0427\u0442\u043e \u0435\u0441\u0442\u044c: \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0435 \u2014 \u044d\u0442\u043e OpenStack shelve \u0438 \u0448\u0442\u0430\u0442\u043d\u044b\u0439 systemd-shutdown\u0412\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0435 \u0440\u0435\u0430\u043b\u0438\u0437\u043e\u0432\u0430\u043d\u043e \u043a\u0430\u043a OpenStack shelve (\u0432 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u0430\u0446\u0438\u0438 \u0432\u043e\u0441\u0441\u0442\u0430\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0435 \u043e\u043f\u0438\u0441\u0430\u043d\u043e \u043a\u043e\u043c\u0430\u043d\u0434\u043e\u0439 openstack server unshelve). \u0421 \u0442\u043e\u0447\u043a\u0438 \u0437\u0440\u0435\u043d\u0438\u044f \u0433\u043e\u0441\u0442\u0435\u0432\u043e\u0439 \u041e\u0421 \u044d\u0442\u043e \u0432\u044b\u0433\u043b\u044f\u0434\u0438\u0442 \u0442\u0430\u043a:systemd-logind[711]: System is powering down (hypervisor initiated shutdown).systemd[1]: Stopping kubelet.service &#8212; Kubernetes Kubelet&#8230;systemd[1]: Reached target shutdown.target &#8212; System Shutdown.systemd-shutdown[1]: Sending SIGTERM to remaining processes&#8230;\u042d\u0442\u043e \u043f\u043e\u043b\u043d\u043e\u0446\u0435\u043d\u043d\u0430\u044f \u043f\u043e\u0441\u043b\u0435\u0434\u043e\u0432\u0430\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u044c \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u044f, \u0430 \u043d\u0435 \u0432\u044b\u0434\u0451\u0440\u0433\u0438\u0432\u0430\u043d\u0438\u0435 \u043f\u0438\u0442\u0430\u043d\u0438\u044f. \u0417\u043d\u0430\u0447\u0438\u0442 \u0443 kubelet \u0435\u0441\u0442\u044c \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e\u0441\u0442\u044c \u0432\u043c\u0435\u0448\u0430\u0442\u044c\u0441\u044f \u2014 \u0447\u0435\u0440\u0435\u0437 \u043c\u0435\u0445\u0430\u043d\u0438\u0437\u043c Graceful Node Shutdown, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442 systemd inhibitor locks.\u041c\u0435\u0445\u0430\u043d\u0438\u043a\u0430 \u0442\u0443\u0442 \u043f\u0440\u043e\u0441\u0442\u0430\u044f: \u043f\u0440\u043e\u0446\u0435\u0441\u0441 \u0431\u0435\u0440\u0451\u0442 \u0443 logind delay-\u043b\u043e\u043a \u043d\u0430 shutdown, \u0438 logind \u043f\u0435\u0440\u0435\u0434 \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435\u043c \u0440\u0430\u0441\u0441\u044b\u043b\u0430\u0435\u0442 \u0434\u0435\u0440\u0436\u0430\u0442\u0435\u043b\u044f\u043c \u043b\u043e\u043a\u043e\u0432 PrepareForShutdown \u0438 \u0436\u0434\u0451\u0442, \u043f\u043e\u043a\u0430 \u0442\u0435 \u043e\u0442\u043f\u0443\u0441\u0442\u044f\u0442 \u043b\u043e\u043a, \u2014 \u043d\u043e \u043d\u0435 \u0434\u043e\u043b\u044c\u0448\u0435 InhibitDelayMaxSec. Kubelet \u0434\u0435\u0440\u0436\u0438\u0442 \u0442\u0430\u043a\u043e\u0439 \u043b\u043e\u043a \u0440\u043e\u0432\u043d\u043e \u0434\u043b\u044f \u0442\u043e\u0433\u043e, \u0447\u0442\u043e\u0431\u044b \u0443\u0441\u043f\u0435\u0442\u044c \u0440\u0430\u0437\u043e\u0441\u043b\u0430\u0442\u044c \u043f\u043e\u0434\u0430\u043c SIGTERM \u0438 \u0434\u043e\u0436\u0434\u0430\u0442\u044c\u0441\u044f \u0438\u0445 \u0437\u0430\u0432\u0435\u0440\u0448\u0435\u043d\u0438\u044f. \u041e\u0442\u0441\u044e\u0434\u0430 \u0438 \u0432\u0441\u044f \u0434\u0430\u043b\u044c\u043d\u0435\u0439\u0448\u0430\u044f \u0430\u0440\u0438\u0444\u043c\u0435\u0442\u0438\u043a\u0430 \u044d\u0442\u043e\u0433\u043e \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u0430: \u043e\u043a\u043d\u043e \u043d\u0430 \u0437\u0430\u0432\u0435\u0440\u0448\u0435\u043d\u0438\u0435 \u043f\u043e\u0434\u043e\u0432 \u043d\u0435 \u043c\u043e\u0436\u0435\u0442 \u0431\u044b\u0442\u044c \u0431\u043e\u043b\u044c\u0448\u0435, \u0447\u0435\u043c logind \u0441\u043e\u0433\u043b\u0430\u0441\u0435\u043d \u0436\u0434\u0430\u0442\u044c.\u041f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e \u0432 MKS \u043e\u043d \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d:$ kubectl get &#8212;raw &#171;\/api\/v1\/nodes\/&lt;node&gt;\/proxy\/configz&#187; | jq .kubeletconfig{ &#171;shutdownGracePeriod&#187;: &#171;0s&#187;, &#171;shutdownGracePeriodCriticalPods&#187;: &#171;0s&#187; }\u041f\u043e\u0442\u043e\u043b\u043e\u043a \u0432 30 \u0441\u0435\u043a\u0443\u043d\u0434, \u043e \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0441\u043f\u043e\u0442\u044b\u043a\u0430\u0435\u0442\u0441\u044f kubeletKubelet \u043f\u0440\u0438 \u0441\u0442\u0430\u0440\u0442\u0435 \u043f\u044b\u0442\u0430\u0435\u0442\u0441\u044f \u043f\u043e\u0434\u043d\u044f\u0442\u044c InhibitDelayMaxSec \u0432 logind \u0434\u043e \u0437\u0430\u043f\u0440\u043e\u0448\u0435\u043d\u043d\u043e\u0433\u043e shutdownGracePeriod: \u043f\u0438\u0448\u0435\u0442 \/etc\/systemd\/logind.conf.d\/99-kubelet.conf \u0438 \u0448\u043b\u0451\u0442 logind SIGHUP. \u0415\u0441\u043b\u0438 \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u0435 \u043d\u0435 \u043f\u043e\u0434\u043d\u044f\u043b\u043e\u0441\u044c, \u043c\u0435\u043d\u0435\u0434\u0436\u0435\u0440 \u043d\u0435 \u0441\u0442\u0430\u0440\u0442\u0443\u0435\u0442:E0729 16:32:38 kubelet.go:1769] &#171;Failed to start node shutdown manager&#187;  err=&#187;node shutdown manager was timed out after 5 attempts waiting for logind  InhibitDelayMaxSec to update to 45s (ShutdownGracePeriod), current value is 30s&#187;\u041f\u0440\u0438\u0447\u0438\u043d\u0430 \u2014 \u0432 \u043e\u0431\u0440\u0430\u0437\u0435 Ubuntu \u043b\u0435\u0436\u0438\u0442 \u0447\u0443\u0436\u043e\u0439 drop-in:\/usr\/lib\/systemd\/logind.conf.d\/unattended-upgrades-logind-maxdelay.conf  InhibitDelayMaxSec=30Drop-in\u2019\u044b logind \u0441\u043e\u0431\u0438\u0440\u0430\u044e\u0442\u0441\u044f \u0438\u0437 \u0432\u0441\u0435\u0445 \u043a\u0430\u0442\u0430\u043b\u043e\u0433\u043e\u0432 \u0438 \u0441\u043e\u0440\u0442\u0438\u0440\u0443\u044e\u0442\u0441\u044f \u043f\u043e \u0438\u043c\u0435\u043d\u0438 \u0444\u0430\u0439\u043b\u0430 \u0433\u043b\u043e\u0431\u0430\u043b\u044c\u043d\u043e, \u0430 unattended-upgrades-\u2026 \u0438\u0434\u0451\u0442 \u043b\u0435\u043a\u0441\u0438\u043a\u043e\u0433\u0440\u0430\u0444\u0438\u0447\u0435\u0441\u043a\u0438 \u043f\u043e\u0441\u043b\u0435 99-kubelet.conf \u0438 \u043f\u0435\u0440\u0435\u0431\u0438\u0432\u0430\u0435\u0442 \u0435\u0433\u043e. \u041f\u0440\u0438\u043e\u0440\u0438\u0442\u0435\u0442 \/etc \u043d\u0430\u0434 \/usr \u0437\u0434\u0435\u0441\u044c \u043d\u0435 \u0441\u043f\u0430\u0441\u0430\u0435\u0442 \u2014 \u043e\u043d \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u0442\u043e\u043b\u044c\u043a\u043e \u043f\u0440\u0438 \u0441\u043e\u0432\u043f\u0430\u0434\u0435\u043d\u0438\u0438 \u0438\u043c\u0451\u043d \u0444\u0430\u0439\u043b\u043e\u0432.\u041c\u0435\u0445\u0430\u043d\u0438\u0437\u043c \u0441\u0430\u043c\u043e\u0433\u043e kubelet \u043f\u0440\u0438 \u044d\u0442\u043e\u043c \u0438\u0441\u043f\u0440\u0430\u0432\u0435\u043d: \u0432 \u0436\u0443\u0440\u043d\u0430\u043b\u0435 \u0432\u0438\u0434\u043d\u043e, \u0447\u0442\u043e logind \u043d\u0430 \u0435\u0433\u043e SIGHUP \u043e\u0442\u0432\u0435\u0447\u0430\u0435\u0442 Config file reloaded. \u041c\u044b \u043f\u0440\u043e\u0432\u0435\u0440\u0438\u043b\u0438 \u044d\u0442\u043e \u0438 \u043d\u0430\u043f\u0440\u044f\u043c\u0443\u044e \u2014 \u043f\u0440\u0430\u0432\u043a\u0430 \u0441\u0432\u043e\u0435\u0433\u043e drop-in\u2019\u0430 \u0441 \u043f\u043e\u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0438\u043c systemctl reload systemd-logind \u043c\u0435\u043d\u044f\u0435\u0442 InhibitDelayMaxUSec \u0431\u0435\u0437 \u043f\u0435\u0440\u0435\u0437\u0430\u043f\u0443\u0441\u043a\u0430 \u0441\u0435\u0440\u0432\u0438\u0441\u0430:$ busctl get-property org.freedesktop.login1 \/org\/freedesktop\/login1 \\    org.freedesktop.login1.Manager InhibitDelayMaxUSect 180000000# \u043f\u0440\u0430\u0432\u0438\u043c drop-in \u043d\u0430 200 \u0438 \u0434\u0435\u043b\u0430\u0435\u043c reloadt 200000000\u0422\u043e \u0435\u0441\u0442\u044c kubelet \u043f\u0435\u0440\u0435\u0447\u0438\u0442\u0430\u0442\u044c \u043a\u043e\u043d\u0444\u0438\u0433 \u0437\u0430\u0441\u0442\u0430\u0432\u043b\u044f\u0435\u0442, \u043d\u043e \u0441\u0432\u043e\u0435\u0433\u043e \u0434\u043e\u0431\u0438\u0442\u044c\u0441\u044f \u043d\u0435 \u043c\u043e\u0436\u0435\u0442: \u043f\u043e\u0441\u043b\u0435 reload \u043f\u043e\u0431\u0435\u0436\u0434\u0430\u0435\u0442 \u0432\u0441\u0451 \u0442\u043e\u0442 \u0436\u0435 \u0447\u0443\u0436\u043e\u0439 drop-in.\u041e\u0442\u0441\u044e\u0434\u0430 \u0434\u0432\u0430 \u0441\u043b\u0435\u0434\u0441\u0442\u0432\u0438\u044f:\u0411\u0435\u0437 \u0432\u043c\u0435\u0448\u0430\u0442\u0435\u043b\u044c\u0441\u0442\u0432\u0430 \u043c\u0430\u043a\u0441\u0438\u043c\u0443\u043c, \u0447\u0442\u043e \u043c\u043e\u0436\u043d\u043e \u0437\u0430\u043f\u0440\u043e\u0441\u0438\u0442\u044c, \u2014 shutdownGracePeriod: 30s.\u0427\u0442\u043e\u0431\u044b \u043f\u043e\u0434\u043d\u044f\u0442\u044c \u043f\u043e\u0442\u043e\u043b\u043e\u043a, \u043d\u0443\u0436\u0435\u043d \u0441\u0432\u043e\u0439 drop-in \u0441 \u0438\u043c\u0435\u043d\u0435\u043c, \u0441\u043e\u0440\u0442\u0438\u0440\u0443\u044e\u0449\u0438\u043c\u0441\u044f \u043f\u043e\u0441\u043b\u0435 \u043f\u0430\u043a\u0435\u0442\u043d\u043e\u0433\u043e \u2014 \u043c\u044b \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u043c zz-kubelet-graceful.conf.\u0412\u0430\u0440\u0438\u0430\u043d\u0442 \u00ab\u043f\u043e\u043b\u043e\u0436\u0438\u0442\u044c \u0432 \/etc \u0444\u0430\u0439\u043b-\u0434\u0432\u043e\u0439\u043d\u0438\u043a \u0441 \u0442\u0435\u043c \u0436\u0435 \u0438\u043c\u0435\u043d\u0435\u043c\u00bb \u0442\u043e\u0436\u0435 \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442, \u043d\u043e \u0437\u0430\u0432\u044f\u0437\u044b\u0432\u0430\u0435\u0442\u0441\u044f \u043d\u0430 \u0438\u043c\u044f \u043f\u0430\u043a\u0435\u0442\u043d\u043e\u0433\u043e \u0444\u0430\u0439\u043b\u0430, \u043a\u043e\u0442\u043e\u0440\u043e\u0435 \u043c\u043e\u0436\u0435\u0442 \u0438\u0437\u043c\u0435\u043d\u0438\u0442\u044c\u0441\u044f \u043f\u0440\u0438 \u043e\u0431\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0438.\u0417\u0430\u043c\u0435\u0440\u044b: \u0447\u0435\u0442\u044b\u0440\u0435 \u043f\u0440\u043e\u0433\u043e\u043d\u0430 \u0441 \u0440\u0435\u0430\u043b\u044c\u043d\u044b\u043c shelve\u0412\u0441\u0435 \u043f\u0440\u043e\u0433\u043e\u043d\u044b \u0434\u0435\u043b\u0430\u043b\u0438 \u043d\u0430 \u043e\u0434\u043d\u043e\u0439 \u043d\u043e\u0434\u0435, \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u0435 \u0438\u043c\u0438\u0442\u0438\u0440\u043e\u0432\u0430\u043b\u0438 \u043a\u043e\u043c\u0430\u043d\u0434\u043e\u0439 openstack server shelve &lt;id&gt; \u2014 \u0442\u043e \u0435\u0441\u0442\u044c \u0440\u043e\u0432\u043d\u043e \u0442\u0435\u043c \u0436\u0435 \u043c\u0435\u0445\u0430\u043d\u0438\u0437\u043c\u043e\u043c, \u043a\u043e\u0442\u043e\u0440\u044b\u043c \u043d\u043e\u0434\u0443 \u0432\u044b\u0442\u0435\u0441\u043d\u044f\u0435\u0442 Selectel.\u041f\u0440\u043e\u0433\u043e\u043d 1: \u0442\u043e\u043b\u044c\u043a\u043e DaemonSet\u2019\u044b, \u043e\u043a\u043d\u043e 30 \u0441 \u2014 \u0433\u0430\u0441\u043d\u0435\u0442 \u043c\u0433\u043d\u043e\u0432\u0435\u043d\u043d\u043e\u041d\u0430 \u043d\u043e\u0434\u0435 \u043d\u0435\u0442 \u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u0435\u043b\u044c\u0441\u043a\u043e\u0439 \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0438, \u0442\u043e\u043b\u044c\u043a\u043e calico-node, kube-proxy, csi-cinder-nodeplugin, node-exporter, vector.16:55:30 systemd-logind: System is powering down (hypervisor initiated shutdown)16:55:30 systemd[1]: Stopping kubelet.service16:55:30 systemd[1]: Reached target shutdown.target\u0417\u0430\u0434\u0435\u0440\u0436\u043a\u0438 \u043d\u0435\u0442 \u0432\u043e\u043e\u0431\u0449\u0435. \u042d\u0442\u043e \u043d\u0435 \u043f\u043e\u043b\u043e\u043c\u043a\u0430: \u0441\u0438\u0441\u0442\u0435\u043c\u043d\u044b\u0435 \u043f\u043e\u0434\u044b \u0437\u0430\u0432\u0435\u0440\u0448\u0430\u044e\u0442\u0441\u044f \u043c\u0433\u043d\u043e\u0432\u0435\u043d\u043d\u043e, kubelet \u043e\u0442\u043f\u0443\u0441\u043a\u0430\u0435\u0442 inhibitor lock \u0434\u043e\u0441\u0440\u043e\u0447\u043d\u043e, \u0438 logind \u0441\u0440\u0430\u0437\u0443 \u0433\u0430\u0441\u0438\u0442 \u0441\u0438\u0441\u0442\u0435\u043c\u0443. \u041e\u043a\u043d\u043e \u2014 \u044d\u0442\u043e \u043b\u0438\u043c\u0438\u0442, \u0430 \u043d\u0435 \u0444\u0438\u043a\u0441\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u0430\u044f \u043f\u0430\u0443\u0437\u0430.\u041f\u0440\u043e\u0433\u043e\u043d 2: \u043a\u0430\u043d\u0430\u0440\u0435\u0439\u043a\u0430 \u043f\u0440\u043e\u0442\u0438\u0432 SIGTERM, \u043e\u043a\u043d\u043e 30 \u0441 \u2014 \u043f\u043e\u0434\u0430\u043c \u0434\u043e\u0441\u0442\u0430\u0451\u0442\u0441\u044f 20 \u0441\u0435\u043a\u0443\u043d\u0434\u041f\u043e\u0434, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u043b\u043e\u0432\u0438\u0442 SIGTERM \u0438 \u043f\u043e\u0441\u043b\u0435 \u044d\u0442\u043e\u0433\u043e \u0435\u0449\u0451 \u0434\u0432\u0435 \u043c\u0438\u043d\u0443\u0442\u044b \u043f\u0438\u0448\u0435\u0442 \u043e\u0442\u0441\u0447\u0451\u0442 \u0432 \u043b\u043e\u0433 \u043d\u0430 hostPath (\u0447\u0442\u043e\u0431\u044b \u0444\u0430\u0439\u043b \u043f\u0435\u0440\u0435\u0436\u0438\u043b \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435 \u0438 \u0443\u0434\u0430\u043b\u0435\u043d\u0438\u0435 \u043f\u043e\u0434\u0430):17:32:43 alive17:32:43 *** SIGTERM RECEIVED ***17:32:43 term+0s   \u202617:33:02 term+19s          \u2190 \u043f\u043e\u0441\u043b\u0435\u0434\u043d\u044f\u044f \u0437\u0430\u043f\u0438\u0441\u044c17:33:03 systemd-logind: System is powering down (hypervisor initiated shutdown)\u041f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u0435 \u043f\u043e\u043b\u0443\u0447\u0438\u043b\u043e SIGTERM \u0437\u0430 20 \u0441\u0435\u043a\u0443\u043d\u0434 \u0434\u043e \u043d\u0430\u0447\u0430\u043b\u0430 \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u044f. \u0420\u043e\u0432\u043d\u043e shutdownGracePeriodByPodPriority \u0434\u043b\u044f Priority 0 \u2014 \u0442\u043e \u0435\u0441\u0442\u044c 30s \u043e\u0431\u0449\u0438\u0445 \u043c\u0438\u043d\u0443\u0441 10s, \u0437\u0430\u0440\u0435\u0437\u0435\u0440\u0432\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u044b\u0445 \u043f\u043e\u0434 critical-\u043f\u043e\u0434\u044b.\u0417\u0434\u0435\u0441\u044c \u0436\u0435 \u0432\u0438\u0434\u043d\u043e, \u043a\u0430\u043a logind \u043d\u0430 \u0441\u0430\u043c\u043e\u043c \u0434\u0435\u043b\u0435 \u043e\u0431\u0440\u0430\u0431\u0430\u0442\u044b\u0432\u0430\u0435\u0442 delay-\u043b\u043e\u043a\u0438: \u0441\u043d\u0430\u0447\u0430\u043b\u0430 \u0440\u0430\u0441\u0441\u044b\u043b\u0430\u0435\u0442 PrepareForShutdown, \u0436\u0434\u0451\u0442 \u0434\u0435\u0440\u0436\u0430\u0442\u0435\u043b\u0435\u0439, \u0438 \u0442\u043e\u043b\u044c\u043a\u043e \u043f\u043e\u0442\u043e\u043c \u043f\u0438\u0448\u0435\u0442 powering down. \u0421\u0442\u0440\u043e\u043a\u0430 \u043f\u0440\u043e \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435 \u043f\u043e\u044f\u0432\u043b\u044f\u0435\u0442\u0441\u044f \u0432 \u043a\u043e\u043d\u0446\u0435 \u043e\u0436\u0438\u0434\u0430\u043d\u0438\u044f, \u0430 \u043d\u0435 \u0432 \u043d\u0430\u0447\u0430\u043b\u0435.\u041f\u0440\u043e\u0433\u043e\u043d 3: \u043e\u043a\u043d\u043e 300 \u0441 \u2014 \u0434\u0435\u0434\u043b\u0430\u0439\u043d\u0430 \u0441\u043e \u0441\u0442\u043e\u0440\u043e\u043d\u044b \u0433\u0438\u043f\u0435\u0440\u0432\u0438\u0437\u043e\u0440\u0430 \u043d\u0435\u0442\u041f\u043e\u0442\u043e\u043b\u043e\u043a logind \u043f\u043e\u0434\u043d\u044f\u0442 \u0434\u043e 300 \u0441, shutdownGracePeriod: 300s \/ shutdownGracePeriodCriticalPods: 20s (\u0442\u043e \u0435\u0441\u0442\u044c 280 \u0441 \u043e\u0431\u044b\u0447\u043d\u044b\u043c \u043f\u043e\u0434\u0430\u043c). \u041a\u0430\u043d\u0430\u0440\u0435\u0439\u043a\u0430 \u0441 terminationGracePeriodSeconds: 600.18:16:19 *** SIGTERM RECEIVED ***   \u202618:20:59 term+279s        \u2190 280 \u043e\u0442\u0441\u0447\u0451\u0442\u043e\u0432, \u0440\u043e\u0432\u043d\u043e \u043e\u043a\u043d\u043e \u0444\u0430\u0437\u044b\u0414\u0432\u0430 \u0432\u044b\u0432\u043e\u0434\u0430:Nova \u043d\u0435 \u0432\u043c\u0435\u0448\u0438\u0432\u0430\u0435\u0442\u0441\u044f. \u041a\u0430\u043d\u0430\u0440\u0435\u0439\u043a\u0430 \u0432\u044b\u0440\u0430\u0431\u043e\u0442\u0430\u043b\u0430 \u0432\u0441\u0451 \u043e\u043a\u043d\u043e \u0446\u0435\u043b\u0438\u043a\u043e\u043c \u0438 \u0431\u044b\u043b\u0430 \u0443\u0431\u0438\u0442\u0430 \u043d\u0435 \u0433\u0438\u043f\u0435\u0440\u0432\u0438\u0437\u043e\u0440\u043e\u043c, \u0430 \u0441\u0430\u043c\u0438\u043c kubelet \u043f\u043e \u0438\u0441\u0442\u0435\u0447\u0435\u043d\u0438\u0438 \u0444\u0430\u0437\u044b. \u0414\u0435\u0434\u043b\u0430\u0439\u043d\u0430 \u0441\u043e \u0441\u0442\u043e\u0440\u043e\u043d\u044b \u0433\u0438\u043f\u0435\u0440\u0432\u0438\u0437\u043e\u0440\u0430 \u043e\u0431\u043d\u0430\u0440\u0443\u0436\u0438\u0442\u044c \u043d\u0435 \u0443\u0434\u0430\u043b\u043e\u0441\u044c \u2014 \u043f\u043e \u043a\u0440\u0430\u0439\u043d\u0435\u0439 \u043c\u0435\u0440\u0435, \u043e\u043d \u0431\u043e\u043b\u044c\u0448\u0435 &#8230;<\/p>\n","protected":false},"author":1,"featured_media":0,"comment_status":"closed","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[],"tags":[],"class_list":["post-489145","post","type-post","status-publish","format-standard","hentry"],"_links":{"self":[{"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/posts\/489145","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=%2Fwp%2Fv2%2Fcomments&post=489145"}],"version-history":[{"count":0,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/posts\/489145\/revisions"}],"wp:attachment":[{"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=%2Fwp%2Fv2%2Fmedia&parent=489145"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=%2Fwp%2Fv2%2Fcategories&post=489145"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=%2Fwp%2Fv2%2Ftags&post=489145"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}