{"id":405485,"date":"2024-06-29T18:21:08","date_gmt":"2024-06-29T18:21:08","guid":{"rendered":"http:\/\/savepearlharbor.com\/?p=405485"},"modified":"-0001-11-30T00:00:00","modified_gmt":"2024-06-29T18:21:08","slug":"","status":"publish","type":"post","link":"https:\/\/savepearlharbor.com\/?p=405485","title":{"rendered":"<span>\u041a\u0430\u043a \u043c\u044b \u0421\u0425\u0414 QSAN \u0442\u0435\u0441\u0442\u0438\u0440\u043e\u0432\u0430\u043b\u0438. \u0427\u0443\u0434\u0435\u0441 \u043d\u0435 \u0431\u044b\u0432\u0430\u0435\u0442, \u043d\u043e \u0438\u043d\u043e\u0433\u0434\u0430 \u0442\u0430\u043a \u0445\u043e\u0447\u0435\u0442\u0441\u044f\u2026<\/span>"},"content":{"rendered":"<div><!--[--><!--]--><\/div>\n<div id=\"post-content-body\">\n<div>\n<div class=\"article-formatted-body article-formatted-body article-formatted-body_version-2\">\n<div xmlns=\"http:\/\/www.w3.org\/1999\/xhtml\">\n<figure class=\"\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/habrastorage.org\/r\/w780q1\/getpro\/habr\/upload_files\/c3d\/38e\/7bd\/c3d38e7bde2984f439e495f944d4f05a.jpg\" width=\"600\" height=\"340\" data-src=\"https:\/\/habrastorage.org\/getpro\/habr\/upload_files\/c3d\/38e\/7bd\/c3d38e7bde2984f439e495f944d4f05a.jpg\" data-blurred=\"true\"\/><figcaption><\/figcaption><\/figure>\n<p>\u0417\u0430\u0434\u0430\u0447\u0438 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0439 \u0438 \u0438\u0445 \u043f\u043e\u0442\u0440\u0435\u0431\u043d\u043e\u0441\u0442\u0438 \u0432 \u0421\u0425\u0414 \u043c\u0435\u043d\u044f\u044e\u0442\u0441\u044f \u043f\u043e \u043c\u0435\u0440\u0435 \u0440\u0430\u0437\u0432\u0438\u0442\u0438\u044f. \u0420\u044b\u043d\u043e\u043a \u0421\u0425\u0414 \u0442\u043e\u0436\u0435 \u043d\u0435 \u0441\u0442\u043e\u0438\u0442 \u043d\u0430 \u043c\u0435\u0441\u0442\u0435. \u0418 \u043f\u0440\u043e\u0432\u0435\u0440\u0435\u043d\u043d\u044b\u0435 5 \u043b\u0435\u0442 \u043d\u0430\u0437\u0430\u0434 \u0440\u0435\u0448\u0435\u043d\u0438\u044f \u043c\u043e\u0433\u0443\u0442 \u043d\u0435 \u0442\u044f\u043d\u0443\u0442\u044c \u0441\u0435\u0433\u043e\u0434\u043d\u044f\u0448\u043d\u0438\u0445 \u0437\u0430\u0434\u0430\u0447. \u041f\u043e\u0442\u0440\u0430\u0442\u0438\u0432 \u0432 \u043e\u0431\u0449\u0435\u0439 \u0441\u043b\u043e\u0436\u043d\u043e\u0441\u0442\u0438 \u043f\u0430\u0440\u0443 \u043c\u0435\u0441\u044f\u0446\u0435\u0432 \u0440\u0430\u0431\u043e\u0447\u0435\u0433\u043e \u0432\u0440\u0435\u043c\u0435\u043d\u0438 \u043d\u0430 \u0432\u044b\u0431\u043e\u0440, \u0442\u0435\u0441\u0442\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u0435, \u0432\u043d\u0435\u0434\u0440\u0435\u043d\u0438\u0435, \u0434\u0438\u0430\u0433\u043d\u043e\u0441\u0442\u0438\u043a\u0443 \u0438 \u0440\u0435\u0448\u0435\u043d\u0438\u0435 \u0440\u0430\u0437\u043b\u0438\u0447\u043d\u044b\u0445 \u043f\u0440\u043e\u0431\u043b\u0435\u043c \u0441 \u0421\u0425\u0414 QSAN XS1224 \u0440\u0435\u0448\u0438\u043b \u043f\u043e\u0434\u0435\u043b\u0438\u0442\u044c\u0441\u044f \u0441\u0432\u043e\u0438\u043c \u0432\u0438\u0434\u0435\u043d\u0438\u0435\u043c. \u041c\u043d\u0435 \u043a\u0430\u0436\u0435\u0442\u0441\u044f,\u00a0\u0447\u0442\u043e \u043c\u043d\u043e\u0433\u0438\u043c \u044d\u0442\u043e \u0431\u0443\u0434\u0435\u0442 \u0438\u043d\u0442\u0435\u0440\u0435\u0441\u043d\u043e. \u041e\u043f\u0438\u0441\u044b\u0432\u0430\u0435\u043c\u044b\u0439 \u043f\u0435\u0440\u0438\u043e\u0434 \u0432\u0440\u0435\u043c\u0435\u043d\u0438 \u2014 \u0441 2019 \u0433\u043e\u0434\u0430 \u043f\u043e \u043d\u0430\u0441\u0442\u043e\u044f\u0449\u0438\u0439 \u043c\u043e\u043c\u0435\u043d\u0442.<\/p>\n<p>\u041c\u043e\u0436\u0435\u0442 \u043f\u043e\u043a\u0430\u0437\u0430\u0442\u044c\u0441\u044f, \u0447\u0442\u043e \u0443 \u043c\u0435\u043d\u044f \u043a\u0430\u043a\u0438\u0435-\u0442\u043e \u043f\u0440\u0435\u0442\u0435\u043d\u0437\u0438\u0438 \u043a \u0440\u0443\u0441\u0441\u043a\u043e\u044f\u0437\u044b\u0447\u043d\u043e\u0439 \u0441\u043b\u0443\u0436\u0431\u0435 \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u043a\u0438 QSAN. \u041d\u0430 \u0441\u0430\u043c\u043e\u043c \u0434\u0435\u043b\u0435 \u044f \u0438\u043c \u0431\u043b\u0430\u0433\u043e\u0434\u0430\u0440\u0435\u043d &#8212; \u043d\u0435\u0441\u043c\u043e\u0442\u0440\u044f \u043d\u0430 \u0442\u043e, \u0447\u0442\u043e \u043d\u0435 \u0432\u0441\u0435 \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u044b \u043f\u043e\u043b\u0443\u0447\u0438\u043b\u043e\u0441\u044c \u0440\u0435\u0448\u0438\u0442\u044c. \u041f\u0430\u0440\u043d\u0438 \u0440\u0435\u0430\u043b\u044c\u043d\u043e \u0434\u0435\u043b\u0430\u043b\u0438 \u0432\u0441\u0435 \u0447\u0442\u043e \u043c\u043e\u0433\u043b\u0438 \u0447\u0442\u043e\u0431\u044b \u043d\u0430\u043c \u043f\u043e\u043c\u043e\u0447\u044c. \u0421\u043f\u0430\u0441\u0438\u0431\u043e.<\/p>\n<h3>1. \u041f\u043e\u0447\u0435\u043c\u0443 \u043d\u0430\u043c \u043f\u043e\u043d\u0430\u0434\u043e\u0431\u0438\u043b\u0430\u0441\u044c \u043d\u043e\u0432\u0430\u044f \u0421\u0425\u0414<\/h3>\n<p>\u0414\u043e\u043b\u0433\u043e\u0435 \u0432\u0440\u0435\u043c\u044f \u0434\u043b\u044f \u0441\u0438\u0441\u0442\u0435\u043c\u044b \u0432\u0438\u0440\u0442\u0443\u0430\u043b\u0438\u0437\u0430\u0446\u0438\u0438 (oVirt) \u0443 \u043d\u0430\u0441 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043b\u0430\u0441\u044c \u0421\u0425\u0414 HP P2000g3. \u041d\u043e \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u0438 \u0435\u0435 \u0443\u0436\u0435 \u043d\u0435 \u0445\u0432\u0430\u0442\u0430\u043b\u043e. \u0410 \u0441\u0430\u043c\u043e\u0435 \u0433\u043b\u0430\u0432\u043d\u043e\u0435 &#8212; \u043f\u043e\u0441\u043b\u0435 \u043d\u0435\u0443\u0434\u0430\u0447\u043d\u043e\u0433\u043e \u043e\u0431\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u044f \u0440\u0430\u0431\u043e\u0442\u0430\u043b\u0430 \u043e\u043d\u0430 \u043d\u0430 \u043e\u0434\u043d\u043e\u043c \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u043b\u0435\u0440\u0435. \u041f\u043e\u043a\u0443\u043f\u0430\u0442\u044c \u0432\u0442\u043e\u0440\u043e\u0439 \u0431\u044b\u043b\u043e \u043f\u0440\u0438\u0437\u043d\u0430\u043d\u043e \u043d\u0435\u0446\u0435\u043b\u0435\u0441\u043e\u043e\u0431\u0440\u0430\u0437\u043d\u044b\u043c \u0432\u0432\u0438\u0434\u0443 \u043c\u043e\u0440\u0430\u043b\u044c\u043d\u043e\u0433\u043e \u0443\u0441\u0442\u0430\u0440\u0435\u0432\u0430\u043d\u0438\u044f.<\/p>\n<h3>2. \u0421\u043f\u0435\u0446\u0438\u0444\u0438\u043a\u0430 \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0438<\/h3>\n<p>\u041f\u043e \u0441\u0442\u0430\u0442\u0438\u0441\u0442\u0438\u043a\u0435 \u0441\u043e \u0441\u0442\u0430\u0440\u043e\u0439 \u0421\u0425\u0414\u00a0 \u043f\u043e\u043b\u0443\u0447\u0438\u043b\u043e\u0441\u044c \u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0435\u0435. \u0417\u0430 \u0441\u0443\u0442\u043a\u0438 \u043e\u0431\u0440\u0430\u0431\u0430\u0442\u044b\u0432\u0430\u043b\u043e\u0441\u044c \u043e\u043a\u043e\u043b\u043e 4\u0422\u0411 \u0434\u0430\u043d\u043d\u044b\u0445 ~1200 IOPS. \u0421\u043e\u043e\u0442\u043d\u043e\u0448\u0435\u043d\u0438\u0435 \u0447\u0442\u0435\u043d\u0438\u0435\/\u0437\u0430\u043f\u0438\u0441\u044c &#8212; 1\/3. \u041e\u0431\u044b\u0447\u043d\u043e \u043d\u0430\u043e\u0431\u043e\u0440\u043e\u0442 \u0447\u0442\u0435\u043d\u0438\u044f \u0431\u043e\u043b\u044c\u0448\u0435, \u043d\u043e \u0443 \u043d\u0430\u0441 \u0441\u0442\u0430\u0442\u0438\u0441\u0442\u0438\u043a\u0430 \u0434\u0430\u043b\u0430 \u0442\u0430\u043a\u043e\u0439 \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442. \u041f\u0440\u0435\u0438\u043c\u0443\u0449\u0435\u0441\u0442\u0432\u0435\u043d\u043d\u043e \u0441\u043b\u0443\u0447\u0430\u0439\u043d\u0430\u044f \u0437\u0430\u043f\u0438\u0441\u044c. \u0412 \u0441\u0438\u0441\u0442\u0435\u043c\u0435 \u0432\u0438\u0440\u0442\u0443\u0430\u043b\u0438\u0437\u0430\u0446\u0438\u0438 \u043a\u0440\u0443\u0442\u0438\u0442\u0441\u044f \u043f\u0430\u0440\u0430 \u0441\u043e\u0442\u0435\u043d \u0432\u0438\u0440\u0442\u0443\u0430\u043b\u043e\u043a \u0441\u043b\u0430\u0431\u043e \u043d\u0430\u0433\u0440\u0443\u0436\u0435\u043d\u043d\u044b\u0445 \u0431\u043e\u043b\u044c\u0448\u0443\u044e \u0447\u0430\u0441\u0442\u044c \u0432\u0440\u0435\u043c\u0435\u043d\u0438. \u041f\u0435\u0440\u0438\u043e\u0434\u0438\u0447\u0435\u0441\u043a\u0438 \u043a\u043e\u043b\u043b\u0435\u0433\u0438 \u0433\u043e\u043d\u044f\u044e\u0442 \u0442\u0435\u0441\u0442\u044b, \u043f\u043e\u0442\u043e\u043c \u043e\u043d\u0438 \u0441\u043d\u043e\u0432\u0430 \u043f\u0440\u043e\u0441\u0442\u0430\u0438\u0432\u0430\u044e\u0442. \u0412 \u043f\u0440\u043e\u0446\u0435\u0441\u0441\u0435 \u0442\u0435\u0441\u0442\u043e\u0432 \u043d\u0430 \u043b\u043e\u043a\u0430\u043b\u044c\u043d\u044b\u0435 \u0434\u0438\u0441\u043a\u0438 \u0432\u0438\u0440\u0442\u0443\u0430\u043b\u043e\u043a (\u0442.\u0435. \u0432 \u0438\u0442\u043e\u0433\u0435 \u043d\u0430 \u0421\u0425\u0414) \u043f\u0438\u0448\u0443\u0442\u0441\u044f \u043b\u043e\u0433\u0438 \u0438 \u0442\u0440\u0435\u0439\u0441\u044b, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u043f\u043e\u0442\u043e\u043c \u043f\u043e\u0434\u0447\u0438\u0449\u0430\u044e\u0442\u0441\u044f \u0441\u043a\u0440\u0438\u043f\u0442\u043e\u0432\u043e\u0439 \u043e\u0431\u0432\u044f\u0437\u043a\u043e\u0439. <\/p>\n<h3>3. \u0412\u044b\u0431\u0435\u0440\u0438 \u043c\u0435\u043d\u044f, \u0432\u044b\u0431\u0435\u0440\u0438 \u043c\u0435\u043d\u044f&#8230;<\/h3>\n<p>\u041d\u0430 \u043e\u0441\u043d\u043e\u0432\u0430\u043d\u0438\u0438 \u0434\u0430\u043d\u043d\u044b\u0445 \u043e \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0435 \u0441\u0444\u043e\u0440\u043c\u0438\u0440\u043e\u0432\u0430\u043b\u0438 \u0442\u0440\u0435\u0431\u043e\u0432\u0430\u043d\u0438\u044f \u043a \u0421\u0425\u0414. \u041f\u043e\u043b\u0443\u0447\u0438\u043b\u043e\u0441\u044c \u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0435\u0435<\/p>\n<ul>\n<li>\n<p>\u0420\u0430\u0431\u043e\u0447\u0438\u0439 \u043e\u0431\u044a\u0435\u043c &#8212; 40+ \u0422\u0411<\/p>\n<\/li>\n<li>\n<p>IOPS &#8212; 3000+<\/p>\n<\/li>\n<li>\n<p>\u0418\u043d\u0442\u0435\u0440\u0444\u0435\u0439\u0441 &#8212; iSCSI 10G \u0438\u043b\u0438 FC 16G<\/p>\n<\/li>\n<\/ul>\n<p>\u0418 \u0442\u0443\u0442 \u0432\u043e\u0437\u043d\u0438\u043a\u043b\u0430 \u043c\u044b\u0441\u043b\u044c &#8212; \u00ab\u0433\u043e\u0440\u044f\u0447\u0438\u0445\u00bb \u0434\u0430\u043d\u043d\u044b\u0445 \u043d\u0435\u043c\u043d\u043e\u0433\u043e, \u0430 \u043d\u0435 \u043f\u043e\u043f\u0440\u043e\u0431\u043e\u0432\u0430\u0442\u044c \u043b\u0438 \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044e \u0441 \u043e\u0442\u043d\u043e\u0441\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u043c\u0435\u0434\u043b\u0435\u043d\u043d\u044b\u043c\u0438, \u043d\u043e \u0435\u043c\u043a\u0438\u043c\u0438 NL-SAS \u0434\u0438\u0441\u043a\u0430\u043c\u0438 \u0438 SSD \u0432 \u043a\u0430\u0447\u0435\u0441\u0442\u0432\u0435 \u043a\u044d\u0448\u0430?<\/p>\n<p>\u0420\u0430\u0441\u0441\u043c\u0430\u0442\u0440\u0438\u0432\u0430\u043b\u0438\u0441\u044c \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0432\u0430\u0440\u0438\u0430\u043d\u0442\u043e\u0432: Lenovo, Huawei, QSAN, Dell\u2026 \u0412 \u0438\u0442\u043e\u0433\u0435 \u043f\u043e \u0441\u043e\u0432\u043e\u043a\u0443\u043f\u043d\u043e\u0441\u0442\u0438 \u0444\u0430\u043a\u0442\u043e\u0440\u043e\u0432 \u043e\u0441\u0442\u0430\u043d\u043e\u0432\u0438\u043b\u0438\u0441\u044c \u043d\u0430 QSAN. \u041f\u043e\u0434\u0434\u0435\u0440\u0436\u043a\u0430 SSD Cache \u0431\u044b\u043b\u0430 \u0435\u0449\u0435 \u0432 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u0438\u0445 \u043c\u043e\u0434\u0435\u043b\u044f\u0445, \u043d\u043e \u0442\u043e\u043b\u044c\u043a\u043e \u0434\u043b\u044f \u0447\u0442\u0435\u043d\u0438\u044f. \u0410 \u0442\u0443\u0442 \u0435\u0449\u0435 \u0438\u043d\u0442\u0435\u0440\u0435\u0441\u043d\u043e\u0435 \u043f\u0440\u0435\u0434\u043b\u043e\u0436\u0435\u043d\u0438\u0435 \u00ab\u043a\u0443\u043f\u0438 \u0421\u0425\u0414 \u0438 \u043f\u043e\u043b\u0443\u0447\u0438 \u043b\u0438\u0446\u0435\u043d\u0437\u0438\u044e SSD Cache+Auto Tiering \u0431\u0435\u0441\u043f\u043b\u0430\u0442\u043d\u043e\u00bb.<\/p>\n<h3>4. \u041a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044f<\/h3>\n<p>\u0412 \u0442\u0435\u0447\u0435\u043d\u0438\u0435 \u043c\u0435\u0441\u044f\u0446\u0430 \u043f\u0440\u0438\u0431\u044b\u043b\u0430 \u0421\u0425\u0414 QSAN XS1224. \u0414\u0432\u0430 \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u043b\u0435\u0440\u0430, Active-Active, \u043f\u043e 2 \u0438\u043d\u0442\u0435\u0440\u0444\u0435\u0439\u0441\u0430 iSCSI 10Gb\/s \u0438 FC 16Gb\/s \u043d\u0430 \u043a\u0430\u0436\u0434\u043e\u043c \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u043b\u0435\u0440\u0435. 13 NL-SAS HDD ST10000NM0096 (10TB) \u0438 2 SSD WUSTR6432ASS204 3.2TB.<\/p>\n<p>\u0421\u0425\u0414 \u0441\u043c\u043e\u043d\u0442\u0438\u0440\u043e\u0432\u0430\u043b\u0438 \u0432 \u0441\u0442\u043e\u0439\u043a\u0443. Firmware \u0441\u0440\u0430\u0437\u0443 \u043e\u0431\u043d\u043e\u0432\u0438\u043b\u0438 \u0434\u043e \u043f\u043e\u0441\u043b\u0435\u0434\u043d\u0435\u0439 \u043d\u0430 \u0442\u043e\u0442 \u043c\u043e\u043c\u0435\u043d\u0442 1.4.2 (build 201910151200).<\/p>\n<p>\u0414\u043b\u044f \u0442\u0435\u0441\u0442\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043b\u0441\u044f \u0441\u0435\u0440\u0432\u0435\u0440 Supermicro X11DDW-L<\/p>\n<ul>\n<li>\n<p>CPU 2 x Intel(R) Xeon(R) Gold 6230 CPU @ 2.10GHz, RAM 256GB<\/p>\n<\/li>\n<li>\n<p>Ethernet 10Gb\/s &#8212; PE310G2I50-T Server      Adapter Dual Port Copper 10 Gigabit Ethernet PCI Express Server Adapter      Intel\u00ae X550-AT2 Based<\/p>\n<\/li>\n<li>\n<p>FC 16Gb\/s &#8212; Qlogic QLE2672-E HD8310405-25 16Gbps Dual Port FC<\/p>\n<\/li>\n<\/ul>\n<h3>5. \u0422\u0435\u0441\u0442\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u0435. \u0427\u0442\u043e \u043c\u044b \u0445\u043e\u0442\u0435\u043b\u0438 \u043f\u0440\u043e\u0432\u0435\u0440\u0438\u0442\u044c<\/h3>\n<p>\u00a0\u0426\u0435\u043b\u044f\u043c\u0438 \u0442\u0435\u0441\u0442\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f \u0431\u044b\u043b\u043e \u043e\u043f\u0440\u0435\u0434\u0435\u043b\u0435\u043d\u043e \u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0435\u0435:<\/p>\n<ul>\n<li>\n<p>\u041f\u0440\u043e\u0432\u0435\u0440\u0438\u0442\u044c \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u044c \u043d\u0430 \u0440\u0430\u0437\u043d\u044b\u0445 \u0442\u0438\u043f\u0430\u0445 \u0438\u043d\u0442\u0435\u0440\u0444\u0435\u0439\u0441\u043e\u0432 (FC 16G\/iSCSI 10G) \u0441 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043d\u0438\u0435\u043c MPIO \u0438 \u0431\u0435\u0437;<\/p>\n<\/li>\n<li>\n<p>\u041f\u0440\u043e\u0442\u0435\u0441\u0442\u0438\u0440\u043e\u0432\u0430\u0442\u044c \u0440\u0430\u0437\u043b\u0438\u0447\u043d\u044b\u0435 \u0432\u0430\u0440\u0438\u0430\u043d\u0442\u044b \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u0438 RAID;<\/p>\n<\/li>\n<li>\n<p>\u041f\u0440\u043e\u0432\u0435\u0440\u0438\u0442\u044c \u0440\u0430\u0431\u043e\u0442\u0443 SSD Cache;<\/p>\n<\/li>\n<li>\n<p>\u0412\u044b\u0431\u0440\u0430\u0442\u044c \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044e RAID \u0434\u043b\u044f \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043d\u0438\u044f \u0432 \u0441\u0438\u0441\u0442\u0435\u043c\u0435 \u0432\u0438\u0440\u0442\u0443\u0430\u043b\u0438\u0437\u0430\u0446\u0438\u0438 \u043d\u0430 \u043e\u0441\u043d\u043e\u0432\u0430\u043d\u0438\u0438 \u043f\u043e\u043b\u0443\u0447\u0435\u043d\u043d\u044b\u0445 \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u043e\u0432.<\/p>\n<p>\u0417\u0430\u0434\u0430\u0447\u0438 \u0432\u0441\u0435\u043c\u0438 \u0441\u0440\u0435\u0434\u0441\u0442\u0432\u0430\u043c\u0438 \u0432\u044b\u0436\u0430\u0442\u044c \u043c\u0430\u043a\u0441\u0438\u043c\u0443\u043c \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u0438 \u043d\u0435 \u0441\u0442\u043e\u044f\u043b\u043e.<\/p>\n<\/li>\n<\/ul>\n<h4>5.1 \u041f\u0430\u0440\u0430 \u0441\u043b\u043e\u0432 \u043e \u043c\u0435\u0442\u043e\u0434\u0438\u043a\u0435 \u0442\u0435\u0441\u0442\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f<\/h4>\n<p>\u0417\u0430 \u043e\u0441\u043d\u043e\u0432\u0443 \u0431\u044b\u043b\u0430 \u0432\u0437\u044f\u0442\u0430 \u043e\u0442\u043b\u0438\u0447\u043d\u0430\u044f \u0441\u0442\u0430\u0442\u044c\u044f <a href=\"https:\/\/habr.com\/en\/post\/154235\/\">https:\/\/habr.com\/ru\/post\/154235<\/a><\/p>\n<p>\u0415\u0441\u043b\u0438 \u043a\u043e\u0440\u043e\u0442\u043a\u043e:<\/p>\n<ul>\n<li>\n<p>\u0418\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u043c \u0442\u0435\u0441\u0442 fio. \u0420\u0430\u0437\u0443\u043c\u0435\u0435\u0442\u0441\u044f \u0441 \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u043e\u043c direct. ioengine=libaio;<\/p>\n<\/li>\n<li>\n<p>\u041c\u0435\u0442\u0440\u0438\u043a\u0430 \u2014 IOPS;<\/p>\n<\/li>\n<li>\n<p>Latency \u0432\u043e \u0432\u0440\u0435\u043c\u044f \u0442\u0435\u0441\u0442\u0430 \u0434\u043e\u043b\u0436\u043d\u0430 \u0431\u044b\u0442\u044c \u0432 \u0440\u0430\u0437\u0443\u043c\u043d\u044b\u0445 \u043f\u0440\u0435\u0434\u0435\u043b\u0430\u0445 (10 \u043c\u0441).<\/p>\n<\/li>\n<li>\n<p>\u041d\u0430\u0433\u0440\u0443\u0437\u043a\u0430, \u043a\u043e\u0442\u043e\u0440\u0443\u044e \u0441\u043e\u0437\u0434\u0430\u0435\u0442 \u0442\u0435\u0441\u0442, \u043f\u0440\u0438 \u043f\u0440\u043e\u0447\u0438\u0445 \u0444\u0438\u043a\u0441\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u044b\u0445 \u043d\u0430\u0441\u0442\u0440\u043e\u0439\u043a\u0430\u0445 \u043e\u043f\u0440\u0435\u0434\u0435\u043b\u044f\u0435\u0442\u0441\u044f \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u043e\u043c iodepth (\u0433\u043b\u0443\u0431\u0438\u043d\u0430 \u043e\u0447\u0435\u0440\u0435\u0434\u0438). \u0422.\u0435. \u043c\u044b \u0438\u0437\u043c\u0435\u0440\u044f\u0435\u043c \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u0435 IOPS \u043f\u0440\u0438 \u0442\u0430\u043a\u043e\u043c \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u0438 iodepth, \u0447\u0442\u043e\u0431\u044b latency \u043e\u0441\u0442\u0430\u0432\u0430\u043b\u0430\u0441\u044c \u0432 \u0437\u0430\u0434\u0430\u043d\u043d\u044b\u0445 \u043f\u0440\u0435\u0434\u0435\u043b\u0430\u0445.<\/p>\n<\/li>\n<\/ul>\n<p>\u0421\u0443\u0434\u044f \u043f\u043e \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u0430\u0446\u0438\u0438 fio, \u0432 \u043d\u043e\u0432\u044b\u0445 \u0432\u0435\u0440\u0441\u0438\u044f\u0445 \u043f\u043e\u044f\u0432\u0438\u043b\u0430\u0441\u044c \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e\u0441\u0442\u044c \u0430\u0432\u0442\u043e\u043c\u0430\u0442\u0438\u0447\u0435\u0441\u043a\u043e\u0433\u043e \u043f\u043e\u0434\u0431\u043e\u0440\u0430 IO depth \u043f\u043e\u0434 \u0437\u0430\u0434\u0430\u043d\u043d\u043e\u0435 \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u0435 latency. \u041d\u043e \u0443 \u043c\u0435\u043d\u044f \u043e\u043d\u043e \u043f\u043e\u0447\u0435\u043c\u0443-\u0442\u043e \u043d\u0435 \u0437\u0430\u0440\u0430\u0431\u043e\u0442\u0430\u043b\u043e. \u041f\u043e\u044d\u0442\u043e\u043c\u0443 \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u044f iodepth \u044f \u043f\u043e\u0434\u0431\u0438\u0440\u0430\u043b \u0432\u0440\u0443\u0447\u043d\u0443\u044e (\u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043b \u0441\u043e\u0431\u0441\u0442\u0432\u0435\u043d\u043d\u044b\u0439 \u0441\u043a\u0440\u0438\u043f\u0442-\u043e\u0431\u0435\u0440\u0442\u043a\u0443 \u0434\u043b\u044f fio). <\/p>\n<p>\u0414\u0430\u043b\u0435\u0435 \u0435\u0441\u043b\u0438 \u043d\u0435 \u043e\u0433\u043e\u0432\u043e\u0440\u0435\u043d\u043e \u044f\u0432\u043d\u043e, \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u044b \u0442\u0435\u0441\u0442\u0430 \u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0438\u0435: 100% random read (\u0438\u043b\u0438 random write) \u0431\u043b\u043e\u043a\u043e\u043c 4k. \u0414\u043b\u044f MPIO \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043b\u0441\u044f \u0441\u0442\u0430\u043d\u0434\u0430\u0440\u0442\u043d\u044b\u0439 \u0434\u043b\u044f linux multipathd,\u00a0 path_grouping_policy multibus, path_selector round-robin 0.<\/p>\n<p>\u0422\u0435\u0441\u0442\u043e\u0432\u044b\u0439 \u0442\u043e\u043c \u043e\u0431\u044a\u0435\u043c\u043e\u043c 1TB \u043f\u0440\u0435\u0434\u0432\u0430\u0440\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u0437\u0430\u043f\u0438\u0441\u044b\u0432\u0430\u043b\u0441\u044f \u043c\u0443\u0441\u043e\u0440\u043e\u043c \u0438\u0437 \/dev<em>\/<\/em>urandom.<\/p>\n<p>\u041a\u044d\u0448 \u0437\u0430\u043f\u0438\u0441\u0438 \u0434\u043b\u044f \u0442\u043e\u043c\u0430 \u0432 \u0440\u0435\u0436\u0438\u043c\u0435 write-back. Read ahead \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d. \u041d\u0430 random read \u043c\u0435\u043b\u043a\u0438\u043c \u0431\u043b\u043e\u043a\u043e\u043c \u043e\u043d \u0431\u0443\u0434\u0435\u0442 \u0442\u043e\u043b\u044c\u043a\u043e \u043c\u0435\u0448\u0430\u0442\u044c.<\/p>\n<p>\u041d\u0430 \u0432\u0441\u044f\u043a\u0438\u0439 \u0441\u043b\u0443\u0447\u0430\u0439 \u0438\u043d\u0444\u043e\u0440\u043c\u0430\u0446\u0438\u044f \u043e\u0431 \u041e\u0421:<\/p>\n<ul>\n<li>\n<p>CentOS Linux release 7.7.1908 (Core)<\/p>\n<\/li>\n<li>\n<p>Kernel 3.10.0-1062.4.1.el7.x86_64<\/p>\n<\/li>\n<li>\n<p>i40e native 2.8.10-k<\/p>\n<\/li>\n<li>\n<p>qla2xxx native 10.00.00.12.07.7-k<\/p>\n<\/li>\n<li>\n<p>fio-3.7-1.el7.x86_64<\/p>\n<\/li>\n<\/ul>\n<h4>5.2 \u0418\u043d\u0442\u0435\u0440\u0444\u0435\u0439\u0441\u044b \u043f\u043e\u0434\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u044f<\/h4>\n<p>\u0421\u043e\u0431\u0438\u0440\u0430\u0435\u043c RAID0 \u0438\u0437 1 SSD \u0438 \u0438\u0437\u043c\u0435\u0440\u044f\u0435\u043c \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u044c \u043f\u0440\u0438 \u043f\u043e\u0434\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0438 \u0447\u0435\u0440\u0435\u0437 iSCSI 10G \u0438 FC 16G. \u041f\u043e\u0434\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435 \u043d\u0430\u043f\u0440\u044f\u043c\u0443\u044e \u043a \u0441\u0435\u0440\u0432\u0435\u0440\u0443, \u0431\u0435\u0437 \u043a\u043e\u043c\u043c\u0443\u0442\u0430\u0442\u043e\u0440\u043e\u0432.<\/p>\n<p>\u041f\u0435\u0440\u0432\u044b\u0435 \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u044b \u0441 \u043d\u0430\u0442\u0438\u0432\u043d\u044b\u043c \u043c\u043e\u0434\u0443\u043b\u0435\u043c qla2xxx \u043e\u043a\u0430\u0437\u0430\u043b\u0438\u0441\u044c \u043e\u0449\u0443\u0442\u0438\u043c\u043e \u043c\u0435\u043d\u044c\u0448\u0435 \u043e\u0436\u0438\u0434\u0430\u0435\u043c\u044b\u0445:<\/p>\n<p>FC 16G \u0431\u0435\u0437 MPIO.<\/p>\n<ul>\n<li>\n<p>Random read, 4k &#8212; avg. latency 7.9ms, bw 266 MB\/s, avg. IOPS 64866<\/p>\n<\/li>\n<li>\n<p>Random write, 4k &#8212; avg. latency 7.7ms, bw 273 MB\/s, avg. IOPS 66570<\/p>\n<\/li>\n<\/ul>\n<p>FC 16G \u0441 MPIO (\u0432\u0442\u043e\u0440\u043e\u0439 FC \u043b\u0438\u043d\u043a \u043f\u043e\u0434\u043a\u043b\u044e\u0447\u0435\u043d \u043a\u043e \u0432\u0442\u043e\u0440\u043e\u043c\u0443 \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u043b\u0435\u0440\u0443 \u0421\u0425\u0414).<\/p>\n<ul>\n<li>\n<p>Random read, 4k &#8212; avg. latency 5.3ms, bw      397 MB\/s, avg. IOPS 96985<\/p>\n<\/li>\n<li>\n<p>Random      write, 4k &#8212; avg. latency 4.9ms, bw 427 MB\/s, avg. IOPS 104134<\/p>\n<\/li>\n<\/ul>\n<p>\u0412\u044b\u044f\u0441\u043d\u0438\u043b\u043e\u0441\u044c, \u0447\u0442\u043e \u043f\u0440\u0438 \u0440\u0430\u0431\u043e\u0442\u0435 \u0442\u0435\u0441\u0442\u0430 \u043e\u0434\u043d\u043e \u044f\u0434\u0440\u043e CPU \u0437\u0430\u0433\u0440\u0443\u0436\u0430\u0435\u0442\u0441\u044f \u043d\u0430 100%. \u041d\u0430 \u043d\u0435\u043c \u043e\u0431\u0440\u0430\u0431\u0430\u0442\u044b\u0432\u0430\u044e\u0442\u0441\u044f \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u043d\u0438\u044f \u043e\u0442 FC \u0430\u0434\u0430\u043f\u0442\u0435\u0440\u0430. \u0412 CentOS 7 \u043f\u043e\u044f\u0432\u0438\u043b\u0441\u044f \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440 \u043c\u043e\u0434\u0443\u043b\u044f qla2xxx &#8212; ql2xmqsupport. \u041f\u0440\u0438 \u0432\u044b\u0441\u0442\u0430\u0432\u043b\u0435\u043d\u0438\u0438 \u0432 1 \u0441\u043e\u0437\u0434\u0430\u0435\u0442 \u0434\u043e\u043f\u043e\u043b\u043d\u0438\u0442\u0435\u043b\u044c\u043d\u044b\u0435 \u043e\u0447\u0435\u0440\u0435\u0434\u0438. \u041d\u0430 \u0442\u043e\u0442 \u043c\u043e\u043c\u0435\u043d\u0442 \u0432 RHEL7 \u0434\u0430\u043d\u043d\u0430\u044f \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e\u0441\u0442\u044c \u0448\u043b\u0430 \u0432 \u0441\u0442\u0430\u0442\u0443\u0441\u0435 technological preview. \u0415\u0441\u0442\u044c \u0431\u0430\u0433 BZ#1414957 &#8212; \u0441\u043d\u0438\u0436\u0435\u043d\u0438\u0435 \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u0438.<\/p>\n<p>\u041a\u0440\u043e\u043c\u0435 \u0442\u043e\u0433\u043e \u0432\u044b\u044f\u0441\u043d\u0438\u043b\u043e\u0441\u044c, \u0447\u0442\u043e \u0432 \u0441\u0438\u0441\u0442\u0435\u043c\u0435 \u0441 \u0434\u0432\u0443\u043c\u044f \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u043b\u0435\u0440\u0430\u043c\u0438 \u0440\u0430\u0431\u043e\u0442\u0430 \u0441 \u0434\u0438\u0441\u043a\u043e\u043c \u0447\u0435\u0440\u0435\u0437 preferred \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u043b\u0435\u0440 \u043e\u043a\u0430\u0437\u044b\u0432\u0430\u0435\u0442\u0441\u044f \u043e\u0449\u0443\u0442\u0438\u043c\u043e \u0431\u044b\u0441\u0442\u0440\u0435\u0435.<\/p>\n<p>\u0420\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u044b \u0441\u043e \u0432\u043a\u043b\u044e\u0447\u0435\u043d\u043d\u044b\u043c ql2xmqsupport.<\/p>\n<p>FC 16G \u0431\u0435\u0437 MPIO<\/p>\n<ul>\n<li>\n<p>Random read, 4k &#8212; avg. latency 7.6ms, bw      275MB\/s, avg. IOPS 67248<\/p>\n<\/li>\n<li>\n<p>Random      write, 4k &#8212; avg. latency 5.9ms, bw 355MB\/s, avg. IOPS 86739<\/p>\n<\/li>\n<\/ul>\n<p>FC 16G \u0441 MPIO<\/p>\n<ul>\n<li>\n<p>Random read, 4k &#8212; avg. latency 4.2ms, bw      502MB\/s, avg. IOPS 122477<\/p>\n<\/li>\n<li>\n<p>Random      write, 4k &#8212; avg. latency 4.3ms, bw 485MB\/s, avg. IOPS 118325<\/p>\n<\/li>\n<\/ul>\n<p>\u0423\u0432\u0435\u043b\u0438\u0447\u0435\u043d\u0438\u0435 \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u0430 iodepth \u0443\u0436\u0435 \u043d\u0435 \u0434\u0430\u0432\u0430\u043b\u043e \u043f\u0440\u0438\u0440\u043e\u0441\u0442\u0430 IOPS. \u041b\u044e\u0431\u043e\u043f\u044b\u0442\u043d\u043e, \u0447\u0442\u043e \u0431\u0435\u0437 MPIO \u0437\u0430\u043f\u0438\u0441\u044c \u043f\u043e\u043b\u0443\u0447\u0438\u043b\u0430\u0441\u044c \u0431\u044b\u0441\u0442\u0440\u0435\u0435 \u0447\u0442\u0435\u043d\u0438\u044f. \u042f \u0441\u043f\u0438\u0441\u0430\u043b \u044d\u0442\u043e \u043d\u0430 \u043e\u0441\u043e\u0431\u0435\u043d\u043d\u043e\u0441\u0442\u0438 \u0440\u0430\u0431\u043e\u0442\u044b qla2xxx \u0441 ql2xmqsupport.<\/p>\n<p>\u0422\u0435\u043f\u0435\u0440\u044c \u0441 iSCSI. \u0417\u0430\u043e\u0434\u043d\u043e \u043f\u043e\u0441\u043c\u043e\u0442\u0440\u0438\u043c, \u043a\u0430\u043a \u043f\u043e\u0432\u043b\u0438\u044f\u0435\u0442 \u0432\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435 jumbo frames (MTU 9000).<\/p>\n<p>ISCSI 10G \u0431\u0435\u0437 MPIO.<\/p>\n<ul>\n<li>\n<p>Jumbo off, random read, 4k &#8212; avg. latency 8ms, bw 130MB\/s, avg. IOPS 31851<\/p>\n<\/li>\n<li>\n<p>Jumbo off, random write, 4k &#8212; avg. latency  7.6ms, bw 137MB\/s, avg. IOPS 33443<\/p>\n<\/li>\n<li>\n<p>Jumbo 9000, random read, 4k &#8212; avg. latency 8.9ms, bw 117MB\/s, avg. IOPS 28578<\/p>\n<\/li>\n<li>\n<p>Jumbo 9000, random write, 4k &#8212; avg. latency 6.8ms, bw 152MB\/s, avg. IOPS 37204<\/p>\n<\/li>\n<\/ul>\n<p>ISCSI 10G c MPIO.<\/p>\n<ul>\n<li>\n<p>Jumbo off, random read, 4k &#8212; avg. latency 8.8ms, bw 237MB\/s, avg. IOPS 57867<\/p>\n<\/li>\n<li>\n<p>Jumbo off, random write, 4k &#8212; avg. latency 8.1ms, bw 258MB\/s, avg. IOPS 62999<\/p>\n<\/li>\n<li>\n<p>Jumbo 9000, random read, 4k &#8212; avg. latency 8.5ms, bw 244MB\/s, avg. IOPS 59677<\/p>\n<\/li>\n<li>\n<p>Jumbo 9000, random write, 4k &#8212; avg. latency 8.1ms, bw 258MB\/s, avg. IOPS 63074<\/p>\n<\/li>\n<\/ul>\n<p>\u0420\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442 \u0432 \u0446\u0435\u043b\u043e\u043c \u043e\u0436\u0438\u0434\u0430\u0435\u043c: iSCSI 10G \u043f\u0440\u0438\u043c\u0435\u0440\u043d\u043e \u0441\u043e\u043e\u0442\u0432\u0435\u0442\u0441\u0442\u0432\u0443\u0435\u0442 \u043f\u043e \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u0438 FC 8G. \u0410 \u0443 \u043d\u0430\u0441 FC 16G, \u0442\u0430\u043a \u0447\u0442\u043e \u0440\u0430\u0437\u043d\u0438\u0446\u0430 \u0432 \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u0438 \u0432 ~2 \u0440\u0430\u0437\u0430 \u0432\u043f\u043e\u043b\u043d\u0435 \u0437\u0430\u043a\u043e\u043d\u043e\u043c\u0435\u0440\u043d\u0430. \u0412\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435 jumbo frames \u0434\u0430\u0435\u0442 \u043f\u0430\u0434\u0435\u043d\u0438\u0435 \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u0438 \u0431\u0435\u0437 MPIO. \u0412\u0435\u0440\u043e\u044f\u0442\u043d\u043e latency \u0443\u0432\u0435\u043b\u0438\u0447\u0438\u0432\u0430\u0435\u0442\u0441\u044f.<\/p>\n<h4>5.3 \u0422\u0438\u043f\u044b RAID. \u0418\u0445 \u043f\u0440\u0435\u0438\u043c\u0443\u0449\u0435\u0441\u0442\u0432\u0430 \u0438 \u043d\u0435\u0434\u043e\u0441\u0442\u0430\u0442\u043a\u0438. \u0421\u0442\u0440\u0430\u043d\u043d\u043e\u0441\u0442\u0438 \u0441 RAID10<\/h4>\n<p>\u0414\u0430\u043b\u0435\u0435 \u0432\u0441\u0435 \u0442\u0435\u0441\u0442\u044b \u043f\u0440\u0438 \u043f\u043e\u0434\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0438 \u043f\u043e FC 16G. \u041f\u043e\u0441\u043a\u043e\u043b\u044c\u043a\u0443 HDD \u0437\u043d\u0430\u0447\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u043c\u0435\u0434\u043b\u0435\u043d\u043d\u0435\u0435 SSD, \u0430 \u0441\u0442\u0430\u0431\u0438\u043b\u044c\u043d\u043e\u0441\u0442\u044c \u0440\u0430\u0431\u043e\u0442\u044b qla2xxx \u0441 \u0432\u043a\u043b\u044e\u0447\u0435\u043d\u043d\u044b\u043c ql2xmqsupport \u043f\u043e\u0434 \u0432\u043e\u043f\u0440\u043e\u0441\u043e\u043c \u0434\u0430\u043b\u0435\u0435 \u0442\u0435\u0441\u0442\u0438\u0440\u0443\u0435\u043c \u0431\u0435\u0437 ql2xmqsupport.<\/p>\n<p>5.3.1 \u041a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044f \u043f\u0443\u043b\u0430: 12 NL-SAS HDD ST10000NM0096 10TB \u0432 RAID 10. Thick provisioned.<\/p>\n<p>\u0411\u0435\u0437 MPIO<\/p>\n<ul>\n<li>\n<p>Random read, 4k &#8212; avg. latency 9.5ms, bw 3428kB\/s, avg. IOPS 836<\/p>\n<\/li>\n<li>\n<p>Random write, 4k &#8212; avg. Latency 9.4ms, bw 13.8MB\/s, avg. IOPS 3366<\/p>\n<\/li>\n<\/ul>\n<p>\u0421 MPIO<\/p>\n<ul>\n<li>\n<p>Random read, 4k &#8212; avg. latency 10.3ms, bw 3158kB\/s, avg. IOPS 770<\/p>\n<\/li>\n<li>\n<p>Random write, 4k &#8212; avg. latency 9.6ms, bw 13.6MB\/s, avg. IOPS 3328<\/p>\n<\/li>\n<\/ul>\n<p>\u041e\u0447\u0435\u043d\u044c \u043d\u0438\u0437\u043a\u0430\u044f \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u044c \u0447\u0442\u0435\u043d\u0438\u044f \u0441 RAID10. \u0418 \u0435\u0441\u043b\u0438 \u0432\u044b\u0441\u043e\u043a\u0443\u044e \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u044c \u0437\u0430\u043f\u0438\u0441\u0438 \u0435\u0449\u0435 \u043c\u043e\u0436\u043d\u043e \u043e\u0431\u044a\u044f\u0441\u043d\u0438\u0442\u044c \u043a\u0430\u043a\u0438\u043c\u0438-\u0442\u043e \u043e\u043f\u0442\u0438\u043c\u0438\u0437\u0430\u0446\u0438\u044f\u043c\u0438, \u043a\u044d\u0448\u0435\u043c, NCQ \u0438 \u0442.\u00a0\u043f. \u0442\u043e \u0441 \u0447\u0442\u0435\u043d\u0438\u0435\u043c \u043f\u0440\u0438\u0448\u043b\u043e\u0441\u044c \u0440\u0430\u0437\u0431\u0438\u0440\u0430\u0442\u044c\u0441\u044f.<\/p>\n<p>\u0418 \u044d\u0442\u043e \u043f\u0435\u0440\u0432\u0430\u044f \u043e\u0441\u043e\u0431\u0435\u043d\u043d\u043e\u0441\u0442\u044c \u0421\u0425\u0414 QSAN, \u0430 \u0442\u043e\u0447\u043d\u0435\u0435 \u0440\u0435\u0430\u043b\u0438\u0437\u0430\u0446\u0438\u0438 RAID10 \u043e\u0442 QSAN.<\/p>\n<p>\u0414\u043b\u044f \u0442\u043e\u043c\u043e\u0432 \u0432 \u043f\u0443\u043b\u0435 RAID10 \u0447\u0442\u0435\u043d\u0438\u0435 \u0438\u0434\u0435\u0442 \u0442\u043e\u043b\u044c\u043a\u043e \u0441 \u043d\u0435\u0447\u0435\u0442\u043d\u044b\u0445 \u0434\u0438\u0441\u043a\u043e\u0432 \u0432 \u043f\u0443\u043b\u0435. \u042d\u0442\u043e \u0445\u043e\u0440\u043e\u0448\u043e \u0432\u0438\u0434\u043d\u043e \u043f\u043e \u0433\u0440\u0430\u0444\u0438\u043a\u0430\u043c \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u0438 \u0432 web-\u0438\u043d\u0442\u0435\u0440\u0444\u0435\u0439\u0441\u0435 \u0421\u0425\u0414.<\/p>\n<figure class=\"full-width\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/habrastorage.org\/r\/w780q1\/getpro\/habr\/upload_files\/8c6\/c9d\/541\/8c6c9d541aa7af205c039b9f8a4189a3.jpg\" width=\"1083\" height=\"651\" data-src=\"https:\/\/habrastorage.org\/getpro\/habr\/upload_files\/8c6\/c9d\/541\/8c6c9d541aa7af205c039b9f8a4189a3.jpg\" data-blurred=\"true\"\/><figcaption><\/figcaption><\/figure>\n<p>\u0415\u0441\u0442\u044c \u043e\u0434\u0438\u043d \u0441\u043f\u043e\u0441\u043e\u0431 \u044d\u0442\u043e \u043e\u0431\u043e\u0439\u0442\u0438 \u2014 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c thick provisioned \u043f\u0443\u043b \u0438 \u043f\u0440\u0438 \u0441\u043e\u0437\u0434\u0430\u043d\u0438\u0438 \u0442\u043e\u043c\u0430 \u0432\u044b\u0431\u0440\u0430\u0442\u044c Full Erase \u0434\u0430\u043d\u043d\u044b\u043c. \u0415\u0441\u043b\u0438 \u0432\u044b \u0443\u0432\u0435\u043b\u0438\u0447\u0438\u0442\u0435 \u0442\u043e\u043c \u0432 \u0434\u0430\u043b\u044c\u043d\u0435\u0439\u0448\u0435\u043c, \u0447\u0442\u0435\u043d\u0438\u0435 \u0441 \u0434\u043e\u0431\u0430\u0432\u043b\u0435\u043d\u043d\u043e\u0433\u043e \u043c\u0435\u0441\u0442\u0430 \u0431\u0443\u0434\u0435\u0442 \u0442\u0430\u043a\u0436\u0435 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c \u0442\u043e\u043b\u044c\u043a\u043e \u043d\u0435\u0447\u0435\u0442\u043d\u044b\u0435 \u0434\u0438\u0441\u043a\u0438. \u041d\u0435\u043c\u043d\u043e\u0433\u043e \u0437\u0430\u0431\u0435\u0433\u0430\u044f \u0432\u043f\u0435\u0440\u0435\u0434, \u0435\u0441\u043b\u0438 \u0434\u043e\u0431\u0430\u0432\u0438\u0442\u044c \u043a \u0442\u043e\u043c\u0443 SSD \u043a\u044d\u0448, \u0442\u043e \u0431\u0430\u0433 \u043f\u0440\u043e\u044f\u0432\u043b\u044f\u0435\u0442\u0441\u044f \u0434\u0430\u0436\u0435 \u0435\u0441\u043b\u0438 \u0431\u044b\u043b \u0432\u044b\u0431\u0440\u0430\u043d \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440 Full Erase.<\/p>\n<p>\u0420\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u044b \u0434\u043b\u044f \u0442\u043e\u043c\u0430, \u0438\u043d\u0438\u0446\u0438\u0430\u043b\u0438\u0437\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u043e\u0433\u043e \u0441 Full Erase:<\/p>\n<ul>\n<li>\n<p>Random read, 4k &#8212; avg. latency 10.3ms, bw 6352 kB\/s, avg. IOPS 1550<\/p>\n<\/li>\n<\/ul>\n<p>\u041e\u043f\u0438\u0441\u0430\u043d\u0438\u0435 \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u044b \u0431\u044b\u043b\u043e \u043e\u0442\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u043e \u0432 \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u043a\u0443 QSAN \u0432 \u043d\u043e\u044f\u0431\u0440\u0435 2019. \u041f\u0440\u043e\u0431\u043b\u0435\u043c\u0443 \u043f\u043e\u0434\u0442\u0432\u0435\u0440\u0434\u0438\u043b\u0438. \u041b\u0435\u0442\u043e\u043c 2021 \u044f \u0435\u0449\u0435 \u0440\u0430\u0437 \u0443\u0442\u043e\u0447\u043d\u0438\u043b \u0441\u0442\u0430\u0442\u0443\u0441 \u043e\u0431\u0440\u0430\u0449\u0435\u043d\u0438\u044f \u0438 \u043f\u043e\u043b\u0443\u0447\u0438\u043b \u043e\u0442\u0432\u0435\u0442 \u0432 \u0434\u0443\u0445\u0435: \u00ab\u041e \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u0435 \u0438\u0437\u0432\u0435\u0441\u0442\u043d\u043e \u0434\u0430\u0432\u043d\u043e, \u043d\u043e \u0431\u0435\u0437 \u0438\u0437\u043c\u0435\u043d\u0435\u043d\u0438\u044f \u0432\u043d\u0443\u0442\u0440\u0435\u043d\u043d\u0435\u0439 \u043b\u043e\u0433\u0438\u043a\u0438 \u044d\u0442\u043e \u043d\u0435 \u0438\u0441\u043f\u0440\u0430\u0432\u0438\u0442\u044c. \u0414\u0430\u0436\u0435 \u043f\u0440\u0438\u043c\u0435\u0440\u043d\u044b\u0445 \u0441\u0440\u043e\u043a\u043e\u0432 \u0440\u0435\u0448\u0435\u043d\u0438\u044f \u043d\u0435\u0442.\u00bb<\/p>\n<p>5.3.2 \u041a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044f \u043f\u0443\u043b\u0430: 12 NL-SAS HDD ST10000NM0096 10TB \u0432 RAID 6 (\u043e\u0434\u043d\u0430 \u0433\u0440\u0443\u043f\u043f\u0430). Thick provisioned.<\/p>\n<p>\u041f\u043e \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u0430\u043c \u0442\u0435\u0441\u0442\u0430 RAID10 \u0432\u0438\u0434\u043d\u043e, \u0447\u0442\u043e MPIO \u043d\u0435 \u0434\u0430\u0435\u0442 \u043f\u0440\u0438\u0440\u043e\u0441\u0442\u0430 \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u0438 (\u0443\u043f\u0438\u0440\u0430\u0435\u043c\u0441\u044f \u0432 \u0434\u0438\u0441\u043a\u0438). \u0414\u0430\u043b\u0435\u0435 \u0442\u0435\u0441\u0442\u044b HDD \u0431\u0435\u0437 MPIO.<\/p>\n<ul>\n<li>\n<p>Random read, 4k &#8212; avg. latency 9.8ms, bw 6643kB\/s, avg. IOPS 1621<\/p>\n<\/li>\n<li>\n<p>Random write, 4k &#8212; avg. latency 8.7ms, bw 3761kB\/s,  avg. IOPS 918<\/p>\n<\/li>\n<\/ul>\n<p>\u0418 \u044d\u0442\u043e \u043f\u0440\u043e\u0432\u0430\u043b. \u0417\u0430\u043f\u0438\u0441\u044c \u043f\u043e\u0447\u0442\u0438 \u0432 4 \u0440\u0430\u0437\u0430 \u043c\u0435\u0434\u043b\u0435\u043d\u043d\u0435\u0435. \u0410 \u0443 \u043d\u0430\u0441, \u043d\u0430\u043f\u043e\u043c\u043d\u044e, \u00be \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0438 \u0438\u043c\u0435\u043d\u043d\u043e \u0437\u0430\u043f\u0438\u0441\u044c.<\/p>\n<p>5.3.3 \u041a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044f \u043f\u0443\u043b\u0430: 12+1 spare NL-SAS HDD ST10000NM0096 10TB \u0432 RAID 6EE (\u043e\u0434\u043d\u0430 \u0433\u0440\u0443\u043f\u043f\u0430). Thick provisioned.<\/p>\n<p>\u0415\u0449\u0435 \u043e\u0434\u043d\u0430 \u0438\u043d\u0442\u0435\u0440\u0435\u0441\u043d\u0430\u044f \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u0438\u0432\u0430\u0435\u043c\u0430\u044f \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044f \u043f\u0443\u043b\u0430 \u2014 RAID6EE. \u0422\u043e \u0435\u0441\u0442\u044c RAID6 \u0441 \u0430\u043a\u0442\u0438\u0432\u043d\u044b\u043c Spare.<\/p>\n<ul>\n<li>\n<p>Random read, 4k &#8212; avg. latency 9.4ms, bw 6923kB\/s, avg. IOPS 1690<\/p>\n<\/li>\n<li>\n<p>Random write, 4k &#8212; avg. latency 7ms, bw 4606kB\/s, avg. IOPS 1124<\/p>\n<\/li>\n<\/ul>\n<p>\u041f\u0440\u0438\u0440\u043e\u0441\u0442 \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u0438 \u043f\u0440\u0438 \u0441\u043b\u0443\u0447\u0430\u0439\u043d\u043e\u043c \u0447\u0442\u0435\u043d\u0438\u0438 \u043f\u043e\u043b\u0443\u0447\u0438\u043b\u0441\u044f \u0447\u0443\u0442\u044c \u0431\u043e\u043b\u0435\u0435 4 \u043f\u0440\u043e\u0446\u0435\u043d\u0442\u043e\u0432. \u041d\u0430 \u0441\u0430\u043c\u043e\u043c \u0434\u0435\u043b\u0435 \u043d\u0435\u043f\u043b\u043e\u0445\u043e, \u0434\u0430\u0436\u0435 \u0435\u0441\u043b\u0438 \u043f\u0440\u043e\u0441\u0442\u043e \u0441\u0443\u043c\u043c\u0438\u0440\u043e\u0432\u0430\u0442\u044c IOPS-\u044b \u043c\u0430\u043a\u0441\u0438\u043c\u0443\u043c, \u0447\u0442\u043e \u043c\u043e\u0436\u043d\u043e \u043e\u0436\u0438\u0434\u0430\u0442\u044c \u044d\u0442\u043e \u043f\u0440\u0438\u0440\u043e\u0441\u0442 \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u0438 \u043f\u0440\u0438\u043c\u0435\u0440\u043d\u043e \u043d\u0430 8 \u043f\u0440\u043e\u0446\u0435\u043d\u0442\u043e\u0432.<\/p>\n<blockquote>\n<p>\u0421 \u0442\u0435\u0441\u0442\u043e\u043c random write \u0442\u0443\u0442 \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e \u0447\u0442\u043e-\u0442\u043e \u043d\u0435 \u0442\u0430\u043a. \u0421\u0442\u0430\u0442\u044c\u044e \u044f \u043f\u0438\u0448\u0443 \u043f\u043e\u0441\u0442\u0444\u0430\u043a\u0442\u0443\u043c, \u043d\u0430 \u043e\u0441\u043d\u043e\u0432\u0430\u043d\u0438\u0438 \u0441\u0432\u043e\u0438\u0445\u00a0 \u043a\u043e\u043c\u043c\u0435\u043d\u0442\u0430\u0440\u0438\u0435\u0432 \u043a \u0437\u0430\u0434\u0430\u0447\u0435 \u0432 YouTrack. \u0412 \u0434\u0440\u0443\u0433\u0438\u0445 \u0442\u0435\u0441\u0442\u0430\u0445\u00a0 \u043f\u0440\u0438\u0440\u043e\u0441\u0442 IOPS \u0434\u043b\u044f RAID6EE \u043f\u043e \u0441\u0440\u0430\u0432\u043d\u0435\u043d\u0438\u044e \u0441 RAID6 \u0441\u043a\u0440\u043e\u043c\u043d\u0435\u0435. \u041d\u043e \u0432 \u0438\u043c\u0435\u044e\u0449\u0438\u0445\u0441\u044f \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u0430\u0445 \u0440\u0430\u0437\u043d\u044b\u0439 iodepth (\u0437\u0434\u0435\u0441\u044c iodepth 8). \u0410 \u043f\u043e\u0432\u0442\u043e\u0440\u0438\u0442\u044c \u0442\u0435\u0441\u0442 \u044f \u043d\u0435 \u043c\u043e\u0433\u0443 \u043f\u043e\u0441\u043a\u043e\u043b\u044c\u043a\u0443 \u0421\u0425\u0414 \u043f\u043e\u0434 \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u043e\u0439. \u0420\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442 \u0441 iodepth 16:<\/p>\n<\/blockquote>\n<ul>\n<li>\n<p>Random write 4k, avg. latency 16.3ms, bw 4018kB\/s,\u00a0 IOPS 980<\/p>\n<\/li>\n<\/ul>\n<p>\u0418\u0442\u0430\u043a, RAID 6EE \u0432 3 \u0441 \u043b\u0438\u0448\u043d\u0438\u043c \u0440\u0430\u0437\u0430 \u043c\u0435\u0434\u043b\u0435\u043d\u043d\u0435\u0435 RAID10 \u043d\u0430 \u0437\u0430\u043f\u0438\u0441\u044c. <\/p>\n<h4>5.4 SSD-Cache. \u0420\u0430\u0434\u0438 \u0447\u0435\u0433\u043e \u0432\u0441\u0435 \u0437\u0430\u0442\u0435\u0432\u0430\u043b\u043e\u0441\u044c<\/h4>\n<p>\u0427\u0442\u043e\u0431\u044b \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c SSD Cache \u0442\u0440\u0435\u0431\u0443\u0435\u0442\u0441\u044f \u043e\u0442\u0434\u0435\u043b\u044c\u043d\u0430\u044f \u043b\u0438\u0446\u0435\u043d\u0437\u0438\u044f (\u043c\u044b \u043f\u043e\u043b\u0443\u0447\u0438\u043b\u0438 \u0435\u0435 \u043f\u043e \u0430\u043a\u0446\u0438\u0438).<\/p>\n<p>\u0420\u0430\u0431\u043e\u0442\u0430 QSAN SSD Cache \u0434\u043e\u0441\u0442\u0430\u0442\u043e\u0447\u043d\u043e \u043f\u043e\u0434\u0440\u043e\u0431\u043d\u043e \u043e\u043f\u0438\u0441\u0430\u043d\u0430 \u0432 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u0430\u0446\u0438\u0438 \u043a SANOS 4.0. \u041a\u0440\u043e\u043c\u0435 \u0442\u043e\u0433\u043e \u0441\u0443\u0449\u0435\u0441\u0442\u0432\u0443\u0435\u0442 XCubeSAN Series White Paper &#8212; SSD Cache 2.0.<\/p>\n<p>\u0418\u0442\u0430\u043a:<\/p>\n<ol>\n<li>\n<p>\u041a\u044d\u0448 \u043c\u043e\u0436\u0435\u0442 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c\u0441\u044f \u043a\u0430\u043a read only (\u0432 \u044d\u0442\u043e\u043c \u0441\u043b\u0443\u0447\u0430\u0435 \u0434\u043e\u0441\u0442\u0430\u0442\u043e\u0447\u043d\u043e \u043e\u0434\u043d\u043e\u0433\u043e SSD), \u0442\u0430\u043a \u0438 read-write (\u043c\u0438\u043d\u0438\u043c\u0443\u043c 2 SSD).<\/p>\n<\/li>\n<li>\n<p>\u041f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u044b SSD Cache pool:<\/p>\n<\/li>\n<\/ol>\n<ul>\n<li>\n<p>Cache Block Size &#8212; \u0440\u0430\u0437\u043c\u0435\u0440 \u0431\u043b\u043e\u043a\u0430. 1-4MB<\/p>\n<\/li>\n<li>\n<p>Populate-on-read Threshold &#8212; 1-4<\/p>\n<\/li>\n<li>\n<p>Populate-on-write Threshold &#8212; 1-4<\/p>\n<p>3. \u0414\u0438\u0441\u043a\u043e\u0432\u043e\u0435 \u043f\u0440\u043e\u0441\u0442\u0440\u0430\u043d\u0441\u0442\u0432\u043e \u043d\u0430 HDD \u0438 \u043c\u0435\u0441\u0442\u043e \u0432 SSD Cache \u0440\u0430\u0437\u0431\u0438\u0432\u0430\u0435\u0442\u0441\u044f \u043d\u0430 \u0431\u043b\u043e\u043a\u0438 \u0440\u0430\u0437\u043c\u0435\u0440\u043e\u043c Cache Block Size.<\/p>\n<\/li>\n<\/ul>\n<p>4. \u041f\u0440\u0438 \u0447\u0442\u0435\u043d\u0438\u0438 \u0435\u0441\u043b\u0438 \u0442\u0430\u043a\u043e\u0439 \u0431\u043b\u043e\u043a \u0441\u0447\u0438\u0442\u044b\u0432\u0430\u0435\u0442\u0441\u044f Populate-on-read Threshold \u0440\u0430\u0437, \u044d\u0442\u043e\u0442 \u0431\u043b\u043e\u043a \u043f\u0435\u0440\u0435\u043d\u043e\u0441\u0438\u0442\u0441\u044f \u0432 SSD Cache. \u041e\u0447\u0435\u0432\u0438\u0434\u043d\u043e, \u0447\u0442\u043e \u043a \u0431\u043b\u043e\u043a\u0443 \u043f\u0440\u0438\u0432\u044f\u0437\u0430\u043d \u0441\u0447\u0435\u0442\u0447\u0438\u043a \u043e\u0431\u0440\u0430\u0449\u0435\u043d\u0438\u0439 \u0438, \u0432\u0438\u0434\u0438\u043c\u043e, \u0442\u0430\u0439\u043c\u0435\u0440. \u041f\u043e\u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0438\u0435 \u0447\u0442\u0435\u043d\u0438\u044f \u0431\u0435\u0440\u0443\u0442 \u0431\u043b\u043e\u043a \u0443\u0436\u0435 \u0438\u0437 SSD Cache.<\/p>\n<p>5. \u041f\u0440\u0438 \u0437\u0430\u043f\u0438\u0441\u0438 \u0431\u043b\u043e\u043a \u043f\u0438\u0448\u0435\u0442\u0441\u044f \u0432 SSD Cache. Write threshold \u043f\u0440\u0438 \u044d\u0442\u043e\u043c \u043f\u043e\u0445\u043e\u0436\u0435 \u043d\u0435 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442\u0441\u044f (\u043e\u043d\u043e \u0434\u043b\u044f read only \u043a\u044d\u0448\u0430 &#8212; \u0431\u0443\u0434\u0443\u0442 \u043b\u0438 \u0437\u0430\u043f\u0438\u0441\u044b\u0432\u0430\u0435\u043c\u044b\u0435 \u0434\u0430\u043d\u043d\u044b\u0435 \u0441\u043e\u0445\u0440\u0430\u043d\u044f\u0442\u0441\u044f \u0432 \u043a\u044d\u0448\u0435).<\/p>\n<p>\u0418\u0437 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u0438\u0445 \u0442\u0435\u0441\u0442\u043e\u0432\u044b\u0445 \u043f\u0440\u043e\u0433\u043e\u043d\u043e\u0432 \u0441\u0442\u0430\u043b\u043e \u044f\u0441\u043d\u043e, \u0447\u0442\u043e:<\/p>\n<ol>\n<li>\n<p>\u0418\u0437\u043c\u0435\u043d\u0438\u0442\u044c \u0440\u0430\u0437\u043c\u0435\u0440 \u043a\u044d\u0448\u0430 SSD \u0434\u043b\u044f \u0442\u0435\u0441\u0442\u043e\u0432 \u043d\u0438\u043a\u0430\u043a \u043d\u0435\u043b\u044c\u0437\u044f. \u041e\u043f\u0440\u0435\u0434\u0435\u043b\u044f\u0435\u0442\u0441\u044f \u0440\u0430\u0437\u043c\u0435\u0440\u043e\u043c SSD.<\/p>\n<\/li>\n<li>\n<p>\u041d\u0430 RAID 10 \u043f\u0440\u0438 \u0434\u043e\u0431\u0430\u0432\u043b\u0435\u043d\u0438\u0438 SSD Cache \u0431\u0430\u0433 \u0447\u0442\u0435\u043d\u0438\u044f \u0442\u043e\u043b\u044c\u043a\u043e \u0441 \u043d\u0435\u0447\u0435\u0442\u043d\u044b\u0445 \u0434\u0438\u0441\u043a\u043e\u0432 \u0432\u043e\u0441\u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0441\u044f \u043d\u0435\u0437\u0430\u0432\u0438\u0441\u0438\u043c\u043e \u043e\u0442 \u0442\u043e\u0433\u043e \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043b\u0438 Full Erase \u043f\u0440\u0438 \u0438\u043d\u0438\u0446\u0438\u0430\u043b\u0438\u0437\u0430\u0446\u0438\u0438 \u0438\u043b\u0438 \u043d\u0435\u0442. \u041e\u0442\u043a\u043b\u044e\u0447\u0430\u0435\u043c SSD \u043a\u044d\u0448 \u0434\u043b\u044f \u0442\u043e\u043c\u0430 \u0438 \u0447\u0442\u0435\u043d\u0438\u0435 \u0441\u043d\u043e\u0432\u0430 \u043d\u0430\u0447\u0438\u043d\u0430\u0435\u0442 \u043f\u0440\u043e\u0445\u043e\u0434\u0438\u0442\u044c \u0441\u043e \u0432\u0441\u0435\u0445 \u0434\u0438\u0441\u043a\u043e\u0432 (Full-Erase \u0442\u043e\u043c).<\/p>\n<\/li>\n<li>\n<p> \u041f\u0440\u043e\u0447\u0438\u0442\u0430\u043b \u0432\u0435\u0441\u044c \u0442\u043e\u043c (1\u0422\u0411) \u0432 \/dev\/null. \u041f\u0440\u0438 \u044d\u0442\u043e\u043c \u043e\u043d \u0432\u0435\u0441\u044c \u0443\u043c\u0435\u0441\u0442\u0438\u043b\u0441\u044f \u0432 SSD \u043a\u044d\u0448. \u041f\u0440\u0438 \u0447\u0442\u0435\u043d\u0438\u0438 \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u044c \u043a\u0430\u043a \u0441 SSD. HDD \u043d\u0435 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u044e\u0442\u0441\u044f \u0432\u043e\u043e\u0431\u0449\u0435.<\/p>\n<\/li>\n<li>\n<p>\u041f\u0440\u0438 \u0437\u0430\u043f\u0438\u0441\u0438 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u0438\u0445 \u0434\u0435\u0441\u044f\u0442\u043a\u043e\u0432 \u0433\u0438\u0433\u0430\u0431\u0430\u0439\u0442 (\u0432 \u044d\u0442\u043e\u0442 \u043c\u043e\u043c\u0435\u043d\u0442 \u0432\u0441\u0435 \u0434\u0430\u043d\u043d\u044b\u0435 \u0441 \u0442\u043e\u043c\u0430 \u0441\u0438\u0434\u044f\u0442 \u0432 SSD read cache &#8212; \u044d\u0442\u043e \u0432\u0430\u0436\u043d\u043e!) \u0434\u0430\u043d\u043d\u044b\u0435 \u043f\u0438\u0448\u0443\u0442\u0441\u044f \u0442\u043e\u043b\u044c\u043a\u043e \u0432 SSD \u043a\u044d\u0448. \u041f\u043e\u0441\u043b\u0435 \u044d\u0442\u043e\u0433\u043e \u0433\u0434\u0435-\u0442\u043e \u043c\u0438\u043d\u0443\u0442 \u0447\u0435\u0440\u0435\u0437 10 \u0434\u0430\u043d\u043d\u044b\u0435 \u043d\u0430\u0447\u0438\u043d\u0430\u044e\u0442 \u0441\u0431\u0440\u0430\u0441\u044b\u0432\u0430\u0442\u044c\u0441\u044f \u043d\u0430 HDD.<\/p>\n<\/li>\n<li>\n<p>\u041f\u043e\u0441\u043b\u0435 \u0441\u0431\u0440\u043e\u0441\u0430 SSD \u043a\u044d\u0448\u0430 (Disable\/Enable) \u043d\u0430 RAID 10 \u043f\u0440\u0438 \u0437\u0430\u043f\u0438\u0441\u0438 \u0431\u043b\u043e\u043a\u043e\u043c 4\u043a \u043d\u0430\u0431\u043b\u044e\u0434\u0430\u044e \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0443 \u043d\u0430 \u043d\u0435\u0447\u0435\u0442\u043d\u044b\u0435 HDD \u0432 \u043f\u0443\u043b\u0435, \u0434\u0438\u0441\u043a\u0438 \u0432 SSD \u043a\u044d\u0448\u0435 \u0438 \u043d\u0438\u0437\u043a\u0443\u044e \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u044c. \u0414\u0435\u043b\u043e \u0432 \u0442\u043e\u043c, \u0447\u0442\u043e \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u043b\u0435\u0440 \u043e\u043f\u0435\u0440\u0438\u0440\u0443\u0435\u0442 \u0431\u043b\u043e\u043a\u0430\u043c\u0438 \u0440\u0430\u0437\u043c\u0435\u0440\u043e\u043c Cache Block Size (1MB \u043c\u0438\u043d\u0438\u043c\u0443\u043c). \u0422.\u0435. \u043f\u0440\u0438 \u0437\u0430\u043f\u0438\u0441\u0438 4\u043a \u0431\u043b\u043e\u043a\u0430 \u043d\u0430 \u0441\u0430\u043c\u043e\u043c \u0434\u0435\u043b\u0435 \u043f\u0440\u043e\u0438\u0441\u0445\u043e\u0434\u0438\u0442 \u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0435\u0435.<\/p>\n<p>\u041f\u0440\u0438 \u043f\u0440\u043e\u0433\u0440\u0435\u0432\u0435 \u043a\u044d\u0448\u0430 \u044d\u0442\u043e \u0431\u0443\u0434\u0435\u0442 \u0434\u0430\u0432\u0430\u0442\u044c \u043b\u0438\u0448\u043d\u044e\u044e \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0443. \u0410 \u0441\u0430\u043c\u043e\u0435 \u0433\u043b\u0430\u0432\u043d\u043e\u0435 \u0430\u0431\u0441\u043e\u043b\u044e\u0442\u043d\u043e \u043d\u0435\u043f\u043e\u043d\u044f\u0442\u043d\u043e \u043a\u0430\u043a \u044d\u0442\u043e \u043a\u043e\u043b\u0438\u0447\u0435\u0441\u0442\u0432\u0435\u043d\u043d\u043e \u043f\u0440\u043e\u0442\u0435\u0441\u0442\u0438\u0440\u043e\u0432\u0430\u0442\u044c.<\/p>\n<\/li>\n<\/ol>\n<p>\u0415\u0441\u043b\u0438 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u043c \u043f\u043e\u043b\u043d\u043e\u0441\u0442\u044c\u044e \u0441\u043b\u0443\u0447\u0430\u0439\u043d\u043e\u0435 \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0435\u043b\u0435\u043d\u0438\u0435 \u0438 \u0440\u0430\u0437\u043c\u0435\u0440 \u0442\u043e\u043c\u0430 \u043d\u0430\u043c\u043d\u043e\u0433\u043e (\u0432 10 \u0440\u0430\u0437) \u0431\u043e\u043b\u044c\u0448\u0435, \u0447\u0435\u043c SSD Cache \u0438\u043c\u0435\u0435\u043c \u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0435\u0435:<\/p>\n<ul>\n<li>\n<p>HDD \u0432 SSD \u043a\u044d\u0448 \u0441\u0447\u0438\u0442\u044b\u0432\u0430\u0435\u0442\u0441\u044f Cache Block Size \u0434\u0430\u043d\u043d\u044b\u0445.<\/p>\n<\/li>\n<li>\n<p>\u0411\u043b\u043e\u043a 4\u043a \u0434\u0430\u043d\u043d\u044b\u0445 \u0432 \u043a\u044d\u0448\u0435 \u043c\u0435\u043d\u044f\u0435\u0442\u0441\u044f \u043d\u0430 \u0442\u043e, \u0447\u0442\u043e \u043c\u044b \u0437\u0430\u043f\u0438\u0441\u0430\u043b\u0438.<\/p>\n<\/li>\n<\/ul>\n<p>\u041f\u0440\u0438 \u0441\u043b\u0443\u0447\u0430\u0439\u043d\u043e\u043c \u0447\u0442\u0435\u043d\u0438\u0438 \u043c\u0435\u043b\u043a\u0438\u043c \u0431\u043b\u043e\u043a\u043e\u043c \u0440\u0430\u0437\u043d\u0438\u0446\u044b \u0432 \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u0438 \u043f\u043e\u0447\u0442\u0438 \u043d\u0435\u0442, \u0438\u043b\u0438 \u0438\u043c\u0435\u0435\u043c \u043d\u0435\u0437\u043d\u0430\u0447\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0435 \u0441\u043d\u0438\u0436\u0435\u043d\u0438\u0435 \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u0438 (\u0442\u0435\u043c \u0431\u043e\u043b\u044c\u0448\u0435\u0435, \u0447\u0435\u043c \u043c\u0435\u043d\u044c\u0448\u0435 \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u0435 Populate-on-read Threshold). \u041f\u0440\u043e\u0438\u0441\u0445\u043e\u0434\u0438\u0442 \u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0435\u0435: \u043f\u0440\u0438 \u0441\u0447\u0438\u0442\u044b\u0432\u0430\u043d\u0438\u0438 \u043c\u0430\u043b\u0435\u043d\u044c\u043a\u043e\u0433\u043e \u0431\u043b\u043e\u043a\u0430 (1 \u0438\u043b\u0438 \u0431\u043e\u043b\u0435\u0435 \u0440\u0430\u0437 \u0432 \u0437\u0430\u0432\u0438\u0441\u0438\u043c\u043e\u0441\u0442\u0438 \u043e\u0442 Populate-on-read Threshold) \u0441\u0447\u0438\u0442\u044b\u0432\u0430\u0435\u0442\u0441\u044f \u0432 SSD Cache \u0446\u0435\u043b\u0438\u043a\u043e\u043c Cache Block Size (1-4\u041c\u0411). \u041f\u043e\u0441\u043b\u0435 \u0447\u0435\u0433\u043e \u0437\u0430\u043f\u0440\u043e\u0441\u044b \u043a \u044d\u0442\u043e\u043c\u0443 \u0431\u043b\u043e\u043a\u0443 \u0431\u0443\u0434\u0443\u0442 \u043e\u0431\u0440\u0430\u0449\u0430\u0442\u044c\u0441\u044f \u043a SSD. \u041d\u043e \u0435\u0441\u043b\u0438 \u0440\u0430\u0437\u043c\u0435\u0440 \u0442\u043e\u043c\u0430 \u0432 10 \u0440\u0430\u0437 \u0431\u043e\u043b\u044c\u0448\u0435, \u0447\u0435\u043c SSD Cache, \u043f\u0440\u0438\u0440\u043e\u0441\u0442 \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u0438 \u043d\u0435 \u0431\u0443\u0434\u0435\u0442 \u0431\u043e\u043b\u044c\u0448\u0435 10%. \u0418 \u0435\u0433\u043e \u043f\u043e\u043b\u043d\u043e\u0441\u0442\u044c\u044e \u0441\u044a\u0435\u0441\u0442 overhead \u043d\u0430 \u0447\u0442\u0435\u043d\u0438\u0435 \u0431\u043e\u043b\u044c\u0448\u043e\u0433\u043e \u0431\u043b\u043e\u043a\u0430 \u0441 HDD \u043d\u0430 SSD.<\/p>\n<p>\u041f\u0440\u0438 \u0441\u043b\u0443\u0447\u0430\u0439\u043d\u043e\u0439 \u0437\u0430\u043f\u0438\u0441\u0438 \u043c\u0435\u043b\u043a\u0438\u043c \u0431\u043b\u043e\u043a\u043e\u043c \u0432 \u043f\u0435\u0440\u0432\u044b\u0435 10 \u043c\u0438\u043d\u0443\u0442 (\u0437\u0430\u0434\u0435\u0440\u0436\u043a\u0430 \u043f\u0435\u0440\u0435\u0434 \u043d\u0430\u0447\u0430\u043b\u043e\u043c \u0441\u0431\u0440\u043e\u0441\u0430 \u0434\u0430\u043d\u043d\u044b\u0445 \u0438\u0437 SSD Cache \u043d\u0430 HDD \u0435\u0441\u043b\u0438 \u043a \u0434\u0430\u043d\u043d\u044b\u043c \u0431\u043e\u043b\u044c\u0448\u0435 \u043d\u0435 \u0431\u044b\u043b\u043e \u043e\u0431\u0440\u0430\u0449\u0435\u043d\u0438\u0439) \u0432\u0441\u0435 \u0432\u044b\u0433\u043b\u044f\u0434\u0438\u0442 \u043f\u0440\u0435\u043a\u0440\u0430\u0441\u043d\u043e &#8212; \u0444\u0430\u043a\u0442\u0438\u0447\u0435\u0441\u043a\u0438 \u0437\u0430\u043f\u0438\u0441\u044c \u043c\u0435\u043b\u043a\u0438\u043c \u0431\u043b\u043e\u043a\u043e\u043c \u043f\u0440\u0435\u0432\u0440\u0430\u0449\u0430\u0435\u0442\u0441\u044f \u0432 \u0447\u0442\u0435\u043d\u0438\u0435 c HDD \u0431\u043e\u043b\u044c\u0448\u0438\u043c \u0431\u043b\u043e\u043a\u043e\u043c.<\/p>\n<p>\u0410 \u0432\u043e\u0442 \u0447\u0435\u0440\u0435\u0437 10 \u043c\u0438\u043d\u0443\u0442 \u043d\u0430\u0447\u0438\u043d\u0430\u0435\u0442\u0441\u044f \u0441\u0431\u0440\u043e\u0441 SSD \u043a\u044d\u0448\u0430 \u043d\u0430 HDD \u0431\u043e\u043b\u044c\u0448\u0438\u043c \u0431\u043b\u043e\u043a\u043e\u043c. \u0418 \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u044c \u0440\u0435\u0437\u043a\u043e \u043f\u0430\u0434\u0430\u0435\u0442.<\/p>\n<p>\u0417\u0430\u043c\u0435\u0447\u0430\u043d\u0438\u0435: fio \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442 \u043e\u0434\u043d\u043e \u0438 \u0442\u043e \u0436\u0435 \u043d\u0430\u0447\u0430\u043b\u044c\u043d\u043e\u0435 \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u0435 \u0434\u043b\u044f \u0433\u0435\u043d\u0435\u0440\u0430\u0442\u043e\u0440\u0430 \u0441\u043b\u0443\u0447\u0430\u0439\u043d\u044b\u0445 \u0447\u0438\u0441\u0435\u043b. \u0422.\u0435. \u043f\u0440\u0438 \u0441 \u043a\u0430\u0436\u0434\u043e\u043c \u0437\u0430\u043f\u0443\u0441\u043a\u0435 \u0438\u0434\u0435\u0442 \u043e\u0431\u0440\u0430\u0449\u0435\u043d\u0438\u0435 \u043a \u043e\u0434\u043d\u0438\u043c \u0438 \u0442\u0435\u043c \u0436\u0435 \u0441\u0435\u043a\u0442\u043e\u0440\u0430\u043c. \u0427\u0442\u043e \u0432 \u0441\u043b\u0443\u0447\u0430\u0435 \u0441 SSD Cache \u0434\u0430\u0435\u0442 \u043d\u0435\u0432\u0435\u0440\u043d\u044b\u0435 \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u044b. \u0421\u043c. \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440 randrepeat.<\/p>\n<p>\u0422\u0430\u043a\u0438\u043c \u043e\u0431\u0440\u0430\u0437\u043e\u043c, \u0434\u043b\u044f \u0442\u0435\u0441\u0442\u0430 SSD Cache \u0431\u0443\u0434\u0435\u0442 \u0432\u0430\u0436\u043d\u043e \u043d\u0435 \u0442\u043e\u043b\u044c\u043a\u043e \u0441\u043e\u043e\u0442\u043d\u043e\u0448\u0435\u043d\u0438\u0435 R\/W, \u043a\u043e\u043b-\u0432\u043e IOPS \u0438 \u0442.\u043f., \u043d\u043e \u0438 \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0435\u043b\u0435\u043d\u0438\u0435 I\/O \u043f\u043e \u0431\u043b\u043e\u043a\u0430\u043c \u0442\u043e\u043c\u0430.<\/p>\n<p>\u0410 \u0432\u0440\u0435\u043c\u044f \u043f\u0440\u043e\u0433\u0440\u0435\u0432\u0430 \u043a\u044d\u0448\u0430 \u0434\u0435\u043b\u0430\u0435\u0442 \u0442\u0430\u043a\u043e\u0435 \u0442\u0435\u0441\u0442\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u0435 \u043d\u0435\u043f\u0440\u0438\u0435\u043c\u043b\u0435\u043c\u043e \u0434\u043e\u043b\u0433\u0438\u043c.<\/p>\n<p>\u041e\u0446\u0435\u043d\u043a\u0430 \u0441\u0438\u0442\u0443\u0430\u0446\u0438\u0438 \u043c\u0435\u0442\u043e\u0434\u043e\u043c 3\u041f (\u043f\u0430\u043b\u0435\u0446-\u043f\u043e\u043b-\u043f\u043e\u0442\u043e\u043b\u043e\u043a), \u043a\u043e\u043d\u0441\u0443\u043b\u044c\u0442\u0430\u0446\u0438\u0438 \u0441 \u043a\u043e\u043b\u043b\u0435\u0433\u0430\u043c\u0438, \u0438 \u0442\u043e\u0442 \u0444\u0430\u043a\u0442, \u0447\u0442\u043e \u00ab\u0433\u043e\u0440\u044f\u0447\u0438\u0445\u00bb \u0434\u0430\u043d\u043d\u044b\u0445 \u0443 \u043d\u0430\u0441 \u043e\u0442\u043d\u043e\u0441\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u043d\u0435\u043c\u043d\u043e\u0433\u043e \u043f\u0440\u0438\u0432\u0435\u043b\u0438 \u043a \u0434\u0432\u0443\u043c \u0432\u044b\u0432\u043e\u0434\u0430\u043c:<\/p>\n<ul>\n<li>\n<p>\u041d\u0430 \u043d\u0430\u0448\u0435\u0439 \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0435 SSD \u043d\u0430\u0432\u0435\u0440\u043d\u044f\u043a\u0430 \u0434\u0430\u0441\u0442 \u043e\u0449\u0443\u0442\u0438\u043c\u044b\u0439 \u043f\u0440\u0438\u0440\u043e\u0441\u0442 \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u0438, \u043d\u043e \u0438\u0437\u043c\u0435\u0440\u0438\u0442\u044c \u0435\u0433\u043e \u043d\u0430 \u0441\u0438\u043d\u0442\u0435\u0442\u0438\u0447\u0435\u0441\u043a\u0438\u0445 \u0442\u0435\u0441\u0442\u0430\u0445 \u043d\u0435 \u043f\u0440\u0435\u0434\u0441\u0442\u0430\u0432\u043b\u044f\u0435\u0442\u0441\u044f \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u044b\u043c;<\/p>\n<\/li>\n<li>\n<p>\u0410 \u0434\u0430\u0432\u0430\u0439\u0442\u0435 \u0437\u0430\u043f\u0443\u0441\u0442\u0438\u043c \u0421\u0425\u0414 \u0432 \u0440\u0430\u0431\u043e\u0442\u0443, \u043c\u0438\u0433\u0440\u0438\u0440\u0443\u0435\u043c \u043d\u0430 \u043d\u0435\u0435 \u0447\u0430\u0441\u0442\u044c \u0432\u0438\u0440\u0442\u0443\u0430\u043b\u043e\u043a, \u0441\u043e\u0431\u0435\u0440\u0435\u043c \u0441\u0442\u0430\u0442\u0438\u0441\u0442\u0438\u043a\u0443 \u043f\u043e latency, \u0430 \u043f\u043e\u0442\u043e\u043c \u0432\u043a\u043b\u044e\u0447\u0438\u043c SSD Cache \u0438 \u0431\u0443\u0434\u0435\u043c \u0441\u0440\u0430\u0432\u043d\u0438\u0432\u0430\u0442\u044c \u0438\u043c\u0435\u043d\u043d\u043e latency \u0434\u043b\u044f \u043e\u0446\u0435\u043d\u043a\u0438 \u044d\u0444\u0444\u0435\u043a\u0442\u0438\u0432\u043d\u043e\u0441\u0442\u0438 SSD Cache.<\/p>\n<\/li>\n<\/ul>\n<h4>5.5 Auto-Tiering<\/h4>\n<p>\u0412 \u0446\u0435\u043b\u043e\u043c \u0435\u0441\u0442\u044c \u043e\u0431\u0449\u0438\u0435 \u0447\u0435\u0440\u0442\u044b \u0441 SSD Cache. \u041d\u0430\u0447\u0438\u043d\u0430\u044f \u0441 \u0442\u043e\u0433\u043e, \u0447\u0442\u043e \u0434\u043b\u044f \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043d\u0438\u044f \u0442\u0440\u0435\u0431\u0443\u0435\u0442\u0441\u044f \u043e\u0442\u0434\u0435\u043b\u044c\u043d\u0430\u044f \u043b\u0438\u0446\u0435\u043d\u0437\u0438\u044f.<\/p>\n<ul>\n<li>\n<p>Auto-tiering \u043f\u0443\u043b \u0441\u043e\u0441\u0442\u043e\u0438\u0442 \u0438\u0437 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u0438\u0445 \u0433\u0440\u0443\u043f\u043f \u0434\u0438\u0441\u043a\u043e\u0432. \u041c\u0435\u0441\u0442\u043e \u0432 \u043f\u0443\u043b\u0435 \u0434\u0435\u043b\u0438\u0442\u0441\u044f \u043d\u0430 \u0431\u043b\u043e\u043a\u0438 \u043f\u043e 1\u0413\u0411, \u043d\u0430\u0437\u044b\u0432\u0430\u0435\u043c\u044b\u0435 Sub-LUN. \u0414\u043b\u044f \u043a\u0430\u0436\u0434\u043e\u0433\u043e Sub-LUN \u0441\u043e\u0431\u0438\u0440\u0430\u0435\u0442\u0441\u044f \u0441\u0442\u0430\u0442\u0438\u0441\u0442\u0438\u043a\u0430. \u041f\u043e\u043b\u0443\u0447\u0435\u043d\u043d\u043e\u0435 \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u0435 \u0440\u0430\u0437 \u0432 \u0441\u0443\u0442\u043a\u0438 \u0434\u0435\u043b\u0438\u0442\u0441\u044f \u043f\u043e\u043f\u043e\u043b\u0430\u043c. \u041f\u043e \u0440\u0430\u0441\u043f\u0438\u0441\u0430\u043d\u0438\u044e \u0432\u044b\u043f\u043e\u043b\u043d\u044f\u0435\u0442\u0441\u044f \u0437\u0430\u0434\u0430\u0447\u0430, \u0432\u044b\u043f\u043e\u043b\u043d\u044f\u044e\u0449\u0430\u044f \u043f\u0435\u0440\u0435\u043c\u0435\u0449\u0435\u043d\u0438\u0435 &#171;\u0433\u043e\u0440\u044f\u0447\u0438\u0445&#187; \u0434\u0430\u043d\u043d\u044b\u0445 \u043d\u0430 \u0431\u043e\u043b\u0435\u0435 \u0431\u044b\u0441\u0442\u0440\u0443\u044e \u0433\u0440\u0443\u043f\u043f\u0443, \u0430 \u0440\u0435\u0434\u043a\u043e \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u043c\u044b\u0445 \u0434\u0430\u043d\u043d\u044b\u0445 \u043d\u0430 \u043c\u0435\u0434\u043b\u0435\u043d\u043d\u0443\u044e.<\/p>\n<\/li>\n<li>\n<p>\u041f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e \u0441 auto-tiering \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442\u0441\u044f thin-provisioning. Thick-provisioned \u043f\u0443\u043b \u043c\u043e\u0436\u043d\u043e \u043a\u043e\u043d\u0432\u0435\u0440\u0442\u0438\u0440\u043e\u0432\u0430\u0442\u044c \u0432 auto-tiering \u043f\u0443\u0442\u0435\u043c \u0434\u043e\u0431\u0430\u0432\u043b\u0435\u043d\u0438\u044f \u0433\u0440\u0443\u043f\u043f\u044b \u0441 \u0431\u043e\u043b\u0435\u0435 \u0432\u044b\u0441\u043e\u043a\u0438\u043c      \u0442\u0438\u0440\u043e\u043c. \u041e\u0434\u043d\u0430\u043a\u043e \u0434\u043e\u0441\u0442\u0443\u043f\u043d\u043e\u0435 \u043c\u0435\u0441\u0442\u043e \u0432 \u043f\u0443\u043b\u0435 \u0432 \u0441\u043b\u0443\u0447\u0430\u0435 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043d\u0438\u044f thick-provisioning \u043d\u0435 \u0443\u0432\u0435\u043b\u0438\u0447\u0438\u0442\u0441\u044f (\u0434\u043b\u044f thin-provisioning \u043e\u0431\u044a\u0435\u043c \u0433\u0440\u0443\u043f\u043f \u0434\u0438\u0441\u043a\u043e\u0432 \u0432 auto-tiering \u043f\u0443\u043b\u0435 \u0441\u0443\u043c\u043c\u0438\u0440\u0443\u0435\u0442\u0441\u044f). \u041a\u043e\u043d\u0432\u0435\u0440\u0442\u0430\u0446\u0438\u044f \u043d\u0435\u043e\u0431\u0440\u0430\u0442\u0438\u043c\u0430, \u0442.\u0435. \u0443\u0434\u0430\u043b\u0438\u0442\u044c \u0433\u0440\u0443\u043f\u043f\u0443 \u0434\u0438\u0441\u043a\u043e\u0432 \u0432\u044b\u0441\u043e\u043a\u043e\u0433\u043e \u0442\u0438\u0440\u0430 \u0438\u0437 auto-tiering \u043f\u0443\u043b\u0430 \u0443\u0436\u0435 \u043d\u0435\u043b\u044c\u0437\u044f.<\/p>\n<\/li>\n<li>\n<p>\u041a\u043e\u043d\u0432\u0435\u0440\u0442\u0430\u0446\u0438\u044f \u0437\u0430\u043d\u0438\u043c\u0430\u0435\u0442 \u0434\u043e\u0432\u043e\u043b\u044c\u043d\u043e \u0434\u043b\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0435 \u0432\u0440\u0435\u043c\u044f. \u041f\u0440\u0438 \u044d\u0442\u043e\u043c \u043d\u0438\u043a\u0430\u043a\u043e\u0433\u043e \u0441\u043f\u043e\u0441\u043e\u0431\u0430 \u043f\u043e\u0441\u043c\u043e\u0442\u0440\u0435\u0442\u044c \u043f\u0440\u043e\u0433\u0440\u0435\u0441\u0441 \u043d\u0435\u0442.<\/p>\n<\/li>\n<li>\n<p>\u0421\u0443\u0449\u0435\u0441\u0442\u0432\u0443\u0435\u0442 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u043f\u043e\u043b\u0438\u0442\u0438\u043a, \u0438\u0437 \u043a\u043e\u0442\u043e\u0440\u044b\u0445 \u043d\u0430\u0438\u0431\u043e\u043b\u0435\u0435 \u043b\u044e\u0431\u043e\u043f\u044b\u0442\u043d\u0430 Start Highest then Auto Tiering. \u0422.\u0435. \u043d\u043e\u0432\u044b\u0435 \u0434\u0430\u043d\u043d\u044b\u0435 \u043f\u0438\u0448\u0443\u0442\u0441\u044f \u043d\u0430 \u0441\u0430\u043c\u044b\u0435 \u0431\u044b\u0441\u0442\u0440\u044b\u0435 \u0434\u0438\u0441\u043a\u0438. \u0410 \u0437\u0430\u0442\u0435\u043c \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u0441\u0442\u0430\u043d\u0434\u0430\u0440\u0442\u043d\u044b\u0439 auto-tiering. \u0412 \u043f\u0440\u043e\u0446\u0435\u0441\u0441\u0435 \u043a\u043e\u043d\u0432\u0435\u0440\u0442\u0430\u0446\u0438\u0438 thick-\u043f\u0443\u043b\u0430 \u0432 auto-tiering      \u043f\u043e\u043b\u0438\u0442\u0438\u043a\u0430 \u0440\u0430\u0431\u043e\u0442\u0430\u0442\u044c \u043d\u0435 \u0431\u0443\u0434\u0435\u0442. \u042f \u043f\u043e\u0442\u0440\u0430\u0442\u0438\u043b \u0434\u043e\u0432\u043e\u043b\u044c\u043d\u043e \u043c\u043d\u043e\u0433\u043e \u0432\u0440\u0435\u043c\u0435\u043d\u0438, \u043f\u044b\u0442\u0430\u044f\u0441\u044c      \u043f\u043e\u043d\u044f\u0442\u044c, \u043f\u043e\u0447\u0435\u043c\u0443 \u0434\u0430\u043d\u043d\u044b\u0435 \u043f\u0438\u0448\u0443\u0442\u0441\u044f \u043d\u0430 HDD \u0445\u043e\u0442\u044f \u0432\u044b\u0431\u0440\u0430\u043d\u043e Start Highest then Auto      Tiering.<\/p>\n<\/li>\n<li>\n<p>\u0412 \u0441\u043b\u0443\u0436\u0435\u0431\u043d\u044b\u0445 \u0446\u0435\u043b\u044f\u0445 \u0440\u0435\u0437\u0435\u0440\u0432\u0438\u0440\u0443\u0435\u0442\u0441\u044f 10% \u043c\u0435\u0441\u0442\u0430 \u043d\u0430 \u0433\u0440\u0443\u043f\u043f\u0430\u0445 \u0434\u0438\u0441\u043a\u043e\u0432 \u0432\u0441\u0435\u0445 \u0442\u0438\u0440\u043e\u0432 \u043a\u0440\u043e\u043c\u0435 \u0441\u0430\u043c\u043e\u0433\u043e \u043d\u0438\u0437\u043a\u043e\u0433\u043e.<\/p>\n<\/li>\n<li>\n<p>\u0420\u0430\u0437 \u0432 \u0447\u0430\u0441 \u043e\u0431\u0441\u0447\u0438\u0442\u044b\u0432\u0430\u0435\u0442\u0441\u044f \u043f\u0440\u043e\u043c\u0435\u0436\u0443\u0442\u043e\u0447\u043d\u0430\u044f \u0441\u0442\u0430\u0442\u0438\u0441\u0442\u0438\u043a\u0430 Auto-tiering.<\/p>\n<\/li>\n<li>\n<p>\u041f\u0435\u0440\u0435\u043c\u0435\u0449\u0435\u043d\u0438\u0435 \u0434\u0430\u043d\u043d\u044b\u0445 \u043c\u0435\u0436\u0434\u0443 \u0442\u0438\u0440\u0430\u043c\u0438 \u0432\u044b\u043f\u043e\u043b\u043d\u044f\u0435\u0442\u0441\u044f \u043f\u043e \u0440\u0430\u0441\u043f\u0438\u0441\u0430\u043d\u0438\u044e. \u041c\u043e\u0436\u043d\u043e \u0437\u0430\u0434\u0430\u0442\u044c \u0432\u0440\u0435\u043c\u044f, \u043f\u0440\u043e\u0434\u043e\u043b\u0436\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u044c \u0438 \u043f\u0440\u0438\u043e\u0440\u0438\u0442\u0435\u0442 (\u0432\u044b\u0441\u043e\u043a\u0438\u0439, \u0441\u0440\u0435\u0434\u043d\u0438\u0439 \u0438 \u043d\u0438\u0437\u043a\u0438\u0439) \u043f\u0435\u0440\u0435\u043d\u043e\u0441\u0430 \u0434\u0430\u043d\u043d\u044b\u0445.<\/p>\n<\/li>\n<\/ul>\n<p>\u00a0Auto-tiering \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c \u043d\u0435 \u043f\u0440\u0435\u0434\u043f\u043e\u043b\u0430\u0433\u0430\u043b\u043e\u0441\u044c, \u043f\u043e\u0441\u043a\u043e\u043b\u044c\u043a\u0443 SSD \u043a\u044d\u0448 \u043a\u0430\u0437\u0430\u043b\u0441\u044f \u0431\u043e\u043b\u0435\u0435 \u00ab\u043f\u0435\u0440\u0441\u043f\u0435\u043a\u0442\u0438\u0432\u043d\u044b\u043c\u00bb. \u041f\u043e\u044d\u0442\u043e\u043c\u0443 \u0442\u0435\u0441\u0442\u044b \u043f\u0440\u043e\u0432\u043e\u0434\u0438\u043b\u0438\u0441\u044c \u043b\u0438\u0448\u044c \u0441 \u0446\u0435\u043b\u044c\u044e \u043f\u043e\u0441\u043c\u043e\u0442\u0440\u0435\u0442\u044c, \u043a\u0430\u043a \u0431\u0443\u0434\u0443\u0442 \u0440\u0430\u0431\u043e\u0442\u0430\u0442\u044c \u0440\u0430\u0437\u043d\u044b\u0435 \u0442\u0438\u043f\u044b \u043f\u0443\u043b\u043e\u0432 (thin\/thick provisioned) \u0438 \u0440\u0430\u0437\u043d\u044b\u0435 \u043f\u043e\u043b\u0438\u0442\u0438\u043a\u0438.<\/p>\n<p>\u041f\u0440\u043e\u0432\u0435\u0440\u0438\u043b, \u043a\u0430\u043a \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 free space reclamation \u0432 thin-\u043f\u0443\u043b\u0430\u0445 (\u0442\u0440\u0435\u0431\u0443\u0435\u0442\u0441\u044f \u043f\u0435\u0440\u0435\u0437\u0430\u043f\u0438\u0441\u044c \u0441\u0432\u043e\u0431\u043e\u0434\u043d\u043e\u0433\u043e \u043c\u0435\u0441\u0442\u0430 \u043d\u0443\u043b\u044f\u043c\u0438, discard \u043d\u0435 \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u0438\u0432\u0430\u0435\u0442\u0441\u044f).<\/p>\n<p>\u0418\u043d\u0442\u0435\u0440\u0435\u0441\u043d\u043e\u0439 \u043e\u0441\u043e\u0431\u0435\u043d\u043d\u043e\u0441\u0442\u044c\u044e \u0441\u0442\u0430\u043b\u043e \u0442\u043e, \u0447\u0442\u043e \u0435\u0441\u043b\u0438 \u0441\u043e\u0437\u0434\u0430\u0442\u044c thick-provisioned \u043f\u0443\u043b RAID10, \u0432 \u043d\u0435\u043c \u0442\u043e\u043c, \u0438\u043d\u0438\u0446\u0438\u0430\u043b\u0438\u0437\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u044b\u0439 \u0441 Full Erase, \u0430 \u0437\u0430\u0442\u0435\u043c \u043a\u043e\u043d\u0432\u0435\u0440\u0442\u0438\u0440\u043e\u0432\u0430\u0442\u044c \u043f\u0443\u043b \u0432 auto-tiering, \u0442\u043e, \u0432 \u043e\u0442\u043b\u0438\u0447\u0438\u0435 \u043e\u0442 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043d\u0438\u044f SSD Cache, \u0431\u0430\u0433 \u0447\u0442\u0435\u043d\u0438\u044f \u0442\u043e\u043b\u044c\u043a\u043e \u0441 \u043d\u0435\u0447\u0435\u0442\u043d\u044b\u0445 \u0434\u0438\u0441\u043a\u043e\u0432 \u0432 \u043f\u0443\u043b\u0435 \u043d\u0435 \u0432\u043e\u0441\u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0441\u044f.<\/p>\n<h4>5.6 \u0422\u0435\u0441\u0442\u044b \u043a\u043e\u043c\u043f\u043b\u0435\u043a\u0441\u0430 \u0412\u0438\u0434\u0435\u043e\u043f\u043e\u0440\u0442\u0430\u043b<\/h4>\n<p>\u041f\u043e\u043b\u044c\u0437\u0443\u044f\u0441\u044c \u043c\u043e\u043c\u0435\u043d\u0442\u043e\u043c, \u043d\u0430 \u044d\u0442\u043e\u043c \u0436\u0435 \u043e\u0431\u043e\u0440\u0443\u0434\u043e\u0432\u0430\u043d\u0438\u0438 \u043f\u0440\u043e\u0432\u0435\u043b\u0438 \u043d\u0430\u0433\u0440\u0443\u0437\u043e\u0447\u043d\u043e\u0435 \u0442\u0435\u0441\u0442\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u0435 \u0441\u0438\u0441\u0442\u0435\u043c\u044b \u0412\u0438\u0434\u0435\u043e\u043f\u043e\u0440\u0442\u0430\u043b. \u0421\u0435\u0440\u0432\u0435\u0440 VP-GW \u043f\u043e\u043b\u0443\u0447\u0430\u043b N \u043f\u043e\u0442\u043e\u043a\u043e\u0432 \u043f\u043e 1Mbit\/s, \u044d\u043c\u0443\u043b\u0438\u0440\u0443\u044e\u0449\u0438\u0445 \u043a\u0430\u043c\u0435\u0440\u044b \u0432\u0438\u0434\u0435\u043e\u043d\u0430\u0431\u043b\u044e\u0434\u0435\u043d\u0438\u044f, \u0438 \u043f\u0438\u0441\u0430\u043b \u0438\u0445 \u0432 \u0430\u0440\u0445\u0438\u0432.<\/p>\n<p>\u041a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044f \u0421\u0425\u0414:  Thick-provisioned \u043f\u0443\u043b RAID10 \u0441\u043e \u0432\u043a\u043b\u044e\u0447\u0435\u043d\u043d\u044b\u043c SSD Cache, \u0442\u043e\u043c \u0438\u043d\u0438\u0446\u0438\u0430\u043b\u0438\u0437\u0438\u0440\u043e\u0432\u0430\u043d Full Erase, \u043f\u043e\u0434\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435 \u043f\u043e FC 16G, \u0441 MPIO.<\/p>\n<p> \u0422\u0435\u0441\u0442\u0430\u043c\u0438 \u0437\u0430\u043d\u0438\u043c\u0430\u043b\u0441\u044f \u043d\u0435 \u044f, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 \u0438\u0437 \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u043e\u0432 \u0441\u043e\u0445\u0440\u0430\u043d\u0438\u043b\u0430\u0441\u044c \u0442\u043e\u043b\u044c\u043a\u043e \u0443\u0442\u0438\u043b\u0438\u0437\u0430\u0446\u0438\u044f \u0434\u0438\u0441\u043a\u0430:<\/p>\n<ul>\n<li>\n<p>700 \u043a\u0430\u043c\u0435\u0440 \u2014 85% \u0443\u0442\u0438\u043b\u0438\u0437\u0430\u0446\u0438\u0438.<\/p>\n<\/li>\n<li>\n<p>750 \u043a\u0430\u043c\u0435\u0440 \u2014 90% \u0443\u0442\u0438\u043b\u0438\u0437\u0430\u0446\u0438\u0438.<\/p>\n<\/li>\n<\/ul>\n<h3>5.7 \u0412\u044b\u0432\u043e\u0434\u044b \u043f\u043e \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u0430\u043c \u0442\u0435\u0441\u0442\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f<\/h3>\n<p>\u0411\u044b\u043b\u043e \u043f\u0440\u043e\u0442\u0435\u0441\u0442\u0438\u0440\u043e\u0432\u0430\u043d\u043e \u0435\u0449\u0435 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u0439 \u043f\u0443\u043b\u0430. RAID 5, RAID 5EE, RAID 60, RAID 60EE. \u0412 \u0446\u0435\u043b\u043e\u043c \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u044b \u043f\u043e\u043b\u0443\u0447\u0438\u043b\u0438\u0441\u044c \u043e\u0436\u0438\u0434\u0430\u0435\u043c\u044b\u0435.<\/p>\n<figure class=\"full-width\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/habrastorage.org\/r\/w780q1\/getpro\/habr\/upload_files\/cc4\/a4b\/e60\/cc4a4be60a417e8b5c2f541d0d655d70.jpg\" width=\"605\" height=\"340\" data-src=\"https:\/\/habrastorage.org\/getpro\/habr\/upload_files\/cc4\/a4b\/e60\/cc4a4be60a417e8b5c2f541d0d655d70.jpg\" data-blurred=\"true\"\/><figcaption><\/figcaption><\/figure>\n<ul>\n<li>\n<p>RAID 5\/5EE \u043f\u043e \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u0438 \u0437\u0430\u043f\u0438\u0441\u0438 \u0437\u0430\u043d\u044f\u043b \u043f\u0440\u043e\u043c\u0435\u0436\u0443\u0442\u043e\u0447\u043d\u043e\u0435 \u043f\u043e\u043b\u043e\u0436\u0435\u043d\u0438\u0435 \u043c\u0435\u0436\u0434\u0443 RAID 10 \u0438 RAID 6\/6EE.<\/p>\n<\/li>\n<li>\n<p>Rebuild \u0432 RAID EE \u0434\u0435\u0439\u0441\u0442\u0432\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u043f\u0440\u043e\u0438\u0441\u0445\u043e\u0434\u0438\u0442 \u0431\u044b\u0441\u0442\u0440\u0435\u0435. \u0414\u043b\u044f \u043f\u0443\u043b\u0430 RAID 6EE \u0438 \u0435\u0434\u0438\u043d\u0441\u0442\u0432\u0435\u043d\u043d\u043e\u0433\u043e \u0442\u043e\u043c\u0430 (thick provisioned) \u043e\u0431\u044a\u0435\u043c\u043e\u043c 30TB EE-Rebuild \u0437\u0430\u043d\u044f\u043b \u043e\u043a\u043e\u043b\u043e 4 \u0447\u0430\u0441\u043e\u0432.<\/p>\n<\/li>\n<li>\n<p>\u041f\u0440\u0438 \u0443\u0432\u0435\u043b\u0438\u0447\u0435\u043d\u0438\u0438 \u0440\u0430\u0437\u043c\u0435\u0440\u0430 \u0442\u0435\u0441\u0442\u043e\u0432\u043e\u0433\u043e \u0442\u043e\u043c\u0430 \u0441 1 \u0434\u043e 30 TB \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u044b \u0442\u0435\u0441\u0442\u043e\u0432 \u0441\u043b\u0443\u0447\u0430\u0439\u043d\u043e\u0433\u043e \u0447\u0442\u0435\u043d\u0438\u044f\/\u0437\u0430\u043f\u0438\u0441\u0438 \u0441\u0442\u0430\u043d\u043e\u0432\u044f\u0442\u0441\u044f \u0445\u0443\u0436\u0435 \u043d\u0430 20-30%. \u0412\u043e\u0437\u043c\u043e\u0436\u043d\u043e \u044d\u0442\u043e \u0441\u0432\u044f\u0437\u0430\u043d\u043e \u0441 \u0431\u043e\u043b\u044c\u0448\u0435\u0439 \u0430\u043c\u043f\u043b\u0438\u0442\u0443\u0434\u043e\u0439 \u0434\u0432\u0438\u0436\u0435\u043d\u0438\u044f \u0433\u043e\u043b\u043e\u0432\u043e\u043a HDD. \u041a\u0430\u043a \u0431\u044b \u0442\u043e \u043d\u0438 \u0431\u044b\u043b\u043e, \u0441\u043b\u0443\u0447\u0430\u0439\u043d\u0430\u044f \u0437\u0430\u043f\u0438\u0441\u044c \u043d\u0430 RAID 6\/6EE \u0441\u0442\u0440\u0430\u0434\u0430\u0435\u0442.<\/p>\n<\/li>\n<li>\n<p>RAID 60\/60EE \u043e\u043a\u0430\u0437\u044b\u0432\u0430\u0435\u0442\u0441\u044f \u0435\u0449\u0435 \u043c\u0435\u0434\u043b\u0435\u043d\u043d\u0435\u0435 \u0447\u0435\u043c RAID 6\/6EE. 6 \u0434\u0438\u0441\u043a\u043e\u0432 \u0432 \u0433\u0440\u0443\u043f\u043f\u0435      \u0441\u043b\u0438\u0448\u043a\u043e\u043c \u043c\u0430\u043b\u043e.<\/p>\n<\/li>\n<\/ul>\n<p>\u0418\u043d\u0442\u0435\u0440\u0435\u0441\u043d\u0430\u044f \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e\u0441\u0442\u044c: \u0421\u0425\u0414 \u0437\u0430\u043f\u043e\u043c\u0438\u043d\u0430\u0435\u0442 \u0438 \u0432\u0435\u0434\u0435\u0442 \u0438\u0441\u0442\u043e\u0440\u0438\u044e \u0441\u043e\u0437\u0434\u0430\u043d\u043d\u044b\u0445 \u043d\u0430 \u043d\u0435\u0439 \u0442\u043e\u043c\u043e\u0432. \u0418 \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u0435\u0442 \u0432\u043e\u0441\u0441\u0442\u0430\u043d\u043e\u0432\u0438\u0442\u044c \u0438\u0445 \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u044b, \u0435\u0441\u043b\u0438 \u0442\u043e\u043c \u0431\u044b\u043b \u0441\u043b\u0443\u0447\u0430\u0439\u043d\u043e \u0443\u0434\u0430\u043b\u0435\u043d (\u0442\u0430\u043a\u0436\u0435 \u044d\u0442\u043e \u043f\u043e\u0445\u043e\u0436\u0435 \u0435\u0434\u0438\u043d\u0441\u0442\u0432\u0435\u043d\u043d\u044b\u0439 \u0441\u043f\u043e\u0441\u043e\u0431 \u043f\u043e\u0447\u0438\u043d\u0438\u0442\u044c \u0442\u043e\u043c, \u0435\u0441\u043b\u0438 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u043d\u0430 \u0434\u0438\u0441\u043a\u043e\u0432 \u0432 \u043f\u0443\u043b\u0435 \u0441\u0434\u0435\u043b\u0430\u0442\u044c Free &#8212; \u043f\u0440\u043e\u0441\u0442\u043e \u0443\u0434\u0430\u043b\u044f\u0435\u043c \u043f\u043e\u043b\u043d\u043e\u0441\u0442\u044c\u044e \u043f\u0443\u043b \u0441 \u0442\u043e\u043c\u0430\u043c\u0438 \u0438 \u0432\u043e\u0441\u0441\u0442\u0430\u043d\u0430\u0432\u043b\u0438\u0432\u0430\u0435\u043c \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044e). LUN Mappings, \u0440\u0430\u0437\u0443\u043c\u0435\u0435\u0442\u0441\u044f, \u0441\u043b\u0435\u0442\u0430\u044e\u0442.<\/p>\n<p>\u041f\u0440\u0438 \u0432\u043e\u0441\u0441\u0442\u0430\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0438 \u0442\u0430\u043a\u0438\u043c \u043e\u0431\u0440\u0430\u0437\u043e\u043c RAID EE \u0432\u0441\u0435 EE spare \u043f\u0440\u043e\u0441\u0442\u043e \u0432\u043a\u043b\u044e\u0447\u0430\u044e\u0442\u0441\u044f \u0432 \u043f\u0443\u043b. \u041f\u043e\u043b\u0443\u0447\u0430\u0435\u043c RAID EE \u0431\u0435\u0437 EE spare \u0434\u0438\u0441\u043a\u043e\u0432 \u0437\u0430\u0442\u043e \u0431\u043e\u043b\u044c\u0448\u0435\u0433\u043e \u043e\u0431\u044a\u0435\u043c\u0430. \u0417\u0430 \u0434\u0430\u043d\u043d\u044b\u0435 \u0432 \u0442\u0430\u043a\u043e\u043c \u0441\u043b\u0443\u0447\u0430\u0435 \u043d\u0435 \u0443\u0432\u0435\u0440\u0435\u043d. \u041e\u0442\u0447\u0435\u0442 \u0432 QSAN \u0442\u0430\u043a \u0438 \u0437\u0430\u0431\u044b\u043b \u043d\u0430\u043f\u0438\u0441\u0430\u0442\u044c. \u0427\u0435\u0440\u0435\u0437 \u0440\u0435\u0437\u0435\u0440\u0432\u043d\u043e\u0435 \u043a\u043e\u043f\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u0435 \u0438 \u0432\u043e\u0441\u0441\u0442\u0430\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0435 \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u0438 \u0442\u043e\u043c\u043e\u0432 \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u043d\u043e\u0440\u043c\u0430\u043b\u044c\u043d\u043e.<\/p>\n<p>\u0415\u0449\u0435 \u043e\u0434\u043d\u0430 \u043e\u0441\u043e\u0431\u0435\u043d\u043d\u043e\u0441\u0442\u044c: \u0434\u043b\u044f \u0442\u043e\u043c\u0430 \u043c\u043e\u0436\u0435\u0442 \u0431\u044b\u0442\u044c \u0441\u043e\u0437\u0434\u0430\u043d LUN Mapping \u0438\u043b\u0438 \u043d\u0430 iSCSI \u0438\u043b\u0438 \u043d\u0430 FC. \u041e\u0431\u0430 \u043e\u0434\u043d\u043e\u0432\u0440\u0435\u043c\u0435\u043d\u043d\u043e \u043d\u0435\u043b\u044c\u0437\u044f.<\/p>\n<p>\u041d\u0430 \u043e\u0441\u043d\u043e\u0432\u0430\u043d\u0438\u0438 \u043f\u043e\u043b\u0443\u0447\u0435\u043d\u043d\u044b\u0445 \u0434\u0430\u043d\u043d\u044b\u0445 \u0431\u044b\u043b\u043e \u043f\u0440\u0438\u043d\u044f\u0442\u043e \u0440\u0435\u0448\u0435\u043d\u0438\u0435 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c thick provisioned \u043f\u0443\u043b RAID10. \u0422\u043e\u043c\u0430 \u0438\u043d\u0438\u0446\u0438\u0430\u043b\u0438\u0437\u0438\u0440\u043e\u0432\u0430\u0442\u044c Full Erase. \u0412\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435 SSD Cache \u043e\u0441\u0442\u0430\u0432\u0438\u0442\u044c \u043d\u0430 \u043f\u043e\u0442\u043e\u043c, \u043a\u043e\u0433\u0434\u0430 \u0441\u043e\u0431\u0435\u0440\u0435\u043c \u0441\u0442\u0430\u0442\u0438\u0441\u0442\u0438\u043a\u0443 (latency \u0432 \u043f\u0435\u0440\u0432\u0443\u044e \u043e\u0447\u0435\u0440\u0435\u0434\u044c) \u043f\u043e\u0434 \u0440\u0430\u0431\u043e\u0447\u0435\u0439 \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u043e\u0439.<\/p>\n<h3>6. \u0417\u0430\u043f\u0443\u0441\u043a \u0432 \u0440\u0430\u0431\u043e\u0442\u0443. \u041a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044f<\/h3>\n<p>\u041d\u043e\u0434\u044b \u0441\u0438\u0441\u0442\u0435\u043c\u044b \u0432\u0438\u0440\u0442\u0443\u0430\u043b\u0438\u0437\u0430\u0446\u0438\u0438 \u043f\u043e\u0434\u043a\u043b\u044e\u0447\u0430\u043b\u0438\u0441\u044c \u043f\u043e iSCSI 10G.<\/p>\n<p>\u041a\u043e\u043c\u043c\u0443\u0442\u0430\u0442\u043e\u0440\u044b Huawei S6720-32CI-SI (\u043c\u0435\u0434\u043d\u044b\u0435 \u043f\u043e\u0440\u0442\u044b 10G Ethernet).<\/p>\n<p>\u041a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044f \u0432 \u0446\u0435\u043b\u043e\u043c \u0441\u0442\u0430\u043d\u0434\u0430\u0440\u0442\u043d\u0430\u044f \u0434\u043b\u044f \u043f\u043e\u0434\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u044f \u0421\u0425\u0414 \u043a \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u0438\u043c \u0441\u0435\u0440\u0432\u0435\u0440\u0430\u043c, \u043d\u043e, \u043f\u0430\u043c\u044f\u0442\u0443\u044f \u043e\u0431 \u043e\u043f\u0440\u0435\u0434\u0435\u043b\u0435\u043d\u043d\u044b\u0445 \u0441\u0442\u0440\u0430\u043d\u043d\u043e\u0441\u0442\u044f\u0445 \u0435\u0449\u0435 \u0432 oVirt 3.4 \u043f\u0440\u0438 \u043f\u043e\u0434\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0438 \u043a iSCSI storage \u0441 MPIO, \u044f \u043a\u0430\u0436\u0434\u044b\u0439 \u043a\u043e\u043c\u043c\u0443\u0442\u0430\u0442\u043e\u0440 \u043f\u043e\u0434\u043a\u043b\u044e\u0447\u0438\u043b \u043a \u00ab\u0441\u0432\u043e\u0435\u043c\u0443\u00bb \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u043b\u0435\u0440\u0443 \u0421\u0425\u0414 \u0441 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043d\u0438\u0435\u043c \u0430\u0433\u0440\u0435\u0433\u0430\u0446\u0438\u0438 \u043b\u0438\u043d\u043a\u043e\u0432 802.3ad (LACP). XS1224 \u044d\u0442\u043e \u0443\u043c\u0435\u0435\u0442.<\/p>\n<p>\u041d\u0430 \u043f\u0430\u0440\u0435 \u043d\u043e\u0432\u044b\u0445 \u043d\u043e\u0434 \u0431\u044b\u043b\u0430 \u043d\u0430\u0441\u0442\u0440\u043e\u0435\u043d\u0430 \u0437\u0430\u0433\u0440\u0443\u0437\u043a\u0430 \u043f\u043e iSCSI \u0441 \u0442\u043e\u043c\u043e\u0432 \u043d\u0430 \u0421\u0425\u0414. \u0412 \u043f\u0440\u043e\u0446\u0435\u0441\u0441\u0435 \u043d\u0430\u0448\u0435\u043b \u0431\u0430\u0433 \u0432 dracut: \u043d\u0430 \u0434\u0432\u0443\u0445\u043f\u043e\u0440\u0442\u043e\u0432\u044b\u0445 \u0441\u0435\u0442\u0435\u0432\u0443\u0448\u043a\u0430\u0445 dracut \u043f\u043e\u0434\u043d\u0438\u043c\u0430\u0435\u0442 \u0430\u0432\u0442\u043e\u043c\u0430\u0442\u0438\u0447\u0435\u0441\u043a\u0438 \u0442\u043e\u043b\u044c\u043a\u043e \u043e\u0434\u0438\u043d \u0438\u043d\u0442\u0435\u0440\u0444\u0435\u0439\u0441: \u0442\u043e\u0442, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043b\u0441\u044f \u0434\u043b\u044f \u0437\u0430\u0433\u0440\u0443\u0437\u043a\u0438 (PRIMARY). \u0421\u043a\u0440\u0438\u043f\u0442 \u043f\u0440\u043e\u0432\u0435\u0440\u044f\u0435\u0442 \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u0435 \/sys\/firmware\/ibft\/ethernet*\/flags, \u0435\u0441\u043b\u0438 \u0431\u0438\u0442 1 \u043d\u0435 \u0443\u0441\u0442\u0430\u043d\u043e\u0432\u043b\u0435\u043d \u0438\u043d\u0442\u0435\u0440\u0444\u0435\u0439\u0441 \u043f\u0440\u043e\u043f\u0443\u0441\u043a\u0430\u0435\u0442\u0441\u044f. \u042d\u0442\u043e \u043d\u0430\u043f\u0440\u043e\u0447\u044c \u043b\u043e\u043c\u0430\u0435\u0442 multipath (MPIO). <\/p>\n<p><a href=\"https:\/\/github.com\/dracutdevs\/dracut\/pull\/724\">https:\/\/github.com\/dracutdevs\/dracut\/pull\/724<\/a> \u043f\u0440\u0438\u043d\u044f\u043b\u0438 , \u043d\u043e \u0432 RHEL \u043e\u043d \u043a\u0430\u0436\u0435\u0442\u0441\u044f \u043f\u043e\u043a\u0430 \u043d\u0435 \u043f\u043e\u043f\u0430\u043b.<\/p>\n<p>\u0412\u0440\u0435\u043c\u0435\u043d\u043d\u044b\u0439 \u0444\u0438\u043a\u0441:<\/p>\n<ol>\n<li>\n<p>\u041f\u0440\u0438 \u0443\u0441\u0442\u0430\u043d\u043e\u0432\u043a\u0435 \u043d\u0430\u0441\u0442\u0440\u0430\u0438\u0432\u0430\u0435\u043c \u0432\u0442\u043e\u0440\u043e\u0439 \u0438\u043d\u0442\u0435\u0440\u0444\u0435\u0439\u0441 \u0432\u0440\u0443\u0447\u043d\u0443\u044e, \u0447\u0442\u043e\u0431\u044b \u0430\u043a\u0442\u0438\u0432\u0438\u0440\u043e\u0432\u0430\u043b\u0441\u044f multipath (\u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e, \u043c\u043e\u0436\u043d\u043e \u043f\u0440\u043e\u043f\u0443\u0441\u0442\u0438\u0442\u044c, \u043d\u043e \u043f\u043e\u043a\u0430 \u043d\u0435 \u043f\u0440\u043e\u0432\u0435\u0440\u044f\u043b).<\/p>\n<\/li>\n<li>\n<p>\u0412 \u0443\u0441\u0442\u0430\u043d\u043e\u0432\u043b\u0435\u043d\u043d\u043e\u0439 \u041e\u0421 \u0432\u044b\u043f\u043e\u043b\u043d\u0438\u0442\u044c.<\/p>\n<\/li>\n<\/ol>\n<pre><code># sed -i.bak -re 's\/^([[:space:]]*\\(\\( \\$flags &amp; 2 \\)\\) \\|\\| continue)\/#\\1\/' \/usr\/lib\/dracut\/modules.d\/40network\/net-lib.sh # dracut -f<\/code><\/pre>\n<p>\u0414\u0430\u043b\u0435\u0435 \u0432\u0441\u0435 \u0441\u0442\u0430\u043d\u0434\u0430\u0440\u0442\u043d\u043e: \u043f\u043e\u0434\u0433\u043e\u0442\u043e\u0432\u0438\u043b\u0438 \u043f\u043b\u0430\u043d \u043c\u0438\u0433\u0440\u0430\u0446\u0438\u0438, \u0441\u043a\u0440\u0438\u043f\u0442 ansible, \u0432\u044b\u043f\u043e\u043b\u043d\u044f\u044e\u0449\u0438\u0439 \u043e\u0441\u0442\u0430\u043d\u043e\u0432 VM, \u043f\u0435\u0440\u0435\u043d\u043e\u0441 \u0434\u0438\u0441\u043a\u0430, \u0437\u0430\u043f\u0443\u0441\u043a \u0438 \u043f\u0440\u043e\u0432\u0435\u0440\u043a\u0443 \u0434\u043e\u0441\u0442\u0443\u043f\u043d\u043e\u0441\u0442\u0438 VM. \u041d\u0430\u0441\u0442\u0440\u043e\u0438\u043b\u0438 \u0441\u043d\u0430\u043f\u0448\u043e\u0442\u044b \u0434\u043b\u044f \u0442\u043e\u043c\u0430 \u0441 \u0432\u0430\u0436\u043d\u044b\u043c\u0438 VM, \u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433 \u0438 \u0442.\u043f. \u0418 \u043f\u0440\u0438\u0441\u0442\u0443\u043f\u0438\u043b\u0438 \u043a \u043f\u0435\u0440\u0435\u043d\u043e\u0441\u0443 \u0432\u0438\u0440\u0442\u0443\u0430\u043b\u043e\u043a.<\/p>\n<h3>7. \u041f\u0440\u043e\u0431\u043b\u0435\u043c\u044b<\/h3>\n<p>\u0410 \u0442\u0435\u043f\u0435\u0440\u044c \u043f\u043e\u043f\u044b\u0442\u0430\u044e\u0441\u044c \u0440\u0430\u0441\u0441\u043a\u0430\u0437\u0430\u0442\u044c, \u0441 \u043a\u0430\u043a\u0438\u043c\u0438 \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u0430\u043c\u0438 \u043c\u044b \u0441\u0442\u043e\u043b\u043a\u043d\u0443\u043b\u0438\u0441\u044c \u043f\u0440\u0438 \u044d\u043a\u0441\u043f\u043b\u0443\u0430\u0442\u0430\u0446\u0438\u0438 \u0421\u0425\u0414, \u043a\u0430\u043a \u0438\u0445 \u0434\u0438\u0430\u0433\u043d\u043e\u0441\u0442\u0438\u0440\u043e\u0432\u0430\u043b\u0438 \u0438 \u043a\u0430\u043a \u0441 \u043d\u0438\u043c\u0438 \u0441\u043f\u0440\u0430\u0432\u043b\u044f\u043b\u0438\u0441\u044c. \u041f\u0435\u0440\u0432\u043e\u0439 \u043b\u0430\u0441\u0442\u043e\u0447\u043a\u043e\u0439 \u0441\u0442\u0430\u043b\u0438 \u043d\u0435\u043e\u0431\u044a\u044f\u0441\u043d\u0438\u043c\u044b\u0435 \u0437\u0430\u0434\u0435\u0440\u0436\u043a\u0438 IO \u043e\u043f\u0435\u0440\u0430\u0446\u0438\u0439, \u043d\u0430 \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u043d\u0430\u043c \u043f\u043e\u0436\u0430\u043b\u043e\u0432\u0430\u043b\u0438\u0441\u044c \u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u0435\u043b\u0438. \u0421 \u043c\u043e\u043c\u0435\u043d\u0442\u0430 \u0437\u0430\u043f\u0443\u0441\u043a\u0430 \u0421\u0425\u0414 \u0432 \u0440\u0430\u0431\u043e\u0442\u0443 \u043f\u0440\u043e\u0448\u043b\u043e \u043f\u043e\u0447\u0442\u0438 \u043f\u043e\u043b\u0433\u043e\u0434\u0430,\u00a0 \u0430 \u043c\u044b \u043f\u0435\u0440\u0435\u043d\u0435\u0441\u043b\u0438 \u043b\u0438\u0448\u044c \u043e\u043a\u043e\u043b\u043e \u0442\u0440\u0435\u0442\u0438 \u0432\u0438\u0440\u0442\u0443\u0430\u043b\u043e\u043a\u2026 \u041f\u0440\u0430\u0432\u0434\u0430 firmware \u0443\u0436\u0435 \u0443\u0441\u043f\u0435\u043b\u0438 \u043e\u0431\u043d\u043e\u0432\u0438\u0442\u044c \u0434\u043e 1.4.3.<\/p>\n<h4>7.1 \u0417\u0430\u0434\u0435\u0440\u0436\u043a\u0438 IO \u0438 \u043a\u0430\u043a \u043c\u044b \u0438\u0445 \u043f\u043e\u0431\u0435\u0434\u0438\u043b\u0438<\/h4>\n<p>\u041d\u0430\u0441\u0442\u0440\u043e\u0435\u043d\u043d\u044b\u0439 \u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433 \u043f\u0440\u043e\u0431\u043b\u0435\u043c \u043d\u0435 \u043f\u043e\u043a\u0430\u0437\u044b\u0432\u0430\u043b. \u041d\u043e \u043e\u043d \u0441\u043e\u0431\u0438\u0440\u0430\u043b \u0441\u0442\u0430\u0442\u0438\u0441\u0442\u0438\u043a\u0443 \u0441 \u0441\u0430\u043c\u043e\u0439 \u0421\u0425\u0414 \u0447\u0435\u0440\u0435\u0437 Web. \u0410 \u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u0435\u043b\u0438 \u0436\u0430\u043b\u043e\u0432\u0430\u043b\u0438\u0441\u044c \u043d\u0430 \u0437\u0430\u0434\u0435\u0440\u0436\u043a\u0438 \u043f\u043e \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u0443 \u0441\u0435\u043a\u0443\u043d\u0434.<\/p>\n<p>\u0412 \u043d\u0435\u0434\u043e\u0443\u043c\u0435\u043d\u0438\u0438 \u044f \u0437\u0430\u043f\u0443\u0441\u0442\u0438\u043b \u043d\u0430 \u0432\u0438\u0440\u0442\u0443\u0430\u043b\u043a\u0435 \u0442\u0430\u043a\u043e\u0439 \u043e\u0434\u043d\u043e\u0441\u0442\u0440\u043e\u0447\u043d\u0438\u043a (\u0447\u0438\u0442\u0430\u0435\u043c \u0441\u043b\u0443\u0447\u0430\u0439\u043d\u044b\u0439 \u0441\u0435\u043a\u0442\u043e\u0440 \u0438 \u0435\u0441\u043b\u0438 dd \u0431\u0443\u0434\u0435\u0442 \u043e\u0442\u0440\u0430\u0431\u0430\u0442\u044b\u0432\u0430\u0442\u044c \u0431\u043e\u043b\u0435\u0435 1 \u0441\u0435\u043a\u0443\u043d\u0434\u044b \u0432\u044b\u0432\u043e\u0434\u0438\u043c \u0442\u0435\u043a\u0443\u0449\u0435\u0435 \u0432\u0440\u0435\u043c\u044f \u0438 \u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0432\u0440\u0435\u043c\u0435\u043d\u0438 \u0437\u0430\u043d\u044f\u043b\u043e \u0432\u044b\u043f\u043e\u043b\u043d\u0435\u043d\u0438\u0435)<\/p>\n<pre><code>while :; do T=$(dd if=\/dev\/$DEV of=\/dev\/null count=1 skip=$(($RANDOM$RANDOM$RANDOM % 10485760)) 2>&amp;1 | tail -1 | awk '{print $6}') ; [[ $T =~ ^0, ]] || echo \"`date` $T\" ; sleep 1 ; done<\/code><\/pre>\n<p>\u0410 \u043d\u0430 \u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0438\u0439 \u0434\u0435\u043d\u044c \u0443\u0432\u0438\u0434\u0435\u043b \u0442\u0430\u043a\u0443\u044e \u043a\u0430\u0440\u0442\u0438\u043d\u0443:<\/p>\n<p><strong>\u041f\u0442 \u043e\u043a\u0442 23 02:23:59 MSK 2020 1,4242<\/strong><\/p>\n<p><strong>\u041f\u0442 \u043e\u043a\u0442 23 08:30:52 MSK 2020 4,49554<\/strong><\/p>\n<p><strong>\u041f\u0442 \u043e\u043a\u0442 23 11:32:40 MSK 2020 9,37445<\/strong><\/p>\n<p>\u041a\u0440\u043e\u043c\u0435 \u0442\u043e\u0433\u043e, \u0443\u0434\u0430\u043b\u043e\u0441\u044c \u043f\u043e\u0439\u043c\u0430\u0442\u044c \u0441\u0438\u0442\u0443\u0430\u0446\u0438\u044e, \u043a\u043e\u0433\u0434\u0430 \u0437\u0430\u0434\u0435\u0440\u0436\u043a\u0438 \u0441\u043b\u0443\u0447\u0430\u043b\u0438\u0441\u044c \u043e\u0434\u043d\u043e\u0432\u0440\u0435\u043c\u0435\u043d\u043d\u043e \u043d\u0430 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u0438\u0445 \u043d\u043e\u0434\u0430\u0445 oVirt. \u0412 \u043b\u043e\u0433\u0430\u0445 \u0421\u0425\u0414 \u043f\u043e\u0441\u0442\u043e\u044f\u043d\u043d\u043e \u043f\u043e\u044f\u0432\u043b\u044f\u043b\u0438\u0441\u044c \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u044f \u043e\u0431 iSCSI connect\/disconnect \u0441 \u0443\u0440\u043e\u0432\u043d\u0435\u043c INFO.<\/p>\n<p>\u0421\u043e\u0431\u0440\u0430\u0432 \u0432\u0441\u044e \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u0443\u044e \u0438\u043d\u0444\u043e\u0440\u043c\u0430\u0446\u0438\u044e, \u0432\u043a\u043b\u044e\u0447\u0430\u044f \u0434\u0430\u043c\u043f\u044b iSCSI \u0432 \u043c\u043e\u043c\u0435\u043d\u0442 \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u044b, \u044f \u0437\u0430\u0432\u0435\u043b \u043e\u0431\u0440\u0430\u0449\u0435\u043d\u0438\u0435 \u0432 \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u043a\u0443 \u043d\u0430 <a href=\"https:\/\/support.qsan.su\/\">https:\/\/support.qsan.su<\/a> \u0438 \u043d\u0430 \u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0438\u0439 \u0436\u0435 \u0434\u0435\u043d\u044c \u043f\u043e\u043b\u0443\u0447\u0438\u043b \u043d\u0430\u0431\u043e\u0440 \u0440\u0435\u043a\u043e\u043c\u0435\u043d\u0434\u0430\u0446\u0438\u0439.<\/p>\n<p>\u041f\u0435\u0440\u0432\u044b\u043c \u0434\u0435\u043b\u043e\u043c \u043f\u0435\u0440\u0435\u0434\u0435\u043b\u0430\u043b\u0438 \u043f\u043e\u0434\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435 \u043a\u043e\u043c\u043c\u0443\u0442\u0430\u0442\u043e\u0440\u043e\u0432 \u043a \u0421\u0425\u0414, \u0443\u0431\u0440\u0430\u0432 \u0430\u0433\u0440\u0435\u0433\u0430\u0446\u0438\u044e \u043b\u0438\u043d\u043a\u043e\u0432 \u0441 LACP \u0438 \u043f\u0435\u0440\u0435\u0434\u0435\u043b\u0430\u0432 \u043f\u043e\u0434\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435 \u043d\u0430 MPIO. \u0412 \u043f\u0440\u043e\u0446\u0435\u0441\u0441\u0435 \u043f\u0435\u0440\u0435\u0433\u0440\u0443\u0437\u0438\u043b\u0438 \u0421\u0425\u0414 (oVirt \u043f\u0440\u0438\u0448\u043b\u043e\u0441\u044c \u043f\u043e\u043b\u043d\u043e\u0441\u0442\u044c\u044e \u043e\u0441\u0442\u0430\u043d\u0430\u0432\u043b\u0438\u0432\u0430\u0442\u044c, \u043d\u043e \u0443\u0432\u044b, \u043e\u043d \u043d\u0435 \u0443\u043c\u0435\u0435\u0442 \u0448\u0442\u0430\u0442\u043d\u043e \u0434\u0435\u043b\u0430\u0442\u044c \u043f\u0435\u0440\u0435\u043d\u0430\u0441\u0442\u0440\u043e\u0439\u043a\u0443 \u043f\u043e\u0434\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u044f \u043a storage domain. \u041f\u0440\u0438\u0448\u043b\u043e\u0441\u044c \u043b\u0435\u0437\u0442\u044c \u0432 \u0411\u0414 ovirt-engine \u0438 \u043f\u0440\u0430\u0432\u0438\u0442\u044c \u043d\u0435\u043f\u043e\u0441\u0440\u0435\u0434\u0441\u0442\u0432\u0435\u043d\u043d\u043e \u0442\u0430\u043c. \u041f\u043e\u0441\u043b\u0435 \u043f\u0435\u0440\u0435\u0437\u0430\u0433\u0440\u0443\u0437\u043a\u0438 \u0437\u0430\u0434\u0435\u0440\u0436\u043a\u0438 \u0441\u0442\u0430\u043b\u0438 \u043f\u0440\u043e\u044f\u0432\u043b\u044f\u0442\u044c\u0441\u044f \u0440\u0435\u0436\u0435 \u0438 \u043c\u0430\u043a\u0441\u0438\u043c\u0443\u043c \u043d\u0430 1-2 \u0441\u0435\u043a\u0443\u043d\u0434\u044b.<\/p>\n<p>\u041a\u0440\u043e\u043c\u0435 \u0442\u043e\u0433\u043e, \u0432\u044b\u043a\u043b\u044e\u0447\u0438\u043b\u0438 jumbo frames, \u0437\u0430\u043c\u0435\u043d\u0438\u043b\u0438 \u0432\u0441\u0435 \u043f\u0430\u0442\u0447\u043a\u043e\u0440\u0434\u044b \u043d\u0430 Cat.6, \u0430 \u043d\u0430 \u043a\u043e\u043c\u043c\u0443\u0442\u0430\u0442\u043e\u0440\u0430\u0445 \u043d\u0430\u0441\u0442\u0440\u043e\u0438\u043b\u0438\u00a0 tail-drop-profile (\u0431\u043e\u043b\u044c\u0448\u0435 HUAWEI S6720-32C-SI-AC \u043d\u0438\u0447\u0435\u0433\u043e \u043d\u0435 \u0443\u043c\u0435\u044e\u0442). \u041f\u0440\u0438\u043c\u0435\u0440\u043d\u043e \u0442\u0430\u043a:<\/p>\n<pre><code>qos tail-drop-profile TDP-SAN qos queue 0 max-length 512 green max-length 256 qos queue 0 max-buffer 4096 green max-buffer 2048 qos tail-drop-profile TDP-HOSTS qos queue 0 max-length 256 green max-length 128 qos queue 0 max-buffer 2048 green max-buffer 1024<\/code><\/pre>\n<p>\u0418 \u043e\u0431\u043d\u043e\u0432\u0438\u043b\u0438 firmware \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u043b\u0435\u0440\u043e\u0432 \u0421\u0425\u0414 \u0434\u043e 1.4.6.<\/p>\n<p>\u041d\u0435 \u0443\u0432\u0435\u0440\u0435\u043d, \u0447\u0442\u043e \u0438\u043c\u0435\u043d\u043d\u043e \u0438\u0437 \u044d\u0442\u043e\u0433\u043e \u043f\u043e\u043c\u043e\u0433\u043b\u043e, \u043d\u043e \u0437\u0430\u0434\u0435\u0440\u0436\u043a\u0438 \u043f\u0440\u043e\u043f\u0430\u043b\u0438. \u0418 \u0432\u043f\u043e\u0440\u0443 \u0431\u044b \u0440\u0430\u0434\u043e\u0432\u0430\u0442\u044c\u0441\u044f, \u043d\u043e \u043e\u0431\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0435 1.4.6 \u0441\u043b\u043e\u043c\u0430\u043b\u043e \u0437\u0430\u0433\u0440\u0443\u0437\u043a\u0443 \u0441 iSCSI \u0438 \u0434\u0432\u0435 \u043d\u043e\u0434\u044b oVirt \u043d\u0435 \u043c\u043e\u0433\u043b\u0438 \u0437\u0430\u0433\u0440\u0443\u0437\u0438\u0442\u044c\u0441\u044f.<\/p>\n<h4>7.2 \u0427\u0438\u043d\u0438\u043c iSCSI boot<\/h4>\n<p>\u041f\u0440\u0438 \u0437\u0430\u0433\u0440\u0443\u0437\u043a\u0435 iSCSI BIOS \u0441\u0435\u0442\u0435\u0432\u043e\u0433\u043e \u0430\u0434\u0430\u043f\u0442\u0435\u0440\u0430 (PE310G2I50-T Dual Port Copper 10G \u043d\u0430 \u0431\u0430\u0437\u0435 Intel\u00ae X550-AT2) \u0432\u0438\u0434\u0435\u043b LUN, \u043d\u043e \u043a\u0430\u0442\u0435\u0433\u043e\u0440\u0438\u0447\u0435\u0441\u043a\u0438 \u043d\u0435 \u0445\u043e\u0442\u0435\u043b \u0441 \u043d\u0435\u0433\u043e \u0433\u0440\u0443\u0437\u0438\u0442\u044c\u0441\u044f. \u0427\u0435\u0440\u043d\u044b\u0439 \u044d\u043a\u0440\u0430\u043d, \u043c\u0438\u0433\u0430\u044e\u0449\u0438\u0439 \u043a\u0443\u0440\u0441\u043e\u0440 \u0438 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0435 Read Error \u043c\u0438\u043d\u0443\u0442 \u0447\u0435\u0440\u0435\u0437 5. \u0411\u044b\u0441\u0442\u0440\u043e \u0437\u0430\u0433\u0440\u0443\u0437\u0438\u043b\u0441\u044f \u0441 Live Ubuntu, apt install open-iscsi, discover, login \u2014 \u0432\u0441\u0435 \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442. \u0410 \u0433\u0440\u0443\u0437\u0438\u0442\u044c\u0441\u044f \u043d\u0435 \u0445\u043e\u0447\u0435\u0442.<\/p>\n<p>\u041c\u043e\u0436\u043d\u043e \u0431\u044b\u043b\u043e \u0431\u044b \u043f\u043e\u043f\u0440\u043e\u0431\u043e\u0432\u0430\u0442\u044c \u043e\u0442\u043a\u0430\u0442\u0438\u0442\u044c \u0432\u0435\u0440\u0441\u0438\u044e firmware, \u043d\u043e \u044f \u0443\u0436\u0435 \u0437\u0430\u043f\u0443\u0441\u0442\u0438\u043b \u0431\u043e\u043b\u044c\u0448\u0443\u044e \u0447\u0430\u0441\u0442\u044c \u0432\u0438\u0440\u0442\u0443\u0430\u043b\u043e\u043a&#8230;<\/p>\n<p>\u041d\u0430\u0448\u0435\u043b \u043f\u0430\u0440\u0443 HDD, \u043f\u043e\u0441\u0442\u0430\u0432\u0438\u043b \u0432 \u0441\u0435\u0440\u0432\u0435\u0440\u0430, \u043f\u0435\u0440\u0435\u043d\u0435\u0441 \u0441\u0438\u0441\u0442\u0435\u043c\u0443 \u0441 \u0442\u043e\u043c\u0430 iSCSI \u043d\u0430 \u043b\u043e\u043a\u0430\u043b\u044c\u043d\u044b\u0439 \u0434\u0438\u0441\u043a, \u0437\u0430\u043f\u0443\u0441\u0442\u0438\u043b\u0441\u044f. \u0418 \u0441\u043d\u043e\u0432\u0430 \u0442\u0435\u0441\u0442\u044b, \u0434\u0430\u043c\u043f\u044b, \u0440\u0430\u0437\u043d\u044b\u0435 \u0432\u0435\u0440\u0441\u0438\u0438 iSCSI firmware \u0434\u043b\u044f Intel\u00ae X550-AT2, \u043e\u0431\u0440\u0430\u0449\u0435\u043d\u0438\u0435 \u0432 \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u043a\u0443. \u0417\u0430\u0433\u0440\u0443\u0437\u043a\u0430 \u043f\u043e FC \u0440\u0430\u0431\u043e\u0442\u0430\u043b\u0430, \u0447\u0442\u043e \u0445\u0430\u0440\u0430\u043a\u0442\u0435\u0440\u043d\u043e.<\/p>\n<p>\u0412 \u0438\u0442\u043e\u0433\u0435 \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u0443 \u043b\u043e\u043a\u0430\u043b\u0438\u0437\u043e\u0432\u0430\u043b\u0438. \u0417\u0430\u0442\u0440\u0430\u0433\u0438\u0432\u0430\u043b\u0430 \u043e\u043d\u0430 \u0441\u0435\u0442\u0435\u0432\u044b\u0435 \u043f\u043b\u0430\u0442\u044b Intel (\u043f\u043e \u043a\u0440\u0430\u0439\u043d\u0435\u0439 \u043c\u0435\u0440\u0435 \u0441 Qlogic \u0437\u0430\u0433\u0440\u0443\u0437\u043a\u0430 iSCSI \u0440\u0430\u0431\u043e\u0442\u0430\u043b\u0430). \u0418\u0441\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u0438\u0435 \u0432\u043e\u0448\u043b\u043e \u0432 firmware 2.0.1, \u043a\u043e\u0442\u043e\u0440\u043e\u0435 \u0432\u044b\u0448\u043b\u043e \u0442\u043e\u043b\u044c\u043a\u043e \u0432 \u0438\u044e\u043d\u0435 2021 \u0433\u043e\u0434\u0430.<\/p>\n<h4>7.3 SSD-Cache. \u041a\u043e\u043d\u0447\u0438\u043b\u0441\u044f<\/h4>\n<p>\u041a \u0438\u044e\u043d\u044e \u043c\u0435\u0441\u044f\u0446\u0443 \u043f\u0435\u0440\u0435\u043d\u043e\u0441 VM \u0441\u043e \u0441\u0442\u0430\u0440\u043e\u0439 \u0421\u0425\u0414 \u0431\u044b\u043b \u043d\u0430\u043a\u043e\u043d\u0435\u0446 \u0437\u0430\u0432\u0435\u0440\u0448\u0435\u043d. \u041f\u043e\u044f\u0432\u0438\u043b\u0441\u044f \u043d\u043e\u0432\u044b\u0439 \u043f\u0440\u043e\u0435\u043a\u0442, \u043f\u043e\u0434 \u043d\u0435\u0433\u043e \u0441\u043e\u0437\u0434\u0430\u043b\u0438 \u0435\u0449\u0435 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0432\u0438\u0440\u0442\u0443\u0430\u043b\u043e\u043a, \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0430 \u0432\u043e\u0437\u0440\u043e\u0441\u043b\u0430 \u0438 latency \u043d\u0430 disk IO \u0441\u0442\u0430\u043b\u0430 \u0437\u0430\u043c\u0435\u0442\u043d\u043e \u0440\u0430\u0441\u0442\u0438. \u0421\u0430\u043c\u043e\u0435 \u0432\u0440\u0435\u043c\u044f \u0432\u043a\u043b\u044e\u0447\u0438\u0442\u044c SSD Cache \u0438 \u0441\u0440\u0430\u0432\u043d\u0438\u0442\u044c, \u043d\u0430\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0441\u0442\u0430\u043d\u0435\u0442 \u0431\u044b\u0441\u0442\u0440\u0435\u0435. \u0427\u0442\u043e \u0438 \u0431\u044b\u043b\u043e \u0441\u0434\u0435\u043b\u0430\u043d\u043e 6 \u0438\u044e\u043b\u044f.<\/p>\n<p> \u0420\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442 \u043f\u0440\u0435\u0432\u0437\u043e\u0448\u0435\u043b \u043e\u0436\u0438\u0434\u0430\u043d\u0438\u044f. \u0412\u0441\u0435 \u043f\u0440\u043e\u0441\u0442\u043e \u043b\u0435\u0442\u0430\u043b\u043e.<\/p>\n<p>\u0410 \u0442\u0443\u0442 \u0435\u0449\u0435 \u043e\u0431\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0435 2.0.1 \u043f\u043e\u0434\u043e\u0441\u043f\u0435\u043b\u043e, \u0441 \u0438\u0441\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u0438\u0435\u043c \u0437\u0430\u0433\u0440\u0443\u0437\u043a\u0438 \u043f\u043e iSCSI, \u043a\u043e\u0442\u043e\u0440\u043e\u0435 \u044f, \u043f\u043e\u043b\u044c\u0437\u0443\u044f\u0441\u044c \u0432\u044b\u0445\u043e\u0434\u043d\u044b\u043c\u0438, \u0438 \u0443\u0441\u0442\u0430\u043d\u043e\u0432\u0438\u043b 10 \u0438\u044e\u043b\u044f.<\/p>\n<p>\u0412\u0441\u0435 \u0443\u0436\u0435 \u043f\u043e\u043d\u044f\u043b\u0438 \u043a \u0447\u0435\u043c\u0443 \u044f \u0432\u0435\u0434\u0443? \u0412 \u043f\u043e\u043d\u0435\u0434\u0435\u043b\u044c\u043d\u0438\u043a 12 \u0438\u044e\u043b\u044f \u0432\u0441\u0435 \u0441\u043b\u043e\u043c\u0430\u043b\u043e\u0441\u044c. \u0412\u0438\u0437\u0443\u0430\u043b\u044c\u043d\u043e SSD \u043a\u044d\u0448 \u0440\u0430\u0431\u043e\u0442\u0430\u043b, \u0432 \u043d\u0435\u043c \u0434\u0430\u0436\u0435 \u043e\u0441\u0442\u0430\u0432\u0430\u043b\u043e\u0441\u044c \u0441\u0432\u043e\u0431\u043e\u0434\u043d\u043e\u0435 \u043c\u0435\u0441\u0442\u043e, \u043d\u043e \u0437\u0430\u0434\u0435\u0440\u0436\u043a\u0438 \u0431\u044b\u043b\u0438 \u043f\u043e 200\u043c\u0441.<\/p>\n<p>\u041f\u043e\u043c\u043e\u0433\u043b\u043e \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435 SSD \u043a\u044d\u0448\u0430 \u0438 \u0432\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435 \u0435\u0433\u043e \u043e\u0431\u0440\u0430\u0442\u043d\u043e. \u041f\u0440\u0438 \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0438 \u0432\u0441\u0435 \u0434\u0430\u043d\u043d\u044b\u0435 \u0438\u0437 \u043a\u044d\u0448\u0430 \u0441\u0431\u0440\u0430\u0441\u044b\u0432\u0430\u044e\u0442\u0441\u044f \u043d\u0430 HDD. \u0410 \u044d\u0442\u043e \u043f\u043e\u0447\u0442\u0438 3 \u0422\u0411. \u041f\u0440\u043e\u0446\u0435\u0441\u0441 \u0441\u0431\u0440\u043e\u0441\u0430 \u0437\u0430\u043d\u044f\u043b \u043f\u043e\u0447\u0442\u0438 \u0441\u0443\u0442\u043a\u0438. \u0417\u0430\u0434\u0435\u0440\u0436\u043a\u0438 IO \u043f\u0440\u0438 \u044d\u0442\u043e\u043c \u0431\u044b\u043b\u0438 \u043f\u043e 500 \u043c\u0441. \u041f\u043e\u0441\u043b\u0435 \u0432\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u044f \u0432\u0441\u0435 \u0441\u043d\u043e\u0432\u0430 \u043b\u0435\u0442\u0430\u043b\u043e.<\/p>\n<p>\u041f\u0440\u0438\u0432\u044b\u0447\u043d\u043e \u0441\u043e\u0431\u0440\u0430\u043b \u0434\u0438\u0430\u0433\u043d\u043e\u0441\u0442\u0438\u043a\u0443, \u043d\u0430\u043f\u0438\u0441\u0430\u043b \u043e\u0431\u0440\u0430\u0449\u0435\u043d\u0438\u0435 \u0432 \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u043a\u0443: \u00ab\u041e\u0431\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0435 2.0.1 \u043a\u0430\u043a-\u0442\u043e \u043a\u0440\u0438\u0432\u043e \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u0441 SSD Cache\u00bb. \u0410 20 \u0447\u0438\u0441\u043b\u0430 \u0441\u0438\u0442\u0443\u0430\u0446\u0438\u044f \u043f\u043e\u0432\u0442\u043e\u0440\u0438\u043b\u0430\u0441\u044c. \u0418 \u0432\u043e\u0437\u043d\u0438\u043a\u043b\u043e \u043f\u043e\u0434\u043e\u0437\u0440\u0435\u043d\u0438\u0435, \u0447\u0442\u043e \u043e\u0431\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0435 \u0442\u0443\u0442 \u043d\u0435 \u043f\u0440\u0438 \u0447\u0435\u043c, \u0430 \u0434\u0435\u043b\u043e \u0432 \u0441\u0430\u043c\u043e\u043c SSD Cache. \u0410 \u0438\u043c\u0435\u043d\u043d\u043e \u2014 \u0432 \u043d\u0435\u043c \u043a\u043e\u043d\u0447\u0438\u043b\u043e\u0441\u044c \u043c\u0435\u0441\u0442\u043e.<\/p>\n<p>\u0425\u043e\u0442\u044f \u0432 \u0441\u0442\u0430\u0442\u0438\u0441\u0442\u0438\u043a\u0435 \u043f\u043e \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043d\u0438\u044e SSD Cache \u0441\u0443\u043c\u043c\u0430\u0440\u043d\u043e \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u043c\u044b\u0439 \u043e\u0431\u044a\u0435\u043c \u043c\u0435\u043d\u044c\u0448\u0435, \u0447\u0435\u043c \u0440\u0430\u0437\u043c\u0435\u0440 SSD, \u043f\u043e\u043d\u044f\u0442\u043d\u043e, \u0447\u0442\u043e \u0433\u0434\u0435-\u0442\u043e \u043d\u0443\u0436\u043d\u043e \u0445\u0440\u0430\u043d\u0438\u0442\u044c \u0441\u0435\u0440\u0432\u0438\u0441\u043d\u0443\u044e \u0438\u043d\u0444\u043e\u0440\u043c\u0430\u0446\u0438\u044e. \u0412\u0435\u0440\u043e\u044f\u0442\u043d\u043e \u043e\u043d\u0430 \u0438 \u0437\u0430\u043d\u0438\u043c\u0430\u0435\u0442 \u043e\u0441\u0442\u0430\u0432\u0448\u0435\u0435\u0441\u044f \u043c\u0435\u0441\u0442\u043e.<\/p>\n<p>\u0427\u0442\u043e \u043f\u0440\u043e\u0438\u0437\u043e\u0439\u0434\u0435\u0442 \u0435\u0441\u043b\u0438 \u0432 SSD \u043a\u044d\u0448\u0435 \u043d\u0435 \u043e\u0441\u0442\u0430\u043d\u0435\u0442\u0441\u044f \u043c\u0435\u0441\u0442\u0430?<\/p>\n<p>\u041f\u0440\u0435\u0434\u043f\u043e\u043b\u043e\u0436\u0438\u043c \u043f\u0438\u0448\u0435\u043c 1 \u0441\u0435\u043a\u0442\u043e\u0440. \u041e\u043d \u043f\u043e\u043f\u0430\u0434\u0435\u0442 \u0441\u0440\u0430\u0437\u0443 \u043d\u0430 SSD. \u041d\u043e \u043f\u043e\u0441\u043a\u043e\u043b\u044c\u043a\u0443 \u043c\u0435\u0441\u0442\u0430 \u0442\u0430\u043c \u043d\u0435\u0442, \u0435\u0433\u043e \u043d\u0443\u0436\u043d\u043e \u0431\u0443\u0434\u0435\u0442 \u043e\u0441\u0432\u043e\u0431\u043e\u0434\u0438\u0442\u044c. \u041a\u0430\u043a? \u041d\u0430\u043f\u0440\u0438\u043c\u0435\u0440, \u0441\u0431\u0440\u043e\u0441\u0438\u0442\u044c \u043c\u0430\u043b\u043e \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u043c\u044b\u0439 \u0431\u043b\u043e\u043a \u043d\u0430 HDD. \u041c\u0438\u043d\u0438\u043c\u0430\u043b\u044c\u043d\u044b\u0439 \u0440\u0430\u0437\u043c\u0435\u0440 \u0431\u043b\u043e\u043a\u0430 1 MB. \u041f\u0438\u0448\u0435\u043c 1MB \u043d\u0430 HDD. \u0421\u043a\u043e\u043b\u044c\u043a\u043e \u044d\u0442\u043e IOPS? 4 \u0438\u043b\u0438 8? \u041f\u043e\u0442\u043e\u043c \u043d\u0443\u0436\u043d\u043e \u0441\u0447\u0438\u0442\u0430\u0442\u044c 1 MB \u0441 HDD \u0432 SSD \u043a\u044d\u0448. \u0415\u0449\u0435 4 \u0438\u043b\u0438 8 IOPS.<\/p>\n<p>\u041e\u0442\u0441\u044e\u0434\u0430 \u0438 \u0442\u043e\u0440\u043c\u043e\u0437\u0430. \u0421\u0438\u0442\u0443\u0430\u0446\u0438\u044e \u043c\u043e\u0433\u043b\u0430 \u0431\u044b \u0438\u0441\u043f\u0440\u0430\u0432\u0438\u0442\u044c \u043d\u0435\u043a\u0430\u044f \u043d\u0430\u0441\u0442\u0440\u043e\u0439\u043a\u0430, \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u044e\u0449\u0430\u044f \u0443\u043f\u0440\u0430\u0432\u043b\u044f\u0442\u044c \u0430\u0433\u0440\u0435\u0441\u0441\u0438\u0432\u043d\u043e\u0441\u0442\u044c\u044e \u0441\u0431\u0440\u043e\u0441\u0430 SSD \u043a\u044d\u0448\u0430 \u043d\u0430 HDD. \u041d\u043e \u043d\u0438\u0447\u0435\u0433\u043e \u0442\u0430\u043a\u043e\u0433\u043e \u043d\u0435\u0442.<\/p>\n<p>\u0421\u0443\u0434\u044f \u043f\u043e \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u0430\u0446\u0438\u0438 \u043d\u0430 SANOS 4.0<\/p>\n<p><em>Flush Write Data to HDD Volume<\/em><\/p>\n<p><em>In SSD read-write cache, the write data will be flushed to the HDD volume in the following situations.<\/em><\/p>\n<ul>\n<li>\n<p><em>Flush data to the HDD volumes before the SSD cache pool is deleted.<\/em><\/p>\n<\/li>\n<li>\n<p><em>Flush data to the HDD volumes before the related volume is disabled.<\/em><\/p>\n<\/li>\n<li>\n<p><em>Flush data when the system is idle.<\/em><\/p>\n<\/li>\n<\/ul>\n<p>\u0412\u043e\u043f\u0440\u043e\u0441, \u043a\u0430\u043a \u043e\u043f\u0440\u0435\u0434\u0435\u043b\u044f\u0435\u0442\u0441\u044f \u044d\u0442\u043e \u00absystem is idle\u00bb. \u041f\u043e \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u0430\u043c \u043e\u0431\u0449\u0435\u043d\u0438\u044f \u0441 \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u043a\u043e\u0439 \u0443\u0434\u0430\u043b\u043e\u0441\u044c \u0432\u044b\u044f\u0441\u043d\u0438\u0442\u044c \u0447\u0442\u043e:<\/p>\n<p>\u0415\u0441\u043b\u0438 \u0431\u043b\u043e\u043a \u043f\u043e\u043f\u0430\u043b \u0432 \u043a\u044d\u0448, \u0442\u043e \u043c\u043e\u0436\u0435\u0442 \u0442\u0430\u043c \u043d\u0430\u0445\u043e\u0434\u0438\u0442\u044c\u0441\u044f, \u043f\u043e\u043a\u0430 \u0434\u043e\u0441\u0442\u0430\u0442\u043e\u0447\u043d\u043e \u0441\u0432\u043e\u0431\u043e\u0434\u043d\u043e\u0433\u043e \u043c\u0435\u0441\u0442\u0430 \u0434\u043b\u044f \u043d\u043e\u0432\u044b\u0445 \u0431\u043b\u043e\u043a\u043e\u0432. \u0415\u0441\u043b\u0438 \u0441\u0438\u0441\u0442\u0435\u043c\u0430 \u043d\u0435 \u0441\u0438\u043b\u044c\u043d\u043e \u043d\u0430\u0433\u0440\u0443\u0436\u0435\u043d\u0430, \u0442\u043e \u0440\u0435\u0434\u043a\u043e \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u043c\u044b\u0435 \u0431\u043b\u043e\u043a\u0438 \u0431\u0443\u0434\u0443\u0442 \u0443\u0434\u0430\u043b\u044f\u0442\u044c\u0441\u044f (\u0432 \u0441\u043b\u0443\u0447\u0430\u0435 read cache) \u0438\u043b\u0438 \u0441\u0431\u0440\u0430\u0441\u044b\u0432\u0430\u0442\u044c\u0441\u044f \u043d\u0430 \u0434\u0438\u0441\u043a\u0438 (\u0432 \u0441\u043b\u0443\u0447\u0430\u0435 write cache). \u041f\u043e\u043d\u044f\u0442\u0438\u0435 idle \u043e\u043f\u0440\u0435\u0434\u0435\u043b\u044f\u0435\u0442\u0441\u044f \u0432\u043d\u0443\u0442\u0440\u0435\u043d\u043d\u0438\u043c\u0438 \u0430\u043b\u0433\u043e\u0440\u0438\u0442\u043c\u0430\u043c\u0438. \u041a \u0441\u043e\u0436\u0430\u043b\u0435\u043d\u0438\u044e, \u043f\u043e\u0434\u0440\u043e\u0431\u043d\u043e\u0433\u043e \u043e\u043f\u0438\u0441\u0430\u043d\u0438\u044f \u043d\u0430 \u044d\u0442\u043e\u0442 \u0441\u0447\u0435\u0442 \u043d\u0435\u0442.<\/p>\n<p>\u041f\u043e\u0434\u0432\u0435\u0434\u0435\u043c \u0438\u0442\u043e\u0433\u0438. \u0415\u0441\u043b\u0438 \u0443 \u0432\u0430\u0441 \u043c\u043d\u043e\u0433\u043e \u0441\u043b\u0443\u0447\u0430\u0439\u043d\u043e\u0439 \u0437\u0430\u043f\u0438\u0441\u0438 \u0438 \u0441\u0438\u0441\u0442\u0435\u043c\u0430 \u0441\u0438\u043b\u044c\u043d\u043e \u043d\u0430\u0433\u0440\u0443\u0436\u0435\u043d\u0430 QSAN SSD Write Cache \u043d\u0435\u043f\u0440\u0438\u0433\u043e\u0434\u0435\u043d \u043a \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043d\u0438\u044e. \u0412\u043e\u0437\u043c\u043e\u0436\u043d\u043e, \u0434\u0435\u043b\u043e \u0442\u0443\u0442 \u0432 \u043f\u0430\u0442\u0442\u0435\u0440\u043d\u0430\u0445 \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0438 \u0438 \u044d\u0442\u043e \u043d\u0430\u043c \u0442\u0430\u043a \u043f\u043e\u0432\u0435\u0437\u043b\u043e, \u043d\u043e \u0441\u0438\u043b\u044c\u043d\u043e \u043d\u0430 \u043d\u0435\u0433\u043e \u0440\u0430\u0441\u0441\u0447\u0438\u0442\u044b\u0432\u0430\u0442\u044c \u043d\u0435 \u0441\u0442\u043e\u0438\u0442.<\/p>\n<p>\u0418 \u044d\u0442\u043e \u0432 \u0441\u0430\u043c\u043e\u043c \u0434\u0435\u043b\u0435 \u043f\u0435\u0447\u0430\u043b\u044c\u043d\u043e, \u0432\u0435\u0434\u044c, \u0441\u0443\u0434\u044f \u043f\u043e \u0433\u0440\u0430\u0444\u0438\u043a\u0430\u043c \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u0438 \u0441 \u0421\u0425\u0414, \u043f\u0440\u0438 \u043d\u043e\u0440\u043c\u0430\u043b\u044c\u043d\u043e\u0439 \u0440\u0430\u0431\u043e\u0442\u0435 SSD \u043a\u044d\u0448\u0430 \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0430 \u043d\u0430 HDD \u043c\u0438\u043d\u0438\u043c\u0430\u043b\u044c\u043d\u0430. \u0415\u0441\u043b\u0438 \u0431\u044b \u0447\u0430\u0441\u0442\u044c \u0434\u0430\u043d\u043d\u044b\u0445 \u0441 SSD \u0441\u0431\u0440\u0430\u0441\u044b\u0432\u0430\u0442\u044c \u043d\u0430 \u043d\u0438\u0445 \u043d\u0435 \u0434\u043e\u0436\u0438\u0434\u0430\u044f\u0441\u044c \u043f\u043e\u043a\u0430 \u043c\u0435\u0441\u0442\u043e \u0432 \u043a\u044d\u0448\u0435 \u0437\u0430\u043a\u043e\u043d\u0447\u0438\u0442\u0441\u044f\u2026<\/p>\n<p>\u0422\u0443\u0442 \u044f \u0438 \u0432\u0441\u043f\u043e\u043c\u043d\u0438\u043b \u043f\u0440\u043e Auto-Tiering. \u041f\u043e\u0447\u0442\u0438 \u0442\u043e\u0442-\u0436\u0435 SSD \u043a\u044d\u0448, \u043f\u0440\u043e\u0441\u0442\u043e \u043b\u043e\u0433\u0438\u043a\u0430 \u043d\u0435\u043c\u043d\u043e\u0433\u043e \u0434\u0440\u0443\u0433\u0430\u044f.<\/p>\n<h4>7.4 Auto-Tiering. \u041f\u043e\u0434\u043e\u0436\u0434\u0438\u0442\u0435 \u0441 \u0432\u0430\u0448\u0438\u043c IO, \u043c\u043d\u0435 \u043d\u0430\u0434\u043e \u043f\u043e\u0434\u0443\u043c\u0430\u0442\u044c&#8230;<\/h4>\n<p>\u041d\u0443 \u0438 \u043f\u0443\u0441\u0442\u044c \u043d\u0435 \u043f\u043e\u043b\u0443\u0447\u0438\u043b\u043e\u0441\u044c \u0441 SSD Cache. \u0415\u0441\u0442\u044c \u0436\u0435 Auto-tiering. \u041f\u0443\u0441\u0442\u044c \u043d\u043e\u0447\u044c\u044e \u043f\u0435\u0440\u0435\u043a\u0438\u0434\u044b\u0432\u0430\u0435\u0442 \u0434\u0430\u043d\u043d\u044b\u0435 \u0438 \u043f\u043e\u0434\u0442\u043e\u0440\u043c\u0430\u0436\u0438\u0432\u0430\u0435\u0442, \u0437\u0430\u0442\u043e \u0434\u043d\u0435\u043c \u0441 \u043f\u043e\u043b\u0438\u0442\u0438\u043a\u043e\u0439\u00a0 Start Highest then Auto Tiering \u0432\u0441\u0435 \u0431\u0443\u0434\u0435\u0442 \u043b\u0435\u0442\u0430\u0442\u044c. \u0417\u0430\u043e\u0434\u043d\u043e \u0432 \u0434\u0430\u043d\u043d\u043e\u043c \u0441\u043b\u0443\u0447\u0430\u0435 \u043d\u0435 \u0432\u043e\u0441\u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0441\u044f \u0431\u0430\u0433 \u0441 RAID10. \u0421\u043a\u0430\u0437\u0430\u043d\u043e \u2014 \u0441\u0434\u0435\u043b\u0430\u043d\u043e. \u0418 \u0432\u0440\u043e\u0434\u0435 \u0432\u0441\u0435 \u0431\u044b\u0441\u0442\u0440\u043e. \u041d\u043e \u0447\u0435\u0440\u0435\u0437 \u043f\u0430\u0440\u0443 \u0434\u043d\u0435\u0439 \u0432 \u043b\u043e\u0433\u0430\u0445 oVirt \u044f \u0437\u0430\u043c\u0435\u0442\u0438\u043b \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u044f \u0432\u0438\u0434\u0430:<\/p>\n<pre><code>Storage domain ... experienced a high latency of 6.07162 seconds from host \u2026<\/code><\/pre>\n<p>\u0418 \u0441\u043d\u043e\u0432\u0430 \u0440\u0430\u0441\u0447\u0435\u0445\u043b\u044f\u0435\u043c \u0441\u043a\u0440\u0438\u043f\u0442, \u0447\u0438\u0442\u0430\u044e\u0449\u0438\u0439 \u0441\u043b\u0443\u0447\u0430\u0439\u043d\u044b\u0439 \u0441\u0435\u043a\u0442\u043e\u0440 \u0440\u0430\u0437 \u0432 \u0441\u0435\u043a\u0443\u043d\u0434\u0443 \u0438 \u0432\u0438\u0434\u0438\u043c \u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0435\u0435:<\/p>\n<p>\u041e\u0434\u043d\u0430 \u043d\u043e\u0434\u0430<\/p>\n<p><em>Thu Aug 12 13:37:39 MSK 2021 5.89858<\/em><\/p>\n<p><em>Thu Aug 12 14:37:43 MSK 2021 6.29794<\/em><\/p>\n<p>\u0412\u0442\u043e\u0440\u0430\u044f \u043d\u043e\u0434\u0430<\/p>\n<p><em>\u0427\u0442\u0432 \u0410\u0432\u0433 12 13:37:39 MSK 2021 1,24253<\/em><\/p>\n<p><em>\u0427\u0442\u0432 \u0410\u0432\u0433 12 14:37:43 MSK 2021 1,38901<\/em><\/p>\n<p>\u0418 \u0442\u0430\u043a \u0441\u0442\u0430\u0431\u0438\u043b\u044c\u043d\u043e \u0440\u0430\u0437 \u0432 \u0447\u0430\u0441.<\/p>\n<p>\u041f\u0440\u0430\u0432\u0434\u0430, \u0441\u0443\u0434\u044f \u043f\u043e \u0432\u0441\u0435\u043c\u0443, \u0438\u0437 \u0432\u0438\u0440\u0442\u0443\u0430\u043b\u043e\u043a \u044d\u0442\u043e \u043d\u0435 \u0442\u0430\u043a \u0437\u0430\u043c\u0435\u0442\u043d\u043e (\u043c\u043e\u0436\u0435\u0442 \u043f\u0440\u043e\u044f\u0432\u043b\u044f\u0435\u0442\u0441\u044f \u0442\u0430\u043a \u044f\u0432\u043d\u043e \u0442\u043e\u043b\u044c\u043a\u043e \u043f\u0440\u0438 \u0447\u0442\u0435\u043d\u0438\u0438 \u0441 \u0434\u0438\u0441\u043a\u043e\u0432 \u043d\u0438\u0436\u043d\u0435\u0433\u043e \u0442\u0438\u0440\u0430).<\/p>\n<p>\u041e\u043f\u0438\u0441\u044b\u0432\u0430\u044e \u0441\u0438\u0442\u0443\u0430\u0446\u0438\u044e \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u043a\u0435 \u0438 \u043f\u043e\u043b\u0443\u0447\u0430\u044e \u043e\u0442\u0432\u0435\u0442:<\/p>\n<blockquote>\n<p>\u0412 \u043b\u0430\u0431\u0435 \u0443\u0434\u0430\u043b\u043e\u0441\u044c \u043f\u043e\u0439\u043c\u0430\u0442\u044c \u0442\u0430\u043a\u043e\u0439 \u0436\u0435 \u044d\u0444\u0444\u0435\u043a\u0442, \u043a\u0430\u043a \u0438 \u0443 \u0432\u0430\u0441. \u041f\u043e\u0441\u043b\u0435 \u0430\u043d\u0430\u043b\u0438\u0437\u0430 \u0432\u044b\u044f\u0441\u043d\u0438\u043b\u043e\u0441\u044c, \u0447\u0442\u043e \u0432 \u0442\u0430\u043a\u0438\u0435 \u043c\u043e\u043c\u0435\u043d\u0442\u044b \u0421\u0425\u0414 \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442 \u0430\u043d\u0430\u043b\u0438\u0437 \u0441\u043e\u0431\u0440\u0430\u043d\u043d\u043e\u0439 \u0441\u0442\u0430\u0442\u0438\u0441\u0442\u0438\u043a\u0438 \u0434\u043b\u044f \u043e\u0441\u0443\u0449\u0435\u0441\u0442\u0432\u043b\u0435\u043d\u0438\u044f Auto Tiering. \u041f\u043e\u044d\u0442\u043e\u043c\u0443 \u043d\u0435\u0431\u043e\u043b\u044c\u0448\u043e\u0439 \u0432\u0441\u043f\u043b\u0435\u0441\u043a latency, \u0443\u0432\u044b, \u0432\u043e\u0437\u043c\u043e\u0436\u0435\u043d.<\/p>\n<\/blockquote>\n<p>\u041f\u0440\u0435\u0434\u043b\u043e\u0436\u0435\u043d\u043d\u044b\u0439 \u0432\u0430\u0440\u0438\u0430\u043d\u0442 \u0440\u0435\u0448\u0435\u043d\u0438\u044f (\u043e\u0442\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435 auto-tiering \u0434\u043b\u044f \u0447\u0430\u0441\u0442\u0438 \u0442\u043e\u043c\u043e\u0432) \u043d\u0430\u0441 \u043d\u0435 \u0443\u0441\u0442\u0440\u043e\u0438\u043b. \u041f\u043e\u043a\u0430 \u0432\u0437\u044f\u043b\u0438 \u0442\u0430\u0439\u043c\u0430\u0443\u0442. \u041d\u0430 \u0443\u0434\u0438\u0432\u043b\u0435\u043d\u0438\u0435 \u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u0435\u043b\u0438 \u043d\u0435 \u043e\u0441\u0430\u0436\u0434\u0430\u044e\u0442 \u043d\u0430\u0441 \u0441 \u0432\u043e\u043f\u0440\u043e\u0441\u0430\u043c\u0438: \u00ab\u041f\u043e\u0447\u0435\u043c\u0443 \u0432\u0441\u0435 \u0442\u0430\u043a \u0442\u043e\u0440\u043c\u043e\u0437\u0438\u0442?\u00bb. \u0412\u043e\u0437\u043c\u043e\u0436\u043d\u043e, \u043f\u0440\u0438\u0432\u044b\u043a\u043b\u0438.<\/p>\n<h4>7.5 \u041f\u0443\u0442\u0438 \u043d\u0430\u0437\u0430\u0434 \u043d\u0435\u0442<\/h4>\n<p>\u042f \u0443\u0436\u0435 \u043f\u0438\u0441\u0430\u043b \u0440\u0430\u043d\u0435\u0435, \u0441\u0435\u0439\u0447\u0430\u0441 \u043f\u0440\u043e\u0441\u0442\u043e \u043d\u0430\u043f\u043e\u043c\u043d\u044e, \u0447\u0442\u043e \u0443\u0431\u0440\u0430\u0442\u044c \u0443\u0440\u043e\u0432\u0435\u043d\u044c \u0438\u0437 \u043f\u0443\u043b\u0430 \u0441\u043e \u0432\u043a\u043b\u044e\u0447\u0435\u043d\u043d\u044b\u043c auto-tiering \u043d\u0435\u043b\u044c\u0437\u044f. SSD \u0442\u0430\u043c \u0437\u0430\u0441\u0442\u0440\u044f\u043b\u0438 \u043d\u0430\u0432\u0441\u0435\u0433\u0434\u0430. \u0422\u043b\u0435\u043d \u0438 \u0431\u0435\u0437\u044b\u0441\u0445\u043e\u0434\u043d\u043e\u0441\u0442\u044c&#8230;<\/p>\n<h3>8. \u0412\u044b\u0432\u043e\u0434\u044b<\/h3>\n<p>\u041d\u0430\u043c \u0445\u043e\u0442\u0435\u043b\u043e\u0441\u044c \u0437\u0430 \u0443\u043c\u0435\u0440\u0435\u043d\u043d\u044b\u0435 \u0434\u0435\u043d\u044c\u0433\u0438 \u043f\u043e\u043b\u0443\u0447\u0438\u0442\u044c \u0441\u0438\u0441\u0442\u0435\u043c\u0443 \u0445\u0440\u0430\u043d\u0435\u043d\u0438\u044f \u0434\u0430\u043d\u043d\u044b\u0445 \u043e\u0434\u043d\u043e\u0432\u0440\u0435\u043c\u0435\u043d\u043d\u043e \u0438 \u0435\u043c\u043a\u0443\u044e \u0438 \u0431\u044b\u0441\u0442\u0440\u0443\u044e. \u041f\u043e\u0447\u0442\u0438 \u043f\u043e\u043b\u0443\u0447\u0438\u043b\u043e\u0441\u044c. \u041e\u0441\u0442\u0430\u0435\u0442\u0441\u044f \u0442\u043e\u043b\u044c\u043a\u043e \u043d\u0430\u0434\u0435\u044f\u0442\u044c\u0441\u044f, \u0447\u0442\u043e \u043d\u0430\u0439\u0434\u0435\u043d\u043d\u044b\u0435 \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u044b \u0432 \u0431\u0443\u0434\u0443\u0449\u0435\u043c \u0438\u0441\u043f\u0440\u0430\u0432\u044f\u0442.<\/p>\n<p>\u0421\u0425\u0414 QSAN XS1224 &#8212; \u043e\u0447\u0435\u043d\u044c \u0438\u043d\u0442\u0435\u0440\u0435\u0441\u043d\u044b\u0439 \u043f\u0440\u043e\u0434\u0443\u043a\u0442, \u043d\u043e \u043a \u0441\u043e\u0436\u0430\u043b\u0435\u043d\u0438\u044e \u043e\u0441\u0442\u0430\u0432\u043b\u044f\u0435\u0442 \u0432\u043f\u0435\u0447\u0430\u0442\u043b\u0435\u043d\u0438\u0435 \u043a\u0430\u043a\u043e\u0439-\u0442\u043e \u043d\u0435\u0437\u0430\u043a\u043e\u043d\u0447\u0435\u043d\u043d\u043e\u0441\u0442\u0438\u2026<\/p>\n<p>\u0418 \u0435\u0441\u043b\u0438 \u043c\u0435\u043d\u044f \u0441\u0435\u0439\u0447\u0430\u0441 \u0441\u043f\u0440\u043e\u0441\u044f\u0442: \u00ab\u041c\u044b \u0445\u043e\u0442\u0438\u043c \u0421\u0425\u0414, \u0443 \u043d\u0430\u0441 \u043c\u043d\u043e\u0433\u043e \u0441\u043b\u0443\u0447\u0430\u0439\u043d\u043e\u0439 \u0437\u0430\u043f\u0438\u0441\u0438, \u043d\u043e All-Flash \u0434\u043b\u044f \u043d\u0430\u0441 \u0441\u043b\u0438\u0448\u043a\u043e\u043c \u043a\u0440\u0443\u0442\u043e. \u0427\u0442\u043e \u043d\u0430\u043c \u0432\u044b\u0431\u0440\u0430\u0442\u044c?\u00bb \u044f \u0441\u043a\u043e\u0440\u0435\u0435 \u043f\u0440\u0435\u0434\u043b\u043e\u0436\u0443 \u043a\u0430\u043a\u043e\u0435-\u0442\u043e \u043c\u0430\u043a\u0441\u0438\u043c\u0430\u043b\u044c\u043d\u043e \u043f\u0440\u043e\u0441\u0442\u043e\u0435 \u0440\u0435\u0448\u0435\u043d\u0438\u0435 \u0441 SFF \u0434\u0438\u0441\u043a\u0430\u043c\u0438 \u043d\u0430 10k RPM. \u0411\u0435\u0437 \u0432\u043e\u0442 \u044d\u0442\u043e\u0433\u043e \u0432\u043e\u0442 \u0432\u0441\u0435\u0433\u043e.<\/p>\n<p>\u0412 \u043e\u0431\u0449\u0435\u043c, \u043f\u043e\u0441\u043b\u0435\u0434\u0443\u044e \u0440\u0435\u043a\u043e\u043c\u0435\u043d\u0434\u0430\u0446\u0438\u0438 \u0438\u0437 <a href=\"https:\/\/ru.wikipedia.org\/wiki\/%D0%A1%D1%82%D0%B0%D1%80%D0%BE%D1%80%D1%83%D1%81%D1%81%D0%BA%D0%B0%D1%8F_%D0%B1%D0%B5%D1%80%D0%B5%D1%81%D1%82%D1%8F%D0%BD%D0%B0%D1%8F_%D0%B3%D1%80%D0%B0%D0%BC%D0%BE%D1%82%D0%B0_%E2%84%96_35\">\u0441\u0442\u0430\u0440\u043e\u0440\u0443\u0441\u0441\u043a\u043e\u0439 \u0431\u0435\u0440\u0435\u0441\u0442\u044f\u043d\u043e\u0439 \u0433\u0440\u0430\u043c\u043e\u0442\u044b \u2116 35<\/a>. \u0422\u043e \u0435\u0441\u0442\u044c \u00ab\u043d\u0435 \u043e\u0440\u0438\u0433\u0438\u043d\u0430\u043b\u044c\u043d\u0438\u0447\u0430\u0439\u00bb, \u00ab\u0431\u0443\u0434\u044c \u043a\u0430\u043a \u0432\u0441\u0435\u00bb, \u00ab\u043d\u0435 \u0432\u044b\u043f\u0435\u043d\u0434\u0440\u0438\u0432\u0430\u0439c\u044f\u00bb &#8212; \u0438 \u0431\u0443\u0434\u0435\u0442 \u0441\u0447\u0430\u0441\u0442\u044c\u0435.<\/p>\n<\/div>\n<\/div>\n<\/div>\n<p><!----><!----><\/div>\n<p><!----><!----><br \/> \u0441\u0441\u044b\u043b\u043a\u0430 \u043d\u0430 \u043e\u0440\u0438\u0433\u0438\u043d\u0430\u043b \u0441\u0442\u0430\u0442\u044c\u0438 <a href=\"https:\/\/habr.com\/ru\/articles\/588422\/\"> https:\/\/habr.com\/ru\/articles\/588422\/<\/a><\/p>\n","protected":false},"excerpt":{"rendered":"<div><!--[--><!--]--><\/div>\n<div id=\"post-content-body\">\n<div>\n<div class=\"article-formatted-body article-formatted-body article-formatted-body_version-2\">\n<div xmlns=\"http:\/\/www.w3.org\/1999\/xhtml\">\n<figure class=\"\"><figcaption><\/figcaption><\/figure>\n<p>\u0417\u0430\u0434\u0430\u0447\u0438 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0439 \u0438 \u0438\u0445 \u043f\u043e\u0442\u0440\u0435\u0431\u043d\u043e\u0441\u0442\u0438 \u0432 \u0421\u0425\u0414 \u043c\u0435\u043d\u044f\u044e\u0442\u0441\u044f \u043f\u043e \u043c\u0435\u0440\u0435 \u0440\u0430\u0437\u0432\u0438\u0442\u0438\u044f. \u0420\u044b\u043d\u043e\u043a \u0421\u0425\u0414 \u0442\u043e\u0436\u0435 \u043d\u0435 \u0441\u0442\u043e\u0438\u0442 \u043d\u0430 \u043c\u0435\u0441\u0442\u0435. \u0418 \u043f\u0440\u043e\u0432\u0435\u0440\u0435\u043d\u043d\u044b\u0435 5 \u043b\u0435\u0442 \u043d\u0430\u0437\u0430\u0434 \u0440\u0435\u0448\u0435\u043d\u0438\u044f \u043c\u043e\u0433\u0443\u0442 \u043d\u0435 \u0442\u044f\u043d\u0443\u0442\u044c \u0441\u0435\u0433\u043e\u0434\u043d\u044f\u0448\u043d\u0438\u0445 \u0437\u0430\u0434\u0430\u0447. \u041f\u043e\u0442\u0440\u0430\u0442\u0438\u0432 \u0432 \u043e\u0431\u0449\u0435\u0439 \u0441\u043b\u043e\u0436\u043d\u043e\u0441\u0442\u0438 \u043f\u0430\u0440\u0443 \u043c\u0435\u0441\u044f\u0446\u0435\u0432 \u0440\u0430\u0431\u043e\u0447\u0435\u0433\u043e \u0432\u0440\u0435\u043c\u0435\u043d\u0438 \u043d\u0430 \u0432\u044b\u0431\u043e\u0440, \u0442\u0435\u0441\u0442\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u0435, \u0432\u043d\u0435\u0434\u0440\u0435\u043d\u0438\u0435, \u0434\u0438\u0430\u0433\u043d\u043e\u0441\u0442\u0438\u043a\u0443 \u0438 \u0440\u0435\u0448\u0435\u043d\u0438\u0435 \u0440\u0430\u0437\u043b\u0438\u0447\u043d\u044b\u0445 \u043f\u0440\u043e\u0431\u043b\u0435\u043c \u0441 \u0421\u0425\u0414 QSAN XS1224 \u0440\u0435\u0448\u0438\u043b \u043f\u043e\u0434\u0435\u043b\u0438\u0442\u044c\u0441\u044f \u0441\u0432\u043e\u0438\u043c \u0432\u0438\u0434\u0435\u043d\u0438\u0435\u043c. \u041c\u043d\u0435 \u043a\u0430\u0436\u0435\u0442\u0441\u044f,\u00a0\u0447\u0442\u043e \u043c\u043d\u043e\u0433\u0438\u043c \u044d\u0442\u043e \u0431\u0443\u0434\u0435\u0442 \u0438\u043d\u0442\u0435\u0440\u0435\u0441\u043d\u043e. \u041e\u043f\u0438\u0441\u044b\u0432\u0430\u0435\u043c\u044b\u0439 \u043f\u0435\u0440\u0438\u043e\u0434 \u0432\u0440\u0435\u043c\u0435\u043d\u0438 \u2014 \u0441 2019 \u0433\u043e\u0434\u0430 \u043f\u043e \u043d\u0430\u0441\u0442\u043e\u044f\u0449\u0438\u0439 \u043c\u043e\u043c\u0435\u043d\u0442.<\/p>\n<p>\u041c\u043e\u0436\u0435\u0442 \u043f\u043e\u043a\u0430\u0437\u0430\u0442\u044c\u0441\u044f, \u0447\u0442\u043e \u0443 \u043c\u0435\u043d\u044f \u043a\u0430\u043a\u0438\u0435-\u0442\u043e \u043f\u0440\u0435\u0442\u0435\u043d\u0437\u0438\u0438 \u043a \u0440\u0443\u0441\u0441\u043a\u043e\u044f\u0437\u044b\u0447\u043d\u043e\u0439 \u0441\u043b\u0443\u0436\u0431\u0435 \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u043a\u0438 QSAN. \u041d\u0430 \u0441\u0430\u043c\u043e\u043c \u0434\u0435\u043b\u0435 \u044f \u0438\u043c \u0431\u043b\u0430\u0433\u043e\u0434\u0430\u0440\u0435\u043d &#8212; \u043d\u0435\u0441\u043c\u043e\u0442\u0440\u044f \u043d\u0430 \u0442\u043e, \u0447\u0442\u043e \u043d\u0435 \u0432\u0441\u0435 \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u044b \u043f\u043e\u043b\u0443\u0447\u0438\u043b\u043e\u0441\u044c \u0440\u0435\u0448\u0438\u0442\u044c. \u041f\u0430\u0440\u043d\u0438 \u0440\u0435\u0430\u043b\u044c\u043d\u043e \u0434\u0435\u043b\u0430\u043b\u0438 \u0432\u0441\u0435 \u0447\u0442\u043e \u043c\u043e\u0433\u043b\u0438 \u0447\u0442\u043e\u0431\u044b \u043d\u0430\u043c \u043f\u043e\u043c\u043e\u0447\u044c. \u0421\u043f\u0430\u0441\u0438\u0431\u043e.<\/p>\n<h3>1. \u041f\u043e\u0447\u0435\u043c\u0443 \u043d\u0430\u043c \u043f\u043e\u043d\u0430\u0434\u043e\u0431\u0438\u043b\u0430\u0441\u044c \u043d\u043e\u0432\u0430\u044f \u0421\u0425\u0414<\/h3>\n<p>\u0414\u043e\u043b\u0433\u043e\u0435 \u0432\u0440\u0435\u043c\u044f \u0434\u043b\u044f \u0441\u0438\u0441\u0442\u0435\u043c\u044b \u0432\u0438\u0440\u0442\u0443\u0430\u043b\u0438\u0437\u0430\u0446\u0438\u0438 (oVirt) \u0443 \u043d\u0430\u0441 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043b\u0430\u0441\u044c \u0421\u0425\u0414 HP P2000g3. \u041d\u043e \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u0438 \u0435\u0435 \u0443\u0436\u0435 \u043d\u0435 \u0445\u0432\u0430\u0442\u0430\u043b\u043e. \u0410 \u0441\u0430\u043c\u043e\u0435 \u0433\u043b\u0430\u0432\u043d\u043e\u0435 &#8212; \u043f\u043e\u0441\u043b\u0435 \u043d\u0435\u0443\u0434\u0430\u0447\u043d\u043e\u0433\u043e \u043e\u0431\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u044f \u0440\u0430\u0431\u043e\u0442\u0430\u043b\u0430 \u043e\u043d\u0430 \u043d\u0430 \u043e\u0434\u043d\u043e\u043c \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u043b\u0435\u0440\u0435. \u041f\u043e\u043a\u0443\u043f\u0430\u0442\u044c \u0432\u0442\u043e\u0440\u043e\u0439 \u0431\u044b\u043b\u043e \u043f\u0440\u0438\u0437\u043d\u0430\u043d\u043e \u043d\u0435\u0446\u0435\u043b\u0435\u0441\u043e\u043e\u0431\u0440\u0430\u0437\u043d\u044b\u043c \u0432\u0432\u0438\u0434\u0443 \u043c\u043e\u0440\u0430\u043b\u044c\u043d\u043e\u0433\u043e \u0443\u0441\u0442\u0430\u0440\u0435\u0432\u0430\u043d\u0438\u044f.<\/p>\n<h3>2. \u0421\u043f\u0435\u0446\u0438\u0444\u0438\u043a\u0430 \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0438<\/h3>\n<p>\u041f\u043e \u0441\u0442\u0430\u0442\u0438\u0441\u0442\u0438\u043a\u0435 \u0441\u043e \u0441\u0442\u0430\u0440\u043e\u0439 \u0421\u0425\u0414\u00a0 \u043f\u043e\u043b\u0443\u0447\u0438\u043b\u043e\u0441\u044c \u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0435\u0435. \u0417\u0430 \u0441\u0443\u0442\u043a\u0438 \u043e\u0431\u0440\u0430\u0431\u0430\u0442\u044b\u0432\u0430\u043b\u043e\u0441\u044c \u043e\u043a\u043e\u043b\u043e 4\u0422\u0411 \u0434\u0430\u043d\u043d\u044b\u0445 ~1200 IOPS. \u0421\u043e\u043e\u0442\u043d\u043e\u0448\u0435\u043d\u0438\u0435 \u0447\u0442\u0435\u043d\u0438\u0435\/\u0437\u0430\u043f\u0438\u0441\u044c &#8212; 1\/3. \u041e\u0431\u044b\u0447\u043d\u043e \u043d\u0430\u043e\u0431\u043e\u0440\u043e\u0442 \u0447\u0442\u0435\u043d\u0438\u044f \u0431\u043e\u043b\u044c\u0448\u0435, \u043d\u043e \u0443 \u043d\u0430\u0441 \u0441\u0442\u0430\u0442\u0438\u0441\u0442\u0438\u043a\u0430 \u0434\u0430\u043b\u0430 \u0442\u0430\u043a\u043e\u0439 \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442. \u041f\u0440\u0435\u0438\u043c\u0443\u0449\u0435\u0441\u0442\u0432\u0435\u043d\u043d\u043e \u0441\u043b\u0443\u0447\u0430\u0439\u043d\u0430\u044f \u0437\u0430\u043f\u0438\u0441\u044c. \u0412 \u0441\u0438\u0441\u0442\u0435\u043c\u0435 \u0432\u0438\u0440\u0442\u0443\u0430\u043b\u0438\u0437\u0430\u0446\u0438\u0438 \u043a\u0440\u0443\u0442\u0438\u0442\u0441\u044f \u043f\u0430\u0440\u0430 \u0441\u043e\u0442\u0435\u043d \u0432\u0438\u0440\u0442\u0443\u0430\u043b\u043e\u043a \u0441\u043b\u0430\u0431\u043e \u043d\u0430\u0433\u0440\u0443\u0436\u0435\u043d\u043d\u044b\u0445 \u0431\u043e\u043b\u044c\u0448\u0443\u044e \u0447\u0430\u0441\u0442\u044c \u0432\u0440\u0435\u043c\u0435\u043d\u0438. \u041f\u0435\u0440\u0438\u043e\u0434\u0438\u0447\u0435\u0441\u043a\u0438 \u043a\u043e\u043b\u043b\u0435\u0433\u0438 \u0433\u043e\u043d\u044f\u044e\u0442 \u0442\u0435\u0441\u0442\u044b, \u043f\u043e\u0442\u043e\u043c \u043e\u043d\u0438 \u0441\u043d\u043e\u0432\u0430 \u043f\u0440\u043e\u0441\u0442\u0430\u0438\u0432\u0430\u044e\u0442. \u0412 \u043f\u0440\u043e\u0446\u0435\u0441\u0441\u0435 \u0442\u0435\u0441\u0442\u043e\u0432 \u043d\u0430 \u043b\u043e\u043a\u0430\u043b\u044c\u043d\u044b\u0435 \u0434\u0438\u0441\u043a\u0438 \u0432\u0438\u0440\u0442\u0443\u0430\u043b\u043e\u043a (\u0442.\u0435. \u0432 \u0438\u0442\u043e\u0433\u0435 \u043d\u0430 \u0421\u0425\u0414) \u043f\u0438\u0448\u0443\u0442\u0441\u044f \u043b\u043e\u0433\u0438 \u0438 \u0442\u0440\u0435\u0439\u0441\u044b, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u043f\u043e\u0442\u043e\u043c \u043f\u043e\u0434\u0447\u0438\u0449\u0430\u044e\u0442\u0441\u044f \u0441\u043a\u0440\u0438\u043f\u0442\u043e\u0432\u043e\u0439 \u043e\u0431\u0432\u044f\u0437\u043a\u043e\u0439. <\/p>\n<h3>3. \u0412\u044b\u0431\u0435\u0440\u0438 \u043c\u0435\u043d\u044f, \u0432\u044b\u0431\u0435\u0440\u0438 \u043c\u0435\u043d\u044f&#8230;<\/h3>\n<p>\u041d\u0430 \u043e\u0441\u043d\u043e\u0432\u0430\u043d\u0438\u0438 \u0434\u0430\u043d\u043d\u044b\u0445 \u043e \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0435 \u0441\u0444\u043e\u0440\u043c\u0438\u0440\u043e\u0432\u0430\u043b\u0438 \u0442\u0440\u0435\u0431\u043e\u0432\u0430\u043d\u0438\u044f \u043a \u0421\u0425\u0414. \u041f\u043e\u043b\u0443\u0447\u0438\u043b\u043e\u0441\u044c \u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0435\u0435<\/p>\n<ul>\n<li>\n<p>\u0420\u0430\u0431\u043e\u0447\u0438\u0439 \u043e\u0431\u044a\u0435\u043c &#8212; 40+ \u0422\u0411<\/p>\n<\/li>\n<li>\n<p>IOPS &#8212; 3000+<\/p>\n<\/li>\n<li>\n<p>\u0418\u043d\u0442\u0435\u0440\u0444\u0435\u0439\u0441 &#8212; iSCSI 10G \u0438\u043b\u0438 FC 16G<\/p>\n<\/li>\n<\/ul>\n<p>\u0418 \u0442\u0443\u0442 \u0432\u043e\u0437\u043d\u0438\u043a\u043b\u0430 \u043c\u044b\u0441\u043b\u044c &#8212; \u00ab\u0433\u043e\u0440\u044f\u0447\u0438\u0445\u00bb \u0434\u0430\u043d\u043d\u044b\u0445 \u043d\u0435\u043c\u043d\u043e\u0433\u043e, \u0430 \u043d\u0435 \u043f\u043e\u043f\u0440\u043e\u0431\u043e\u0432\u0430\u0442\u044c \u043b\u0438 \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044e \u0441 \u043e\u0442\u043d\u043e\u0441\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u043c\u0435\u0434\u043b\u0435\u043d\u043d\u044b\u043c\u0438, \u043d\u043e \u0435\u043c\u043a\u0438\u043c\u0438 NL-SAS \u0434\u0438\u0441\u043a\u0430\u043c\u0438 \u0438 SSD \u0432 \u043a\u0430\u0447\u0435\u0441\u0442\u0432\u0435 \u043a\u044d\u0448\u0430?<\/p>\n<p>\u0420\u0430\u0441\u0441\u043c\u0430\u0442\u0440\u0438\u0432\u0430\u043b\u0438\u0441\u044c \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0432\u0430\u0440\u0438\u0430\u043d\u0442\u043e\u0432: Lenovo, Huawei, QSAN, Dell\u2026 \u0412 \u0438\u0442\u043e\u0433\u0435 \u043f\u043e \u0441\u043e\u0432\u043e\u043a\u0443\u043f\u043d\u043e\u0441\u0442\u0438 \u0444\u0430\u043a\u0442\u043e\u0440\u043e\u0432 \u043e\u0441\u0442\u0430\u043d\u043e\u0432\u0438\u043b\u0438\u0441\u044c \u043d\u0430 QSAN. \u041f\u043e\u0434\u0434\u0435\u0440\u0436\u043a\u0430 SSD Cache \u0431\u044b\u043b\u0430 \u0435\u0449\u0435 \u0432 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u0438\u0445 \u043c\u043e\u0434\u0435\u043b\u044f\u0445, \u043d\u043e \u0442\u043e\u043b\u044c\u043a\u043e \u0434\u043b\u044f \u0447\u0442\u0435\u043d\u0438\u044f. \u0410 \u0442\u0443\u0442 \u0435\u0449\u0435 \u0438\u043d\u0442\u0435\u0440\u0435\u0441\u043d\u043e\u0435 \u043f\u0440\u0435\u0434\u043b\u043e\u0436\u0435\u043d\u0438\u0435 \u00ab\u043a\u0443\u043f\u0438 \u0421\u0425\u0414 \u0438 \u043f\u043e\u043b\u0443\u0447\u0438 \u043b\u0438\u0446\u0435\u043d\u0437\u0438\u044e SSD Cache+Auto Tiering \u0431\u0435\u0441\u043f\u043b\u0430\u0442\u043d\u043e\u00bb.<\/p>\n<h3>4. \u041a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044f<\/h3>\n<p>\u0412 \u0442\u0435\u0447\u0435\u043d\u0438\u0435 \u043c\u0435\u0441\u044f\u0446\u0430 \u043f\u0440\u0438\u0431\u044b\u043b\u0430 \u0421\u0425\u0414 QSAN XS1224. \u0414\u0432\u0430 \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u043b\u0435\u0440\u0430, Active-Active, \u043f\u043e 2 \u0438\u043d\u0442\u0435\u0440\u0444\u0435\u0439\u0441\u0430 iSCSI 10Gb\/s \u0438 FC 16Gb\/s \u043d\u0430 \u043a\u0430\u0436\u0434\u043e\u043c \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u043b\u0435\u0440\u0435. 13 NL-SAS HDD ST10000NM0096 (10TB) \u0438 2 SSD WUSTR6432ASS204 3.2TB.<\/p>\n<p>\u0421\u0425\u0414 \u0441\u043c\u043e\u043d\u0442\u0438\u0440\u043e\u0432\u0430\u043b\u0438 \u0432 \u0441\u0442\u043e\u0439\u043a\u0443. Firmware \u0441\u0440\u0430\u0437\u0443 \u043e\u0431\u043d\u043e\u0432\u0438\u043b\u0438 \u0434\u043e \u043f\u043e\u0441\u043b\u0435\u0434\u043d\u0435\u0439 \u043d\u0430 \u0442\u043e\u0442 \u043c\u043e\u043c\u0435\u043d\u0442 1.4.2 (build 201910151200).<\/p>\n<p>\u0414\u043b\u044f \u0442\u0435\u0441\u0442\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043b\u0441\u044f \u0441\u0435\u0440\u0432\u0435\u0440 Supermicro X11DDW-L<\/p>\n<ul>\n<li>\n<p>CPU 2 x Intel(R) Xeon(R) Gold 6230 CPU @ 2.10GHz, RAM 256GB<\/p>\n<\/li>\n<li>\n<p>Ethernet 10Gb\/s &#8212; PE310G2I50-T Server      Adapter Dual Port Copper 10 Gigabit Ethernet PCI Express Server Adapter      Intel\u00ae X550-AT2 Based<\/p>\n<\/li>\n<li>\n<p>FC 16Gb\/s &#8212; Qlogic QLE2672-E HD8310405-25 16Gbps Dual Port FC<\/p>\n<\/li>\n<\/ul>\n<h3>5. \u0422\u0435\u0441\u0442\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u0435. \u0427\u0442\u043e \u043c\u044b \u0445\u043e\u0442\u0435\u043b\u0438 \u043f\u0440\u043e\u0432\u0435\u0440\u0438\u0442\u044c<\/h3>\n<p>\u00a0\u0426\u0435\u043b\u044f\u043c\u0438 \u0442\u0435\u0441\u0442\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f \u0431\u044b\u043b\u043e \u043e\u043f\u0440\u0435\u0434\u0435\u043b\u0435\u043d\u043e \u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0435\u0435:<\/p>\n<ul>\n<li>\n<p>\u041f\u0440\u043e\u0432\u0435\u0440\u0438\u0442\u044c \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u044c \u043d\u0430 \u0440\u0430\u0437\u043d\u044b\u0445 \u0442\u0438\u043f\u0430\u0445 \u0438\u043d\u0442\u0435\u0440\u0444\u0435\u0439\u0441\u043e\u0432 (FC 16G\/iSCSI 10G) \u0441 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043d\u0438\u0435\u043c MPIO \u0438 \u0431\u0435\u0437;<\/p>\n<\/li>\n<li>\n<p>\u041f\u0440\u043e\u0442\u0435\u0441\u0442\u0438\u0440\u043e\u0432\u0430\u0442\u044c \u0440\u0430\u0437\u043b\u0438\u0447\u043d\u044b\u0435 \u0432\u0430\u0440\u0438\u0430\u043d\u0442\u044b \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u0438 RAID;<\/p>\n<\/li>\n<li>\n<p>\u041f\u0440\u043e\u0432\u0435\u0440\u0438\u0442\u044c \u0440\u0430\u0431\u043e\u0442\u0443 SSD Cache;<\/p>\n<\/li>\n<li>\n<p>\u0412\u044b\u0431\u0440\u0430\u0442\u044c \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044e RAID \u0434\u043b\u044f \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043d\u0438\u044f \u0432 \u0441\u0438\u0441\u0442\u0435\u043c\u0435 \u0432\u0438\u0440\u0442\u0443\u0430\u043b\u0438\u0437\u0430\u0446\u0438\u0438 \u043d\u0430 \u043e\u0441\u043d\u043e\u0432\u0430\u043d\u0438\u0438 \u043f\u043e\u043b\u0443\u0447\u0435\u043d\u043d\u044b\u0445 \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u043e\u0432.<\/p>\n<p>\u0417\u0430\u0434\u0430\u0447\u0438 \u0432\u0441\u0435\u043c\u0438 \u0441\u0440\u0435\u0434\u0441\u0442\u0432\u0430\u043c\u0438 \u0432\u044b\u0436\u0430\u0442\u044c \u043c\u0430\u043a\u0441\u0438\u043c\u0443\u043c \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u0438 \u043d\u0435 \u0441\u0442\u043e\u044f\u043b\u043e.<\/p>\n<\/li>\n<\/ul>\n<h4>5.1 \u041f\u0430\u0440\u0430 \u0441\u043b\u043e\u0432 \u043e \u043c\u0435\u0442\u043e\u0434\u0438\u043a\u0435 \u0442\u0435\u0441\u0442\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f<\/h4>\n<p>\u0417\u0430 \u043e\u0441\u043d\u043e\u0432\u0443 \u0431\u044b\u043b\u0430 \u0432\u0437\u044f\u0442\u0430 \u043e\u0442\u043b\u0438\u0447\u043d\u0430\u044f \u0441\u0442\u0430\u0442\u044c\u044f <a href=\"https:\/\/habr.com\/en\/post\/154235\/\">https:\/\/habr.com\/ru\/post\/154235<\/a><\/p>\n<p>\u0415\u0441\u043b\u0438 \u043a\u043e\u0440\u043e\u0442\u043a\u043e:<\/p>\n<ul>\n<li>\n<p>\u0418\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u043c \u0442\u0435\u0441\u0442 fio. \u0420\u0430\u0437\u0443\u043c\u0435\u0435\u0442\u0441\u044f \u0441 \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u043e\u043c direct. ioengine=libaio;<\/p>\n<\/li>\n<li>\n<p>\u041c\u0435\u0442\u0440\u0438\u043a\u0430 \u2014 IOPS;<\/p>\n<\/li>\n<li>\n<p>Latency \u0432\u043e \u0432\u0440\u0435\u043c\u044f \u0442\u0435\u0441\u0442\u0430 \u0434\u043e\u043b\u0436\u043d\u0430 \u0431\u044b\u0442\u044c \u0432 \u0440\u0430\u0437\u0443\u043c\u043d\u044b\u0445 \u043f\u0440\u0435\u0434\u0435\u043b\u0430\u0445 (10 \u043c\u0441).<\/p>\n<\/li>\n<li>\n<p>\u041d\u0430\u0433\u0440\u0443\u0437\u043a\u0430, \u043a\u043e\u0442\u043e\u0440\u0443\u044e \u0441\u043e\u0437\u0434\u0430\u0435\u0442 \u0442\u0435\u0441\u0442, \u043f\u0440\u0438 \u043f\u0440\u043e\u0447\u0438\u0445 \u0444\u0438\u043a\u0441\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u044b\u0445 \u043d\u0430\u0441\u0442\u0440\u043e\u0439\u043a\u0430\u0445 \u043e\u043f\u0440\u0435\u0434\u0435\u043b\u044f\u0435\u0442\u0441\u044f \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u043e\u043c iodepth (\u0433\u043b\u0443\u0431\u0438\u043d\u0430 \u043e\u0447\u0435\u0440\u0435\u0434\u0438). \u0422.\u0435. \u043c\u044b \u0438\u0437\u043c\u0435\u0440\u044f\u0435\u043c \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u0435 IOPS \u043f\u0440\u0438 \u0442\u0430\u043a\u043e\u043c \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u0438 iodepth, \u0447\u0442\u043e\u0431\u044b latency \u043e\u0441\u0442\u0430\u0432\u0430\u043b\u0430\u0441\u044c \u0432 \u0437\u0430\u0434\u0430\u043d\u043d\u044b\u0445 \u043f\u0440\u0435\u0434\u0435\u043b\u0430\u0445.<\/p>\n<\/li>\n<\/ul>\n<p>\u0421\u0443\u0434\u044f \u043f\u043e \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u0430\u0446\u0438\u0438 fio, \u0432 \u043d\u043e\u0432\u044b\u0445 \u0432\u0435\u0440\u0441\u0438\u044f\u0445 \u043f\u043e\u044f\u0432\u0438\u043b\u0430\u0441\u044c \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e\u0441\u0442\u044c \u0430\u0432\u0442\u043e\u043c\u0430\u0442\u0438\u0447\u0435\u0441\u043a\u043e\u0433\u043e \u043f\u043e\u0434\u0431\u043e\u0440\u0430 IO depth \u043f\u043e\u0434 \u0437\u0430\u0434\u0430\u043d\u043d\u043e\u0435 \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u0435 latency. \u041d\u043e \u0443 \u043c\u0435\u043d\u044f \u043e\u043d\u043e \u043f\u043e\u0447\u0435\u043c\u0443-\u0442\u043e \u043d\u0435 \u0437\u0430\u0440\u0430\u0431\u043e\u0442\u0430\u043b\u043e. \u041f\u043e\u044d\u0442\u043e\u043c\u0443 \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u044f iodepth \u044f \u043f\u043e\u0434\u0431\u0438\u0440\u0430\u043b \u0432\u0440\u0443\u0447\u043d\u0443\u044e (\u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043b \u0441\u043e\u0431\u0441\u0442\u0432\u0435\u043d\u043d\u044b\u0439 \u0441\u043a\u0440\u0438\u043f\u0442-\u043e\u0431\u0435\u0440\u0442\u043a\u0443 \u0434\u043b\u044f fio). <\/p>\n<p>\u0414\u0430\u043b\u0435\u0435 \u0435\u0441\u043b\u0438 \u043d\u0435 \u043e\u0433\u043e\u0432\u043e\u0440\u0435\u043d\u043e \u044f\u0432\u043d\u043e, \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u044b \u0442\u0435\u0441\u0442\u0430 \u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0438\u0435: 100% random read (\u0438\u043b\u0438 random write) \u0431\u043b\u043e\u043a\u043e\u043c 4k. \u0414\u043b\u044f MPIO \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043b\u0441\u044f \u0441\u0442\u0430\u043d\u0434\u0430\u0440\u0442\u043d\u044b\u0439 \u0434\u043b\u044f linux multipathd,\u00a0 path_grouping_policy multibus, path_selector round-robin 0.<\/p>\n<p>\u0422\u0435\u0441\u0442\u043e\u0432\u044b\u0439 \u0442\u043e\u043c \u043e\u0431\u044a\u0435\u043c\u043e\u043c 1TB \u043f\u0440\u0435\u0434\u0432\u0430\u0440\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u0437\u0430\u043f\u0438\u0441\u044b\u0432\u0430\u043b\u0441\u044f \u043c\u0443\u0441\u043e\u0440\u043e\u043c \u0438\u0437 \/dev<em>\/<\/em>urandom.<\/p>\n<p>\u041a\u044d\u0448 \u0437\u0430\u043f\u0438\u0441\u0438 \u0434\u043b\u044f \u0442\u043e\u043c\u0430 \u0432 \u0440\u0435\u0436\u0438\u043c\u0435 write-back. Read ahead \u0432\u044b\u043a\u043b\u044e\u0447\u0435\u043d. \u041d\u0430 random read \u043c\u0435\u043b\u043a\u0438\u043c \u0431\u043b\u043e\u043a\u043e\u043c \u043e\u043d \u0431\u0443\u0434\u0435\u0442 \u0442\u043e\u043b\u044c\u043a\u043e \u043c\u0435\u0448\u0430\u0442\u044c.<\/p>\n<p>\u041d\u0430 \u0432\u0441\u044f\u043a\u0438\u0439 \u0441\u043b\u0443\u0447\u0430\u0439 \u0438\u043d\u0444\u043e\u0440\u043c\u0430\u0446\u0438\u044f \u043e\u0431 \u041e\u0421:<\/p>\n<ul>\n<li>\n<p>CentOS Linux release 7.7.1908 (Core)<\/p>\n<\/li>\n<li>\n<p>Kernel 3.10.0-1062.4.1.el7.x86_64<\/p>\n<\/li>\n<li>\n<p>i40e native 2.8.10-k<\/p>\n<\/li>\n<li>\n<p>qla2xxx native 10.00.00.12.07.7-k<\/p>\n<\/li>\n<li>\n<p>fio-3.7-1.el7.x86_64<\/p>\n<\/li>\n<\/ul>\n<h4>5.2 \u0418\u043d\u0442\u0435\u0440\u0444\u0435\u0439\u0441\u044b \u043f\u043e\u0434\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u044f<\/h4>\n<p>\u0421\u043e\u0431\u0438\u0440\u0430\u0435\u043c RAID0 \u0438\u0437 1 SSD \u0438 \u0438\u0437\u043c\u0435\u0440\u044f\u0435\u043c \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u044c \u043f\u0440\u0438 \u043f\u043e\u0434\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0438 \u0447\u0435\u0440\u0435\u0437 iSCSI 10G \u0438 FC 16G. \u041f\u043e\u0434\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435 \u043d\u0430\u043f\u0440\u044f\u043c\u0443\u044e \u043a \u0441\u0435\u0440\u0432\u0435\u0440\u0443, \u0431\u0435\u0437 \u043a\u043e\u043c\u043c\u0443\u0442\u0430\u0442\u043e\u0440\u043e\u0432.<\/p>\n<p>\u041f\u0435\u0440\u0432\u044b\u0435 \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u044b \u0441 \u043d\u0430\u0442\u0438\u0432\u043d\u044b\u043c \u043c\u043e\u0434\u0443\u043b\u0435\u043c qla2xxx \u043e\u043a\u0430\u0437\u0430\u043b\u0438\u0441\u044c \u043e\u0449\u0443\u0442\u0438\u043c\u043e \u043c\u0435\u043d\u044c\u0448\u0435 \u043e\u0436\u0438\u0434\u0430\u0435\u043c\u044b\u0445:<\/p>\n<p>FC 16G \u0431\u0435\u0437 MPIO.<\/p>\n<ul>\n<li>\n<p>Random read, 4k &#8212; avg. latency 7.9ms, bw 266 MB\/s, avg. IOPS 64866<\/p>\n<\/li>\n<li>\n<p>Random write, 4k &#8212; avg. latency 7.7ms, bw 273 MB\/s, avg. IOPS 66570<\/p>\n<\/li>\n<\/ul>\n<p>FC 16G \u0441 MPIO (\u0432\u0442\u043e\u0440\u043e\u0439 FC \u043b\u0438\u043d\u043a \u043f\u043e\u0434\u043a\u043b\u044e\u0447\u0435\u043d \u043a\u043e \u0432\u0442\u043e\u0440\u043e\u043c\u0443 \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u043b\u0435\u0440\u0443 \u0421\u0425\u0414).<\/p>\n<ul>\n<li>\n<p>Random read, 4k &#8212; avg. latency 5.3ms, bw      397 MB\/s, avg. IOPS 96985<\/p>\n<\/li>\n<li>\n<p>Random      write, 4k &#8212; avg. latency 4.9ms, bw 427 MB\/s, avg. IOPS 104134<\/p>\n<\/li>\n<\/ul>\n<p>\u0412\u044b\u044f\u0441\u043d\u0438\u043b\u043e\u0441\u044c, \u0447\u0442\u043e \u043f\u0440\u0438 \u0440\u0430\u0431\u043e\u0442\u0435 \u0442\u0435\u0441\u0442\u0430 \u043e\u0434\u043d\u043e \u044f\u0434\u0440\u043e CPU \u0437\u0430\u0433\u0440\u0443\u0436\u0430\u0435\u0442\u0441\u044f \u043d\u0430 100%. \u041d\u0430 \u043d\u0435\u043c \u043e\u0431\u0440\u0430\u0431\u0430\u0442\u044b\u0432\u0430\u044e\u0442\u0441\u044f \u043f\u0440\u0435\u0440\u044b\u0432\u0430\u043d\u0438\u044f \u043e\u0442 FC \u0430\u0434\u0430\u043f\u0442\u0435\u0440\u0430. \u0412 CentOS 7 \u043f\u043e\u044f\u0432\u0438\u043b\u0441\u044f \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440 \u043c\u043e\u0434\u0443\u043b\u044f qla2xxx &#8212; ql2xmqsupport. \u041f\u0440\u0438 \u0432\u044b\u0441\u0442\u0430\u0432\u043b\u0435\u043d\u0438\u0438 \u0432 1 \u0441\u043e\u0437\u0434\u0430\u0435\u0442 \u0434\u043e\u043f\u043e\u043b\u043d\u0438\u0442\u0435\u043b\u044c\u043d\u044b\u0435 \u043e\u0447\u0435\u0440\u0435\u0434\u0438. \u041d\u0430 \u0442\u043e\u0442 \u043c\u043e\u043c\u0435\u043d\u0442 \u0432 RHEL7 \u0434\u0430\u043d\u043d\u0430\u044f \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e\u0441\u0442\u044c \u0448\u043b\u0430 \u0432 \u0441\u0442\u0430\u0442\u0443\u0441\u0435 technological preview. \u0415\u0441\u0442\u044c \u0431\u0430\u0433 BZ#1414957 &#8212; \u0441\u043d\u0438\u0436\u0435\u043d\u0438\u0435 \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u0438.<\/p>\n<p>\u041a\u0440\u043e\u043c\u0435 \u0442\u043e\u0433\u043e \u0432\u044b\u044f\u0441\u043d\u0438\u043b\u043e\u0441\u044c, \u0447\u0442\u043e \u0432 \u0441\u0438\u0441\u0442\u0435\u043c\u0435 \u0441 \u0434\u0432\u0443\u043c\u044f \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u043b\u0435\u0440\u0430\u043c\u0438 \u0440\u0430\u0431\u043e\u0442\u0430 \u0441 \u0434\u0438\u0441\u043a\u043e\u043c \u0447\u0435\u0440\u0435\u0437 preferred \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u043b\u0435\u0440 \u043e\u043a\u0430\u0437\u044b\u0432\u0430\u0435\u0442\u0441\u044f \u043e\u0449\u0443\u0442\u0438\u043c\u043e \u0431\u044b\u0441\u0442\u0440\u0435\u0435.<\/p>\n<p>\u0420\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u044b \u0441\u043e \u0432\u043a\u043b\u044e\u0447\u0435\u043d\u043d\u044b\u043c ql2xmqsupport.<\/p>\n<p>FC 16G \u0431\u0435\u0437 MPIO<\/p>\n<ul>\n<li>\n<p>Random read, 4k &#8212; avg. latency 7.6ms, bw      275MB\/s, avg. IOPS 67248<\/p>\n<\/li>\n<li>\n<p>Random      write, 4k &#8212; avg. latency 5.9ms, bw 355MB\/s, avg. IOPS 86739<\/p>\n<\/li>\n<\/ul>\n<p>FC 16G \u0441 MPIO<\/p>\n<ul>\n<li>\n<p>Random read, 4k &#8212; avg. latency 4.2ms, bw      502MB\/s, avg. IOPS 122477<\/p>\n<\/li>\n<li>\n<p>Random      write, 4k &#8212; avg. latency 4.3ms, bw 485MB\/s, avg. IOPS 118325<\/p>\n<\/li>\n<\/ul>\n<p>\u0423\u0432\u0435\u043b\u0438\u0447\u0435\u043d\u0438\u0435 \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u0430 iodepth \u0443\u0436\u0435 \u043d\u0435 \u0434\u0430\u0432\u0430\u043b\u043e \u043f\u0440\u0438\u0440\u043e\u0441\u0442\u0430 IOPS. \u041b\u044e\u0431\u043e\u043f\u044b\u0442\u043d\u043e, \u0447\u0442\u043e \u0431\u0435\u0437 MPIO \u0437\u0430\u043f\u0438\u0441\u044c \u043f\u043e\u043b\u0443\u0447\u0438\u043b\u0430\u0441\u044c \u0431\u044b\u0441\u0442\u0440\u0435\u0435 \u0447\u0442\u0435\u043d\u0438\u044f. \u042f \u0441\u043f\u0438\u0441\u0430\u043b \u044d\u0442\u043e \u043d\u0430 \u043e\u0441\u043e\u0431\u0435\u043d\u043d\u043e\u0441\u0442\u0438 \u0440\u0430\u0431\u043e\u0442\u044b qla2xxx \u0441 ql2xmqsupport.<\/p>\n<p>\u0422\u0435\u043f\u0435\u0440\u044c \u0441 iSCSI. \u0417\u0430\u043e\u0434\u043d\u043e \u043f\u043e\u0441\u043c\u043e\u0442\u0440\u0438\u043c, \u043a\u0430\u043a \u043f\u043e\u0432\u043b\u0438\u044f\u0435\u0442 \u0432\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435 jumbo frames (MTU 9000).<\/p>\n<p>ISCSI 10G \u0431\u0435\u0437 MPIO.<\/p>\n<ul>\n<li>\n<p>Jumbo off, random read, 4k &#8212; avg. latency 8ms, bw 130MB\/s, avg. IOPS 31851<\/p>\n<\/li>\n<li>\n<p>Jumbo off, random write, 4k &#8212; avg. latency  7.6ms, bw 137MB\/s, avg. IOPS 33443<\/p>\n<\/li>\n<li>\n<p>Jumbo 9000, random read, 4k &#8212; avg. latency 8.9ms, bw 117MB\/s, avg. IOPS 28578<\/p>\n<\/li>\n<li>\n<p>Jumbo 9000, random write, 4k &#8212; avg. latency 6.8ms, bw 152MB\/s, avg. IOPS 37204<\/p>\n<\/li>\n<\/ul>\n<p>ISCSI 10G c MPIO.<\/p>\n<ul>\n<li>\n<p>Jumbo off, random read, 4k &#8212; avg. latency 8.8ms, bw 237MB\/s, avg. IOPS 57867<\/p>\n<\/li>\n<li>\n<p>Jumbo off, random write, 4k &#8212; avg. latency 8.1ms, bw 258MB\/s, avg. IOPS 62999<\/p>\n<\/li>\n<li>\n<p>Jumbo 9000, random read, 4k &#8212; avg. latency 8.5ms, bw 244MB\/s, avg. IOPS 59677<\/p>\n<\/li>\n<li>\n<p>Jumbo 9000, random write, 4k &#8212; avg. latency 8.1ms, bw 258MB\/s, avg. IOPS 63074<\/p>\n<\/li>\n<\/ul>\n<p>\u0420\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442 \u0432 \u0446\u0435\u043b\u043e\u043c \u043e\u0436\u0438\u0434\u0430\u0435\u043c: iSCSI 10G \u043f\u0440\u0438\u043c\u0435\u0440\u043d\u043e \u0441\u043e\u043e\u0442\u0432\u0435\u0442\u0441\u0442\u0432\u0443\u0435\u0442 \u043f\u043e \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u0438 FC 8G. \u0410 \u0443 \u043d\u0430\u0441 FC 16G, \u0442\u0430\u043a \u0447\u0442\u043e \u0440\u0430\u0437\u043d\u0438\u0446\u0430 \u0432 \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u0438 \u0432 ~2 \u0440\u0430\u0437\u0430 \u0432\u043f\u043e\u043b\u043d\u0435 \u0437\u0430\u043a\u043e\u043d\u043e\u043c\u0435\u0440\u043d\u0430. \u0412\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0435 jumbo frames \u0434\u0430\u0435\u0442 \u043f\u0430\u0434\u0435\u043d\u0438\u0435 \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u0438 \u0431\u0435\u0437 MPIO. \u0412\u0435\u0440\u043e\u044f\u0442\u043d\u043e latency \u0443\u0432\u0435\u043b\u0438\u0447\u0438\u0432\u0430\u0435\u0442\u0441\u044f.<\/p>\n<h4>5.3 \u0422\u0438\u043f\u044b RAID. \u0418\u0445 \u043f\u0440\u0435\u0438\u043c\u0443\u0449\u0435\u0441\u0442\u0432\u0430 \u0438 \u043d\u0435\u0434\u043e\u0441\u0442\u0430\u0442\u043a\u0438. \u0421\u0442\u0440\u0430\u043d\u043d\u043e\u0441\u0442\u0438 \u0441 RAID10<\/h4>\n<p>\u0414\u0430\u043b\u0435\u0435 \u0432\u0441\u0435 \u0442\u0435\u0441\u0442\u044b \u043f\u0440\u0438 \u043f\u043e\u0434\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u0438 \u043f\u043e FC 16G. \u041f\u043e\u0441\u043a\u043e\u043b\u044c\u043a\u0443 HDD \u0437\u043d\u0430\u0447\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u043c\u0435\u0434\u043b\u0435\u043d\u043d\u0435\u0435 SSD, \u0430 \u0441\u0442\u0430\u0431\u0438\u043b\u044c\u043d\u043e\u0441\u0442\u044c \u0440\u0430\u0431\u043e\u0442\u044b qla2xxx \u0441 \u0432\u043a\u043b\u044e\u0447\u0435\u043d\u043d\u044b\u043c ql2xmqsupport \u043f\u043e\u0434 \u0432\u043e\u043f\u0440\u043e\u0441\u043e\u043c \u0434\u0430\u043b\u0435\u0435 \u0442\u0435\u0441\u0442\u0438\u0440\u0443\u0435\u043c \u0431\u0435\u0437 ql2xmqsupport.<\/p>\n<p>5.3.1 \u041a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044f \u043f\u0443\u043b\u0430: 12 NL-SAS HDD ST10000NM0096 10TB \u0432 RAID 10. Thick provisioned.<\/p>\n<p>\u0411\u0435\u0437 MPIO<\/p>\n<ul>\n<li>\n<p>Random read, 4k &#8212; avg. latency 9.5ms, bw 3428kB\/s, avg. IOPS 836<\/p>\n<\/li>\n<li>\n<p>Random write, 4k &#8212; avg. Latency 9.4ms, bw 13.8MB\/s, avg. IOPS 3366<\/p>\n<\/li>\n<\/ul>\n<p>\u0421 MPIO<\/p>\n<ul>\n<li>\n<p>Random read, 4k &#8212; avg. latency 10.3ms, bw 3158kB\/s, avg. IOPS 770<\/p>\n<\/li>\n<li>\n<p>Random write, 4k &#8212; avg. latency 9.6ms, bw 13.6MB\/s, avg. IOPS 3328<\/p>\n<\/li>\n<\/ul>\n<p>\u041e\u0447\u0435\u043d\u044c \u043d\u0438\u0437\u043a\u0430\u044f \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u044c \u0447\u0442\u0435\u043d\u0438\u044f \u0441 RAID10. \u0418 \u0435\u0441\u043b\u0438 \u0432\u044b\u0441\u043e\u043a\u0443\u044e \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u044c \u0437\u0430\u043f\u0438\u0441\u0438 \u0435\u0449\u0435 \u043c\u043e\u0436\u043d\u043e \u043e\u0431\u044a\u044f\u0441\u043d\u0438\u0442\u044c \u043a\u0430\u043a\u0438\u043c\u0438-\u0442\u043e \u043e\u043f\u0442\u0438\u043c\u0438\u0437\u0430\u0446\u0438\u044f\u043c\u0438, \u043a\u044d\u0448\u0435\u043c, NCQ \u0438 \u0442.\u00a0\u043f. \u0442\u043e \u0441 \u0447\u0442\u0435\u043d\u0438\u0435\u043c \u043f\u0440\u0438\u0448\u043b\u043e\u0441\u044c \u0440\u0430\u0437\u0431\u0438\u0440\u0430\u0442\u044c\u0441\u044f.<\/p>\n<p>\u0418 \u044d\u0442\u043e \u043f\u0435\u0440\u0432\u0430\u044f \u043e\u0441\u043e\u0431\u0435\u043d\u043d\u043e\u0441\u0442\u044c \u0421\u0425\u0414 QSAN, \u0430 \u0442\u043e\u0447\u043d\u0435\u0435 \u0440\u0435\u0430\u043b\u0438\u0437\u0430\u0446\u0438\u0438 RAID10 \u043e\u0442 QSAN.<\/p>\n<p>\u0414\u043b\u044f \u0442\u043e\u043c\u043e\u0432 \u0432 \u043f\u0443\u043b\u0435 RAID10 \u0447\u0442\u0435\u043d\u0438\u0435 \u0438\u0434\u0435\u0442 \u0442\u043e\u043b\u044c\u043a\u043e \u0441 \u043d\u0435\u0447\u0435\u0442\u043d\u044b\u0445 \u0434\u0438\u0441\u043a\u043e\u0432 \u0432 \u043f\u0443\u043b\u0435. \u042d\u0442\u043e \u0445\u043e\u0440\u043e\u0448\u043e \u0432\u0438\u0434\u043d\u043e \u043f\u043e \u0433\u0440\u0430\u0444\u0438\u043a\u0430\u043c \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u0438 \u0432 web-\u0438\u043d\u0442\u0435\u0440\u0444\u0435\u0439\u0441\u0435 \u0421\u0425\u0414.<\/p>\n<figure class=\"full-width\"><figcaption><\/figcaption><\/figure>\n<p>\u0415\u0441\u0442\u044c \u043e\u0434\u0438\u043d \u0441\u043f\u043e\u0441\u043e\u0431 \u044d\u0442\u043e \u043e\u0431\u043e\u0439\u0442\u0438 \u2014 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c thick provisioned \u043f\u0443\u043b \u0438 \u043f\u0440\u0438 \u0441\u043e\u0437\u0434\u0430\u043d\u0438\u0438 \u0442\u043e\u043c\u0430 \u0432\u044b\u0431\u0440\u0430\u0442\u044c Full Erase \u0434\u0430\u043d\u043d\u044b\u043c. \u0415\u0441\u043b\u0438 \u0432\u044b \u0443\u0432\u0435\u043b\u0438\u0447\u0438\u0442\u0435 \u0442\u043e\u043c \u0432 \u0434\u0430\u043b\u044c\u043d\u0435\u0439\u0448\u0435\u043c, \u0447\u0442\u0435\u043d\u0438\u0435 \u0441 \u0434\u043e\u0431\u0430\u0432\u043b\u0435\u043d\u043d\u043e\u0433\u043e \u043c\u0435\u0441\u0442\u0430 \u0431\u0443\u0434\u0435\u0442 \u0442\u0430\u043a\u0436\u0435 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c \u0442\u043e\u043b\u044c\u043a\u043e \u043d\u0435\u0447\u0435\u0442\u043d\u044b\u0435 \u0434\u0438\u0441\u043a\u0438. \u041d\u0435\u043c\u043d\u043e\u0433\u043e \u0437\u0430\u0431\u0435\u0433\u0430\u044f \u0432\u043f\u0435\u0440\u0435\u0434, \u0435\u0441\u043b\u0438 \u0434\u043e\u0431\u0430\u0432\u0438\u0442\u044c \u043a \u0442\u043e\u043c\u0443 SSD \u043a\u044d\u0448, \u0442\u043e \u0431\u0430\u0433 \u043f\u0440\u043e\u044f\u0432\u043b\u044f\u0435\u0442\u0441\u044f \u0434\u0430\u0436\u0435 \u0435\u0441\u043b\u0438 \u0431\u044b\u043b \u0432\u044b\u0431\u0440\u0430\u043d \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440 Full Erase.<\/p>\n<p>\u0420\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u044b \u0434\u043b\u044f \u0442\u043e\u043c\u0430, \u0438\u043d\u0438\u0446\u0438\u0430\u043b\u0438\u0437\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u043e\u0433\u043e \u0441 Full Erase:<\/p>\n<ul>\n<li>\n<p>Random read, 4k &#8212; avg. latency 10.3ms, bw 6352 kB\/s, avg. IOPS 1550<\/p>\n<\/li>\n<\/ul>\n<p>\u041e\u043f\u0438\u0441\u0430\u043d\u0438\u0435 \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u044b \u0431\u044b\u043b\u043e \u043e\u0442\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u043e \u0432 \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u043a\u0443 QSAN \u0432 \u043d\u043e\u044f\u0431\u0440\u0435 2019. \u041f\u0440\u043e\u0431\u043b\u0435\u043c\u0443 \u043f\u043e\u0434\u0442\u0432\u0435\u0440\u0434\u0438\u043b\u0438. \u041b\u0435\u0442\u043e\u043c 2021 \u044f \u0435\u0449\u0435 \u0440\u0430\u0437 \u0443\u0442\u043e\u0447\u043d\u0438\u043b \u0441\u0442\u0430\u0442\u0443\u0441 \u043e\u0431\u0440\u0430\u0449\u0435\u043d\u0438\u044f \u0438 \u043f\u043e\u043b\u0443\u0447\u0438\u043b \u043e\u0442\u0432\u0435\u0442 \u0432 \u0434\u0443\u0445\u0435: \u00ab\u041e \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u0435 \u0438\u0437\u0432\u0435\u0441\u0442\u043d\u043e \u0434\u0430\u0432\u043d\u043e, \u043d\u043e \u0431\u0435\u0437 \u0438\u0437\u043c\u0435\u043d\u0435\u043d\u0438\u044f \u0432\u043d\u0443\u0442\u0440\u0435\u043d\u043d\u0435\u0439 \u043b\u043e\u0433\u0438\u043a\u0438 \u044d\u0442\u043e \u043d\u0435 \u0438\u0441\u043f\u0440\u0430\u0432\u0438\u0442\u044c. \u0414\u0430\u0436\u0435 \u043f\u0440\u0438\u043c\u0435\u0440\u043d\u044b\u0445 \u0441\u0440\u043e\u043a\u043e\u0432 \u0440\u0435\u0448\u0435\u043d\u0438\u044f \u043d\u0435\u0442.\u00bb<\/p>\n<p>5.3.2 \u041a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044f \u043f\u0443\u043b\u0430: 12 NL-SAS HDD ST10000NM0096 10TB \u0432 RAID 6 (\u043e\u0434\u043d\u0430 \u0433\u0440\u0443\u043f\u043f\u0430). Thick provisioned.<\/p>\n<p>\u041f\u043e \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u0430\u043c \u0442\u0435\u0441\u0442\u0430 RAID10 \u0432\u0438\u0434\u043d\u043e, \u0447\u0442\u043e MPIO \u043d\u0435 \u0434\u0430\u0435\u0442 \u043f\u0440\u0438\u0440\u043e\u0441\u0442\u0430 \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u0438 (\u0443\u043f\u0438\u0440\u0430\u0435\u043c\u0441\u044f \u0432 \u0434\u0438\u0441\u043a\u0438). \u0414\u0430\u043b\u0435\u0435 \u0442\u0435\u0441\u0442\u044b HDD \u0431\u0435\u0437 MPIO.<\/p>\n<ul>\n<li>\n<p>Random read, 4k &#8212; avg. latency 9.8ms, bw 6643kB\/s, avg. IOPS 1621<\/p>\n<\/li>\n<li>\n<p>Random write, 4k &#8212; avg. latency 8.7ms, bw 3761kB\/s,  avg. IOPS 918<\/p>\n<\/li>\n<\/ul>\n<p>\u0418 \u044d\u0442\u043e \u043f\u0440\u043e\u0432\u0430\u043b. \u0417\u0430\u043f\u0438\u0441\u044c \u043f\u043e\u0447\u0442\u0438 \u0432 4 \u0440\u0430\u0437\u0430 \u043c\u0435\u0434\u043b\u0435\u043d\u043d\u0435\u0435. \u0410 \u0443 \u043d\u0430\u0441, \u043d\u0430\u043f\u043e\u043c\u043d\u044e, \u00be \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0438 \u0438\u043c\u0435\u043d\u043d\u043e \u0437\u0430\u043f\u0438\u0441\u044c.<\/p>\n<p>5.3.3 \u041a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044f \u043f\u0443\u043b\u0430: 12+1 spare NL-SAS HDD ST10000NM0096 10TB \u0432 RAID 6EE (\u043e\u0434\u043d\u0430 \u0433\u0440\u0443\u043f\u043f\u0430). Thick provisioned.<\/p>\n<p>\u0415\u0449\u0435 \u043e\u0434\u043d\u0430 \u0438\u043d\u0442\u0435\u0440\u0435\u0441\u043d\u0430\u044f \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u0438\u0432\u0430\u0435\u043c\u0430\u044f \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044f \u043f\u0443\u043b\u0430 \u2014 RAID6EE. \u0422\u043e \u0435\u0441\u0442\u044c RAID6 \u0441 \u0430\u043a\u0442\u0438\u0432\u043d\u044b\u043c Spare.<\/p>\n<ul>\n<li>\n<p>Random read, 4k &#8212; avg. latency 9.4ms, bw 6923kB\/s, avg. IOPS 1690<\/p>\n<\/li>\n<li>\n<p>Random write, 4k &#8212; avg. latency 7ms, bw 4606kB\/s, avg. IOPS 1124<\/p>\n<\/li>\n<\/ul>\n<p>\u041f\u0440\u0438\u0440\u043e\u0441\u0442 \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u0438 \u043f\u0440\u0438 \u0441\u043b\u0443\u0447\u0430\u0439\u043d\u043e\u043c \u0447\u0442\u0435\u043d\u0438\u0438 \u043f\u043e\u043b\u0443\u0447\u0438\u043b\u0441\u044f \u0447\u0443\u0442\u044c \u0431\u043e\u043b\u0435\u0435 4 \u043f\u0440\u043e\u0446\u0435\u043d\u0442\u043e\u0432. \u041d\u0430 \u0441\u0430\u043c\u043e\u043c \u0434\u0435\u043b\u0435 \u043d\u0435\u043f\u043b\u043e\u0445\u043e, \u0434\u0430\u0436\u0435 \u0435\u0441\u043b\u0438 \u043f\u0440\u043e\u0441\u0442\u043e \u0441\u0443\u043c\u043c\u0438\u0440\u043e\u0432\u0430\u0442\u044c IOPS-\u044b \u043c\u0430\u043a\u0441\u0438\u043c\u0443\u043c, \u0447\u0442\u043e \u043c\u043e\u0436\u043d\u043e \u043e\u0436\u0438\u0434\u0430\u0442\u044c \u044d\u0442\u043e \u043f\u0440\u0438\u0440\u043e\u0441\u0442 \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u0438 \u043f\u0440\u0438\u043c\u0435\u0440\u043d\u043e \u043d\u0430 8 \u043f\u0440\u043e\u0446\u0435\u043d\u0442\u043e\u0432.<\/p>\n<blockquote>\n<p>\u0421 \u0442\u0435\u0441\u0442\u043e\u043c random write<\/p>\n<\/blockquote>\n<\/div>\n<\/div>\n<\/div>\n<\/div>\n","protected":false},"author":1,"featured_media":0,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[],"tags":[],"class_list":["post-405485","post","type-post","status-publish","format-standard","hentry"],"_links":{"self":[{"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/posts\/405485","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=%2Fwp%2Fv2%2Fcomments&post=405485"}],"version-history":[{"count":0,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/posts\/405485\/revisions"}],"wp:attachment":[{"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=%2Fwp%2Fv2%2Fmedia&parent=405485"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=%2Fwp%2Fv2%2Fcategories&post=405485"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=%2Fwp%2Fv2%2Ftags&post=405485"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}