{"id":498224,"date":"2026-10-12T08:44:03","date_gmt":"2026-10-12T05:44:03","guid":{"rendered":"https:\/\/savepearlharbor.com\/?p=498224"},"modified":"2026-10-12T08:44:03","modified_gmt":"2026-10-12T05:44:03","slug":"","status":"publish","type":"post","link":"https:\/\/savepearlharbor.com\/?p=498224","title":{"rendered":"35B\u2011\u043c\u043e\u0434\u0435\u043b\u044c \u043d\u0430\u00a0RTX 5080\u00a0\u0438 RTX 3060: 109\u00a0\u0442\u043e\u043a\/\u0441 \u0447\u0435\u0440\u0435\u0437 PCIe Gen2\u00a0x4"},"content":{"rendered":"<div xmlns=\"http:\/\/www.w3.org\/1999\/xhtml\">\n<p>\u00ab<em>\u041a\u0430\u043a\u00a0MoE \u0438 \u043f\u043e\u0441\u043b\u043e\u0439\u043d\u044b\u0439 \u0441\u043f\u043b\u0438\u0442 \u043e\u0431\u043d\u0443\u043b\u044f\u044e\u0442 \u0430\u0440\u0433\u0443\u043c\u0435\u043d\u0442 \u201e\u043e\u0434\u043d\u0430 \u0432\u0438\u0434\u0435\u043e\u043a\u0430\u0440\u0442\u0430 \u043b\u0443\u0447\u0448\u0435 \u0434\u0432\u0443\u0445\u201c.\u00bb<\/em><\/p>\n<hr\/>\n<p>\u041d\u0430\u00a0\u0425\u0430\u0431\u0440\u0435 \u044d\u0442\u043e\u043c\u0443 \u043f\u043e\u0441\u0432\u044f\u0449\u0435\u043d\u0430 <a href=\"https:\/\/habr.com\/ru\/articles\/1059522\/\" rel=\"noopener nofollow\">\u043e\u0442\u0434\u0435\u043b\u044c\u043d\u0430\u044f \u0441\u0442\u0430\u0442\u044c\u044f<\/a>: \u00ab\u0421\u043e\u0431\u0438\u0440\u0430\u0435\u043c \u0441\u0435\u0440\u0432\u0435\u0440 \u043f\u043e\u0434\u00a0\u0441\u0432\u043e\u0439 \u043b\u043e\u043a\u0430\u043b\u044c\u043d\u044b\u0439 \u0418\u0418: \u0441\u043a\u043e\u043b\u044c\u043a\u043e \u043d\u0443\u0436\u043d\u043e VRAM \u0438 \u043f\u043e\u0447\u0435\u043c\u0443 \u043e\u0434\u043d\u0430 \u0432\u0438\u0434\u0435\u043e\u043a\u0430\u0440\u0442\u0430 \u043b\u0443\u0447\u0448\u0435 \u0434\u0432\u0443\u0445\u00bb. \u0422\u0430\u043c \u043f\u0440\u044f\u043c\u044b\u043c \u0442\u0435\u043a\u0441\u0442\u043e\u043c: \u00ab1\u00a0\u0432\u0438\u0434\u0435\u043e\u043a\u0430\u0440\u0442\u0430 \u043d\u0430 32\u00a0\u0413\u0411 \u043b\u0443\u0447\u0448\u0435 \u0447\u0435\u043c 2\u00a0\u043f\u043e 16\u0413\u0411\u00bb, \u0430\u00a0\u043f\u0440\u0438\u0447\u0438\u043d\u0430 \u0432\u00a0\u0448\u0438\u043d\u0435. \u0412\u0442\u043e\u0440\u043e\u0439 \u0441\u043b\u043e\u0442 \u043d\u0430\u00a0\u043e\u0431\u044b\u0447\u043d\u043e\u0439 \u043c\u0430\u0442\u0435\u0440\u0438\u043d\u043a\u0435 \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u043d\u0430\u00a0\u0443\u0440\u0435\u0437\u0430\u043d\u043d\u044b\u0445 x4\u00a0\u0438\u043b\u0438\u00a0x8, \u0438 \u043e\u0431\u043c\u0435\u043d \u043c\u0435\u0436\u0434\u0443 \u043a\u0430\u0440\u0442\u0430\u043c\u0438 \u0443\u043f\u0438\u0440\u0430\u0435\u0442\u0441\u044f \u0438\u043c\u0435\u043d\u043d\u043e \u0432\u00a0\u043d\u0435\u0433\u043e. \u0422\u043e\u0442\u00a0\u0436\u0435 \u0441\u043f\u043e\u0440 \u0438\u0434\u0451\u0442 \u0432\u00a0\u043a\u043e\u043c\u043c\u0435\u043d\u0442\u0430\u0440\u0438\u044f\u0445 \u043f\u043e\u0434\u00a0\u0441\u0440\u0430\u0432\u043d\u0435\u043d\u0438\u044f\u043c\u0438 \u0432\u0440\u043e\u0434\u0435 <a href=\"https:\/\/habr.com\/ru\/articles\/919394\/\" rel=\"noopener nofollow\">\u00ab\u0434\u0432\u0435 RTX 5060\u00a0Ti 16GB \u0438\u043b\u0438\u00a0\u043e\u0434\u043d\u0430 RTX 3090 24GB\u00bb<\/a> \u0438 \u0432\u00a0\u043e\u0431\u0441\u0443\u0436\u0434\u0435\u043d\u0438\u044f\u0445 <a href=\"https:\/\/habr.com\/ru\/articles\/1019940\/\" rel=\"noopener nofollow\">\u0441\u0431\u043e\u0440\u043e\u043a \u043d\u0430\u00a0\u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u0438\u0445 \u043a\u0430\u0440\u0442\u0430\u0445<\/a>. \u0412\u00a0\u043a\u043e\u043c\u043c\u0435\u043d\u0442\u0430\u0440\u0438\u044f\u0445 \u043a\u00a0\u0442\u043e\u0439\u00a0\u0436\u0435 \u0441\u0442\u0430\u0442\u044c\u0435 \u0432\u043e\u0437\u0440\u0430\u0436\u0430\u044e\u0442 \u0441\u0440\u0430\u0437\u0443: 24\u00a0\u0413\u0411, \u043c\u043e\u043b, \u043e\u0442\u043b\u0438\u0447\u043d\u043e \u0442\u044f\u043d\u0443\u0442 27B \u0438 35B\u2011MoE \u0441\u00a0\u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u043e\u043c 256K.<\/p>\n<p>\u0423\u00a0\u043c\u0435\u043d\u044f \u0440\u043e\u0432\u043d\u043e \u0442\u043e\u0442 \u0441\u043b\u0443\u0447\u0430\u0439, \u043e\u00a0\u043a\u043e\u0442\u043e\u0440\u043e\u043c \u043f\u0440\u0435\u0434\u0443\u043f\u0440\u0435\u0436\u0434\u0430\u0435\u0442 \u0442\u0430 \u0441\u0442\u0430\u0442\u044c\u044f: \u043d\u0430\u00a0\u043c\u0430\u0442\u0435\u0440\u0438\u043d\u0441\u043a\u043e\u0439 \u043f\u043b\u0430\u0442\u0435 \u044f \u0441\u044d\u043a\u043e\u043d\u043e\u043c\u0438\u043b, \u0438 \u0432\u043c\u0435\u0441\u0442\u043e \u043d\u0435\u0451 \u0441\u0442\u043e\u0438\u0442 ASUS Prime B450-Plus, \u0443\u00a0\u043a\u043e\u0442\u043e\u0440\u043e\u0439 \u0432\u0442\u043e\u0440\u043e\u0439 \u0441\u043b\u043e\u0442 x16\u00a0\u0440\u0430\u0441\u043f\u0430\u044f\u043d \u043a\u0430\u043a\u00a0PCIe 2.0\u00a0x4. \u0422\u043e \u0435\u0441\u0442\u044c \u0445\u0443\u0434\u0448\u0438\u0439 \u0432\u0430\u0440\u0438\u0430\u043d\u0442 \u0438\u0437\u00a0\u0432\u043e\u0437\u043c\u043e\u0436\u043d\u044b\u0445, \u0430\u00a0\u043d\u0435 \u00ab\u043d\u0443 \u0447\u0443\u0442\u044c \u043c\u0435\u0434\u043b\u0435\u043d\u043d\u0435\u0435, \u0447\u0435\u043c x8\u00bb.<\/p>\n<p>Qwen3.6\u201335B\u2011A3B \u0443\u00a0\u043c\u0435\u043d\u044f \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u043d\u0430\u00a0RTX 5080\u00a0\u0438 RTX 3060. \u041f\u0440\u0438\u0447\u0451\u043c 3060\u00a0\u0432\u0438\u0441\u0438\u0442 \u043d\u0430\u00a0PCIe Gen2\u00a0x4. \u042d\u0442\u043e 2\u00a0\u0413\u0411\/\u0441, \u0432\u00a0\u0432\u043e\u0441\u0435\u043c\u044c \u0440\u0430\u0437 \u043c\u0435\u0434\u043b\u0435\u043d\u043d\u0435\u0435, \u0447\u0435\u043c\u00a0\u043b\u0438\u043d\u0438\u044f \u0443 5080. \u0421\u043a\u043e\u0440\u043e\u0441\u0442\u044c \u0433\u0435\u043d\u0435\u0440\u0430\u0446\u0438\u0438: 109\u00a0\u0442\u043e\u043a\u0435\u043d\u043e\u0432 \u0432\u00a0\u0441\u0435\u043a\u0443\u043d\u0434\u0443 \u043d\u0430\u00a0\u043a\u043e\u0440\u043e\u0442\u043a\u043e\u043c \u043f\u0440\u043e\u043c\u043f\u0442\u0435 \u0438 77\u00a0\u043d\u0430\u00a0\u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u0435 53\u00a0\u0442\u044b\u0441\u044f\u0447 \u0442\u043e\u043a\u0435\u043d\u043e\u0432.<\/p>\n<p>\u0420\u0430\u0437\u0431\u0435\u0440\u0443, \u043f\u043e\u0447\u0435\u043c\u0443 \u044d\u0442\u043e \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442, \u0438 \u0432\u00a0\u043a\u0430\u043a\u043e\u043c \u0441\u043b\u0443\u0447\u0430\u0435 \u0430\u0440\u0433\u0443\u043c\u0435\u043d\u0442 \u043f\u0440\u043e\u00a0PCIe \u0432\u0441\u0451\u2011\u0442\u0430\u043a\u0438 \u043f\u0440\u0430\u0432.<\/p>\n<h3>\u0421\u0442\u0435\u043d\u0434<\/h3>\n<ul>\n<li>\n<p>CPU: Ryzen 7 5800X, 8\u00a0\u044f\u0434\u0435\u0440 \/ 16\u00a0\u043f\u043e\u0442\u043e\u043a\u043e\u0432<\/p>\n<\/li>\n<li>\n<p>RAM: 64\u00a0\u0413\u0411 DDR4<\/p>\n<\/li>\n<li>\n<p>\u041c\u0430\u0442\u043f\u043b\u0430\u0442\u0430: ASUS Prime B450-Plus (\u0432\u0442\u043e\u0440\u043e\u0439 \u0441\u043b\u043e\u0442 x16\u00a0= PCIe 2.0\u00a0x4)<\/p>\n<\/li>\n<li>\n<p>GPU 0: RTX 3060 12\u00a0\u0413\u0411, GDDR6, \u0448\u0438\u043d\u0430 192\u00a0\u0431\u0438\u0442\u0430, 15\u00a0\u0413\u0431\u0438\u0442\/\u0441 \u2192 <strong>360\u00a0\u0413\u0411\/\u0441<\/strong><\/p>\n<\/li>\n<li>\n<p>GPU 1: RTX 5080 16\u00a0\u0413\u0411, GDDR7, \u0448\u0438\u043d\u0430 256\u00a0\u0431\u0438\u0442, 30\u00a0\u0413\u0431\u0438\u0442\/\u0441 \u2192 <strong>960\u00a0\u0413\u0411\/\u0441<\/strong><\/p>\n<\/li>\n<li>\n<p>NVLink: \u043d\u0435\u0442<\/p>\n<\/li>\n<li>\n<p>OS: Arch Linux, \u044f\u0434\u0440\u043e 7.1.11\u00a0(i use arch btw)<\/p>\n<\/li>\n<li>\n<p>\u0414\u0440\u0430\u0439\u0432\u0435\u0440 610.57.04, CUDA 13.3<\/p>\n<\/li>\n<li>\n<p>llama.cpp build 10\u202f738<\/p>\n<\/li>\n<\/ul>\n<p>\u0421\u0443\u043c\u043c\u0430\u0440\u043d\u043e 28\u00a0\u0413\u0411 \u0432\u0438\u0434\u0435\u043e\u043f\u0430\u043c\u044f\u0442\u0438. \u041f\u043e\u043b\u043e\u0441\u044b \u043f\u0440\u043e\u043f\u0443\u0441\u043a\u0430\u043d\u0438\u044f \u0441\u043a\u043b\u0430\u0434\u044b\u0432\u0430\u0442\u044c \u043d\u0435\u043b\u044c\u0437\u044f: \u043a\u0430\u0440\u0442\u044b \u0440\u0430\u0431\u043e\u0442\u0430\u044e\u0442 \u043f\u043e\u0441\u043b\u0435\u0434\u043e\u0432\u0430\u0442\u0435\u043b\u044c\u043d\u043e, \u0430\u00a0\u043d\u0435\u00a0\u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u044c\u043d\u043e. \u041a\u00a0\u044d\u0442\u043e\u043c\u0443 \u0432\u0435\u0440\u043d\u0443\u0441\u044c.<\/p>\n<p>\u041f\u0440\u043e\u00a0PCIe \u0440\u0430\u0437\u0433\u043e\u0432\u043e\u0440 \u043e\u0441\u043e\u0431\u044b\u0439, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e\u00a0\u044d\u0442\u043e \u0441\u0430\u043c\u0430\u044f \u0438\u043d\u0442\u0435\u0440\u0435\u0441\u043d\u0430\u044f \u0447\u0430\u0441\u0442\u044c \u0441\u0442\u0435\u043d\u0434\u0430:<\/p>\n<pre><code>GPU 0 (RTX 3060):  Gen2 x4   \u2248 2 \u0413\u0411\/\u0441    (\u043a\u0430\u0440\u0442\u0430 \u0443\u043c\u0435\u0435\u0442 Gen4 x16)GPU 1 (RTX 5080):  Gen3 x16  \u2248 16 \u0413\u0411\/\u0441   (\u043a\u0430\u0440\u0442\u0430 \u0443\u043c\u0435\u0435\u0442 Gen5 x16)<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><span class=\"sc-logo-wrapper\"><\/span><\/a><\/div><\/pre>\n<p>3060\u00a0\u0441\u0442\u043e\u0438\u0442 \u0432\u043e\u00a0\u0432\u0442\u043e\u0440\u043e\u043c \u0441\u043b\u043e\u0442\u0435, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0443\u00a0B450-Plus <a href=\"https:\/\/www.asus.com\/motherboards-components\/motherboards\/prime\/prime-b450-plus\/techspec\/\" rel=\"noopener nofollow\">\u043f\u043e\u00a0\u0441\u043f\u0435\u0446\u0438\u0444\u0438\u043a\u0430\u0446\u0438\u0438<\/a> \u0440\u0430\u0441\u043f\u0430\u044f\u043d \u043a\u0430\u043a\u00a0PCIe 2.0\u00a0x4: \u0447\u0435\u0442\u044b\u0440\u0435\u00a0\u043b\u0438\u043d\u0438\u0438 \u0432\u043c\u0435\u0441\u0442\u043e \u0448\u0435\u0441\u0442\u043d\u0430\u0434\u0446\u0430\u0442\u0438, \u0438 \u043d\u0435\u00a0\u043f\u043e\u00a0\u043e\u0448\u0438\u0431\u043a\u0435 \u0441\u0431\u043e\u0440\u043a\u0438, \u0430\u00a0\u043f\u043e\u00a0\u0437\u0430\u043c\u044b\u0441\u043b\u0443 \u043f\u043b\u0430\u0442\u044b. \u0412\u0435\u0440\u0445\u043d\u0438\u0439 \u0441\u043b\u043e\u0442 \u043f\u043b\u0430\u0442\u0430 \u043e\u0442\u0434\u0430\u0451\u0442 \u043a\u0430\u043a\u00a0PCIe 3.0\u00a0x16, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 5080\u00a0\u0441\u00a0\u0435\u0451 Gen5\u00a0\u0442\u043e\u0436\u0435 \u0443\u043f\u0438\u0440\u0430\u0435\u0442\u0441\u044f \u0432\u00a0\u043f\u043e\u0442\u043e\u043b\u043e\u043a B450. \u041e\u0431\u0435 \u043a\u0430\u0440\u0442\u044b \u0432\u0438\u0441\u044f\u0442 \u043d\u0430\u00a0\u043e\u0434\u043d\u043e\u043c PCIe\u2011\u0445\u043e\u0441\u0442\u0435. \u041d\u0438\u043a\u0430\u043a\u043e\u0433\u043e NVLink, \u043d\u0438\u043a\u0430\u043a\u043e\u0433\u043e x16\/x16.<\/p>\n<h3>\u041f\u043e\u0447\u0435\u043c\u0443 PCIe \u0437\u0434\u0435\u0441\u044c \u043d\u0438 \u043f\u0440\u0438\u00a0\u0447\u0451\u043c<\/h3>\n<p>\u041a\u043b\u0430\u0441\u0441\u0438\u0447\u0435\u0441\u043a\u0438\u0439 \u0430\u0440\u0433\u0443\u043c\u0435\u043d\u0442 \u043f\u0440\u043e\u0442\u0438\u0432 \u0434\u0432\u0443\u0445 \u043a\u0430\u0440\u0442 \u043e\u043f\u0438\u0440\u0430\u0435\u0442\u0441\u044f \u043d\u0430\u00a0\u0442\u0435\u043d\u0437\u043e\u0440\u043d\u044b\u0439 \u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u0438\u0437\u043c. \u0422\u0430\u043c \u043a\u0430\u0436\u0434\u0430\u044f \u043a\u0430\u0440\u0442\u0430 \u0441\u0447\u0438\u0442\u0430\u0435\u0442 \u0441\u0432\u043e\u0439 \u043a\u0443\u0441\u043e\u043a \u043a\u0430\u0436\u0434\u043e\u0433\u043e \u0441\u043b\u043e\u044f, \u0438 \u043f\u043e\u0441\u043b\u0435 \u043a\u0430\u0436\u0434\u043e\u0433\u043e \u0441\u043b\u043e\u044f \u043d\u0443\u0436\u043d\u043e \u0441\u0438\u043d\u0445\u0440\u043e\u043d\u0438\u0437\u0438\u0440\u043e\u0432\u0430\u0442\u044c \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u044b \u0447\u0435\u0440\u0435\u0437 all\u2011reduce. \u0427\u0435\u043c \u0434\u043b\u0438\u043d\u043d\u0435\u0435 \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442, \u0442\u0435\u043c \u0431\u043e\u043b\u044c\u0448\u0435 \u0434\u0430\u043d\u043d\u044b\u0445 \u0433\u043e\u043d\u044f\u0435\u0442\u0441\u044f \u043f\u043e\u00a0\u0448\u0438\u043d\u0435. \u0412\u043e\u0442 \u0442\u0430\u043c Gen2\u00a0x4\u00a0\u0434\u0435\u0439\u0441\u0442\u0432\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u0443\u0431\u0438\u0432\u0430\u0435\u0442.<\/p>\n<p>\u0423\u00a0\u043c\u0435\u043d\u044f \u0432\u043a\u043b\u044e\u0447\u0451\u043d <strong>\u043f\u043e\u0441\u043b\u043e\u0439\u043d\u044b\u0439 \u0441\u043f\u043b\u0438\u0442<\/strong> (\u0432 llama.cpp \u044d\u0442\u043e \u0440\u0435\u0436\u0438\u043c \u043f\u043e\u00a0\u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e). \u0421\u043b\u043e\u0438 \u043f\u0440\u043e\u0441\u0442\u043e \u043f\u043e\u0434\u0435\u043b\u0435\u043d\u044b \u043c\u0435\u0436\u0434\u0443 \u043a\u0430\u0440\u0442\u0430\u043c\u0438: \u043e\u0434\u043d\u0430 \u0434\u0435\u0440\u0436\u0438\u0442 \u043f\u0435\u0440\u0432\u0443\u044e \u043f\u043e\u043b\u043e\u0432\u0438\u043d\u0443, \u0432\u0442\u043e\u0440\u0430\u044f \u0434\u0440\u0443\u0433\u0443\u044e. \u041f\u043e\u00a0\u0448\u0438\u043d\u0435 \u0445\u043e\u0434\u0438\u0442 \u043d\u0435\u00a0\u0432\u0435\u0441, \u0430\u00a0\u0430\u043a\u0442\u0438\u0432\u0430\u0446\u0438\u044f, \u0438 \u0440\u043e\u0432\u043d\u043e \u043e\u0434\u0438\u043d \u0440\u0430\u0437 \u0437\u0430\u00a0\u0442\u043e\u043a\u0435\u043d.<\/p>\n<p>\u0421\u0447\u0438\u0442\u0430\u0435\u043c. \u0421\u043a\u0440\u044b\u0442\u0430\u044f \u0440\u0430\u0437\u043c\u0435\u0440\u043d\u043e\u0441\u0442\u044c \u043c\u043e\u0434\u0435\u043b\u0438 \u0440\u0430\u0432\u043d\u0430 2048. \u0410\u043a\u0442\u0438\u0432\u0430\u0446\u0438\u044f \u0432\u00a0fp16\u00a0\u0437\u0430\u043d\u0438\u043c\u0430\u0435\u0442 2048\u00a0\u00d7 2\u00a0\u0431\u0430\u0439\u0442\u0430, \u0442\u043e \u0435\u0441\u0442\u044c 4\u00a0\u041a\u0411. \u041e\u0434\u0438\u043d \u043f\u0435\u0440\u0435\u0445\u043e\u0434 \u043c\u0435\u0436\u0434\u0443 \u043a\u0430\u0440\u0442\u0430\u043c\u0438 \u0437\u0430\u00a0\u0442\u043e\u043a\u0435\u043d.<\/p>\n<p>\u041f\u0440\u0438 109\u00a0\u0442\u043e\u043a\/\u0441 \u044d\u0442\u043e 437\u00a0\u041a\u0411\/\u0441.\u00a0\u041b\u0438\u043d\u0438\u044f Gen2\u00a0x4\u00a0\u0434\u0430\u0451\u0442 2\u00a0\u0413\u0411\/\u0441. \u0417\u0430\u0433\u0440\u0443\u0437\u043a\u0430 \u0448\u0438\u043d\u044b \u0438\u0437\u043c\u0435\u0440\u044f\u0435\u0442\u0441\u044f \u0441\u043e\u0442\u044b\u043c\u0438 \u0434\u043e\u043b\u044f\u043c\u0438 \u043f\u0440\u043e\u0446\u0435\u043d\u0442\u0430.<\/p>\n<p>\u0414\u0430\u0436\u0435 \u043d\u0430\u00a0\u043f\u0440\u0435\u0444\u0438\u043b\u043b\u0435 \u043a\u0430\u0440\u0442\u0438\u043d\u0430 \u043d\u0435\u00a0\u043c\u0435\u043d\u044f\u0435\u0442\u0441\u044f. \u0411\u0430\u0442\u0447 \u0438\u0437 2048\u00a0\u0442\u043e\u043a\u0435\u043d\u043e\u0432 \u0437\u0430\u043d\u0438\u043c\u0430\u0435\u0442 8\u00a0\u041c\u0411, \u0438 \u043e\u043d\u0438 \u0440\u0430\u0437\u043c\u0430\u0437\u044b\u0432\u0430\u044e\u0442\u0441\u044f \u043f\u043e\u00a0\u0432\u0441\u0435\u0439 \u043e\u0431\u0440\u0430\u0431\u043e\u0442\u043a\u0435 \u043f\u0440\u043e\u043c\u043f\u0442\u0430. \u041f\u0440\u0438 1500\u00a0\u0442\u043e\u043a\/\u0441 \u043f\u0440\u0435\u0444\u0438\u043b\u043b\u0430 \u043f\u043e\u043b\u0443\u0447\u0430\u0435\u0442\u0441\u044f \u043e\u043a\u043e\u043b\u043e 6\u00a0\u041c\u0411\/\u0441.<\/p>\n<p>\u0412\u043e\u0442 \u043f\u043e\u0447\u0435\u043c\u0443 \u043a\u0440\u0438\u0432\u0430\u044f Gen2\u00a0x4\u00a0\u043d\u0435\u00a0\u043c\u0435\u0448\u0430\u0435\u0442: \u043e\u043d\u0430 \u043d\u0435\u00a0\u0443\u0447\u0430\u0441\u0442\u0432\u0443\u0435\u0442 \u0432\u00a0\u0433\u043e\u0440\u044f\u0447\u0435\u043c \u043f\u0443\u0442\u0438. <strong>\u0412\u0435\u0441\u0430 \u043e\u0441\u0442\u0430\u044e\u0442\u0441\u044f \u043d\u0430\u00a0\u0441\u0432\u043e\u0438\u0445 \u043a\u0430\u0440\u0442\u0430\u0445, \u043f\u043e\u00a0\u0448\u0438\u043d\u0435 \u0435\u0434\u0435\u0442 \u0442\u043e\u043b\u044c\u043a\u043e \u0430\u043a\u0442\u0438\u0432\u0430\u0446\u0438\u044f.<\/strong><\/p>\n<h3>\u041f\u043e\u0447\u0435\u043c\u0443 MoE \u043c\u0435\u043d\u044f\u0435\u0442 \u0430\u0440\u0438\u0444\u043c\u0435\u0442\u0438\u043a\u0443<\/h3>\n<p>\u0415\u0441\u043b\u0438\u00a0\u0431\u044b Qwen3.6\u201335B\u2011A3B\u00a0\u0431\u044b\u043b\u0430 \u043f\u043b\u043e\u0442\u043d\u043e\u0439 \u043c\u043e\u0434\u0435\u043b\u044c\u044e, \u0432\u0441\u0451\u00a0\u0431\u044b\u043b\u043e\u00a0\u0431\u044b \u0438\u043d\u0430\u0447\u0435. \u0424\u0430\u0439\u043b \u0432\u0435\u0441\u0438\u0442 21,3\u00a0\u0413\u0438\u0411, \u0438 \u043f\u043b\u043e\u0442\u043d\u0430\u044f \u043c\u043e\u0434\u0435\u043b\u044c \u0447\u0438\u0442\u0430\u043b\u0430\u00a0\u0431\u044b \u0432\u0441\u0435 \u044d\u0442\u0438 \u0433\u0438\u0433\u0430\u0431\u0430\u0439\u0442\u044b \u043d\u0430\u00a0\u043a\u0430\u0436\u0434\u044b\u0439 \u0442\u043e\u043a\u0435\u043d. \u041d\u0430 5080\u00a0\u0441\u00a0\u0435\u0451 960\u00a0\u0413\u0411\/\u0441 \u044d\u0442\u043e \u043f\u043e\u0442\u043e\u043b\u043e\u043a \u043e\u043a\u043e\u043b\u043e 42\u00a0\u0442\u043e\u043a\/\u0441, \u0438 \u0442\u043e \u0431\u0435\u0437\u00a0\u0432\u0442\u043e\u0440\u043e\u0439 \u043a\u0430\u0440\u0442\u044b. \u0421\u00a0\u043f\u043e\u0441\u043b\u043e\u0439\u043d\u044b\u043c \u0441\u043f\u043b\u0438\u0442\u043e\u043c \u043a\u0430\u0440\u0442\u044b \u0440\u0430\u0431\u043e\u0442\u0430\u044e\u0442 \u043f\u043e\u00a0\u043e\u0447\u0435\u0440\u0435\u0434\u0438, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 \u043f\u043e\u043b\u043e\u0441\u044b \u043d\u0435\u00a0\u0441\u043a\u043b\u0430\u0434\u044b\u0432\u0430\u044e\u0442\u0441\u044f, \u0430\u00a0\u0432\u0440\u0435\u043c\u044f \u0441\u0443\u043c\u043c\u0438\u0440\u0443\u0435\u0442\u0441\u044f.<\/p>\n<p>\u041d\u043e\u00a0Qwen3.6\u201335B\u2011A3B \u044d\u0442\u043e MoE. \u0418\u0437 35B \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u043e\u0432 \u043d\u0430\u00a0\u043a\u0430\u0436\u0434\u043e\u043c \u0442\u043e\u043a\u0435\u043d\u0435 \u0430\u043a\u0442\u0438\u0432\u0438\u0440\u0443\u044e\u0442\u0441\u044f \u043f\u0440\u0438\u043c\u0435\u0440\u043d\u043e 3B: 8\u00a0\u043c\u0430\u0440\u0448\u0440\u0443\u0442\u0438\u0437\u0438\u0440\u0443\u0435\u043c\u044b\u0445 \u044d\u043a\u0441\u043f\u0435\u0440\u0442\u043e\u0432 \u0438\u0437 256\u00a0\u043f\u043b\u044e\u0441 \u043e\u0434\u0438\u043d \u043e\u0431\u0449\u0438\u0439. \u041e\u0441\u0442\u0430\u043b\u044c\u043d\u044b\u0435 32B \u043b\u0435\u0436\u0430\u0442 \u0432\u00a0\u043f\u0430\u043c\u044f\u0442\u0438 \u0438 \u043d\u0435\u00a0\u0447\u0438\u0442\u0430\u044e\u0442\u0441\u044f.<\/p>\n<p>\u041e\u0442\u0441\u044e\u0434\u0430 \u0438 \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442. \u041c\u043e\u0434\u0435\u043b\u044c \u043d\u0430 35B \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u043e\u0432 \u043f\u043e\u00a0\u0442\u0440\u0435\u0431\u043e\u0432\u0430\u043d\u0438\u044f\u043c \u043a\u00a0\u043f\u0430\u043c\u044f\u0442\u0438, \u043d\u043e\u00a0\u043f\u043e\u00a0\u0441\u0442\u043e\u0438\u043c\u043e\u0441\u0442\u0438 \u043e\u0434\u043d\u043e\u0433\u043e \u0442\u043e\u043a\u0435\u043d\u0430 \u0431\u043b\u0438\u0436\u0435 \u043a 3B. \u0418\u043c\u0435\u043d\u043d\u043e \u044d\u0442\u043e \u0440\u0430\u0441\u0441\u043e\u0433\u043b\u0430\u0441\u043e\u0432\u0430\u043d\u0438\u0435 \u0438 \u0434\u0435\u043b\u0430\u0435\u0442 \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e\u0439 \u0440\u0430\u0431\u043e\u0442\u0443 \u043d\u0430\u00a0\u0434\u0432\u0443\u0445 \u0440\u0430\u0437\u043d\u044b\u0445 \u043f\u043e\u0442\u0440\u0435\u0431\u0438\u0442\u0435\u043b\u044c\u0441\u043a\u0438\u0445 \u043a\u0430\u0440\u0442\u0430\u0445.<\/p>\n<p>\u0421\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u0430 \u043c\u043e\u0434\u0435\u043b\u0438, \u043f\u043e\u00a0\u043a\u0430\u0440\u0442\u043e\u0447\u043a\u0435 \u043d\u0430\u00a0HuggingFace:<\/p>\n<ul>\n<li>\n<p>40\u00a0\u0441\u043b\u043e\u0451\u0432, \u0441\u043a\u0440\u044b\u0442\u0430\u044f \u0440\u0430\u0437\u043c\u0435\u0440\u043d\u043e\u0441\u0442\u044c 2048<\/p>\n<\/li>\n<li>\n<p>256\u00a0\u044d\u043a\u0441\u043f\u0435\u0440\u0442\u043e\u0432, \u0438\u0437\u00a0\u043d\u0438\u0445 8\u00a0\u043c\u0430\u0440\u0448\u0440\u0443\u0442\u0438\u0437\u0438\u0440\u0443\u0435\u043c\u044b\u0445 + 1\u00a0\u043e\u0431\u0449\u0438\u0439 \u043d\u0430\u00a0\u0442\u043e\u043a\u0435\u043d<\/p>\n<\/li>\n<li>\n<p>\u0447\u0435\u0440\u0435\u0434\u043e\u0432\u0430\u043d\u0438\u0435 Gated DeltaNet (\u043b\u0438\u043d\u0435\u0439\u043d\u043e\u0435 \u0432\u043d\u0438\u043c\u0430\u043d\u0438\u0435) \u0438 Gated Attention<\/p>\n<\/li>\n<li>\n<p>\u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442 262\u202f144\u00a0\u0442\u043e\u043a\u0435\u043d\u0430 \u043d\u0430\u0442\u0438\u0432\u043d\u043e<\/p>\n<\/li>\n<li>\n<p>MTP\u2011\u0433\u043e\u043b\u043e\u0432\u0430 \u0434\u043b\u044f\u00a0\u0441\u043f\u0435\u043a\u0443\u043b\u044f\u0442\u0438\u0432\u043d\u043e\u0433\u043e \u0434\u0435\u043a\u043e\u0434\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f<\/p>\n<\/li>\n<\/ul>\n<p>\u0422\u0435\u043f\u0435\u0440\u044c \u043f\u0440\u043e\u00a0\u0432\u043d\u0438\u043c\u0430\u043d\u0438\u0435. \u041f\u043e\u043b\u043d\u043e\u0435 \u0432\u043d\u0438\u043c\u0430\u043d\u0438\u0435 \u0441\u0442\u043e\u0438\u0442 \u0432\u00a0\u043a\u0430\u0436\u0434\u043e\u043c \u0447\u0435\u0442\u0432\u0451\u0440\u0442\u043e\u043c \u0441\u043b\u043e\u0435, \u0432\u00a0\u043e\u0441\u0442\u0430\u043b\u044c\u043d\u044b\u0445 \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 Gated DeltaNet \u0441\u00a0\u0441\u043e\u0441\u0442\u043e\u044f\u043d\u0438\u0435\u043c \u043f\u043e\u0441\u0442\u043e\u044f\u043d\u043d\u043e\u0433\u043e \u0440\u0430\u0437\u043c\u0435\u0440\u0430. \u041f\u043e\u044d\u0442\u043e\u043c\u0443 KV\u2011\u043a\u044d\u0448 \u0440\u0430\u0441\u0442\u0451\u0442 \u043c\u0435\u0434\u043b\u0435\u043d\u043d\u043e, \u0438 \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u044c \u0433\u0435\u043d\u0435\u0440\u0430\u0446\u0438\u0438 \u043f\u043e\u0447\u0442\u0438 \u043d\u0435\u00a0\u0437\u0430\u0432\u0438\u0441\u0438\u0442 \u043e\u0442\u00a0\u0434\u043b\u0438\u043d\u044b \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u0430. \u041d\u0438\u0436\u0435 \u044d\u0442\u043e \u0432\u0438\u0434\u043d\u043e \u0432\u00a0\u0437\u0430\u043c\u0435\u0440\u0430\u0445.<\/p>\n<h3>\u0417\u0430\u043c\u0435\u0440\u044b<\/h3>\n<p>\u0412\u0441\u0435 \u0437\u0430\u043c\u0435\u0440\u044b \u0441\u043d\u044f\u0442\u044b \u0447\u0435\u0440\u0435\u0437 <code>\/completion<\/code> \u0441 <code>cache_prompt: false<\/code>, \u0442\u043e \u0435\u0441\u0442\u044c \u043f\u0440\u043e\u043c\u043f\u0442 \u043a\u0430\u0436\u0434\u044b\u0439 \u0440\u0430\u0437 \u043e\u0431\u0440\u0430\u0431\u0430\u0442\u044b\u0432\u0430\u0435\u0442\u0441\u044f \u0437\u0430\u043d\u043e\u0432\u043e. \u041f\u0440\u0435\u0441\u0435\u0442 \u043d\u0435\u00a0\u043c\u0435\u043d\u044f\u043b\u0441\u044f, \u0441\u0435\u0440\u0432\u0435\u0440 \u043d\u0435\u00a0\u043f\u0435\u0440\u0435\u0437\u0430\u043f\u0443\u0441\u043a\u0430\u043b\u0441\u044f, \u0437\u0430\u043c\u0435\u0440\u044b \u0448\u043b\u0438 \u043f\u043e\u0441\u043b\u0435\u0434\u043e\u0432\u0430\u0442\u0435\u043b\u044c\u043d\u043e. \u041d\u0438\u0436\u0435 \u043d\u0435\u00a0\u043f\u0435\u0440\u0435\u0441\u0447\u0451\u0442 \u0441\u0442\u0430\u0440\u044b\u0445 \u0447\u0438\u0441\u0435\u043b, \u0430\u00a0\u043e\u0442\u0434\u0435\u043b\u044c\u043d\u044b\u0439 \u043f\u0440\u043e\u0433\u043e\u043d \u043d\u0430\u00a0\u0436\u0438\u0432\u043e\u043c \u0441\u0435\u0440\u0432\u0435\u0440\u0435.<\/p>\n<h4>\u0411\u0430\u0437\u043e\u0432\u0430\u044f \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u044c<\/h4>\n<p>\u041a\u043e\u0440\u043e\u0442\u043a\u0438\u0439 \u043f\u0440\u043e\u043c\u043f\u0442, \u0433\u0435\u043d\u0435\u0440\u0430\u0446\u0438\u044f 256\u00a0\u0442\u043e\u043a\u0435\u043d\u043e\u0432, \u043f\u044f\u0442\u044c \u043f\u0440\u043e\u0433\u043e\u043d\u043e\u0432 \u043f\u043e\u0434\u0440\u044f\u0434:<\/p>\n<div>\n<div class=\"table\">\n<table>\n<tbody>\n<tr>\n<th>\n<p align=\"left\">\u041f\u0440\u043e\u0433\u043e\u043d<\/p>\n<\/th>\n<th>\n<p align=\"left\">\u0413\u0435\u043d\u0435\u0440\u0430\u0446\u0438\u044f, \u0442\u043e\u043a\/\u0441<\/p>\n<\/th>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">1<\/p>\n<\/td>\n<td>\n<p align=\"left\">109,2<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">2<\/p>\n<\/td>\n<td>\n<p align=\"left\">109,7<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">3<\/p>\n<\/td>\n<td>\n<p align=\"left\">106,0<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">4<\/p>\n<\/td>\n<td>\n<p align=\"left\">109,6<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">5<\/p>\n<\/td>\n<td>\n<p align=\"left\">108,4<\/p>\n<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<\/div>\n<\/div>\n<p>\u0420\u0430\u0437\u0431\u0440\u043e\u0441 \u043c\u0435\u0436\u0434\u0443 \u043f\u0440\u043e\u0433\u043e\u043d\u0430\u043c\u0438 3,5%, \u0441\u0440\u0435\u0434\u043d\u0435\u0435 108,6. \u042d\u0442\u043e \u043c\u0435\u043d\u044c\u0448\u0435, \u0447\u0435\u043c \u0440\u0430\u0437\u043d\u0438\u0446\u0430 \u043c\u0435\u0436\u0434\u0443 \u0431\u043e\u043b\u044c\u0448\u0438\u043d\u0441\u0442\u0432\u043e\u043c \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u0439 \u043d\u0438\u0436\u0435, \u0442\u0430\u043a \u0447\u0442\u043e\u00a0\u0431\u0430\u0437\u043e\u0432\u0443\u044e \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u044c \u043c\u043e\u0436\u043d\u043e \u0441\u0447\u0438\u0442\u0430\u0442\u044c \u0443\u0441\u0442\u043e\u0439\u0447\u0438\u0432\u043e\u0439.<\/p>\n<h4>\u041e\u0442\u00a0\u0442\u0438\u043f\u0430 \u043a\u043e\u043d\u0442\u0435\u043d\u0442\u0430<\/h4>\n<p>\u0417\u0434\u0435\u0441\u044c \u0440\u0430\u0437\u0431\u0440\u043e\u0441 \u0443\u0436\u0435 \u043d\u0435\u00a0\u0448\u0443\u043c\u043e\u0432\u043e\u0439, \u0430\u00a0\u0441\u043e\u0434\u0435\u0440\u0436\u0430\u0442\u0435\u043b\u044c\u043d\u044b\u0439:<\/p>\n<div>\n<div class=\"table\">\n<table>\n<tbody>\n<tr>\n<th>\n<p align=\"left\">\u0417\u0430\u0434\u0430\u0447\u0430<\/p>\n<\/th>\n<th>\n<p align=\"left\">\u0413\u0435\u043d\u0435\u0440\u0430\u0446\u0438\u044f, \u0442\u043e\u043a\/\u0441<\/p>\n<\/th>\n<th>\n<p align=\"left\">\u041f\u0440\u0438\u043d\u044f\u0442\u043e \u0447\u0435\u0440\u043d\u043e\u0432\u0438\u043a\u043e\u0432 MTP<\/p>\n<\/th>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">\u041a\u043e\u0434 \u043d\u0430\u00a0Python<\/p>\n<\/td>\n<td>\n<p align=\"left\">114,6<\/p>\n<\/td>\n<td>\n<p align=\"left\">85,7%<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">JSON \u043f\u043e\u00a0\u0441\u0445\u0435\u043c\u0435<\/p>\n<\/td>\n<td>\n<p align=\"left\">113,3<\/p>\n<\/td>\n<td>\n<p align=\"left\">85,1%<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">\u041a\u043e\u0434 \u043d\u0430\u00a0\u0440\u0443\u0441\u0441\u043a\u043e\u043c<\/p>\n<\/td>\n<td>\n<p align=\"left\">100,4<\/p>\n<\/td>\n<td>\n<p align=\"left\">68,8%<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">\u041f\u0440\u043e\u0437\u0430 \u043d\u0430\u00a0\u0430\u043d\u0433\u043b\u0438\u0439\u0441\u043a\u043e\u043c<\/p>\n<\/td>\n<td>\n<p align=\"left\">96,0<\/p>\n<\/td>\n<td>\n<p align=\"left\">62,9%<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">\u041f\u0440\u043e\u0437\u0430 \u043d\u0430\u00a0\u0440\u0443\u0441\u0441\u043a\u043e\u043c<\/p>\n<\/td>\n<td>\n<p align=\"left\">95,4<\/p>\n<\/td>\n<td>\n<p align=\"left\">62,0%<\/p>\n<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<\/div>\n<\/div>\n<p>\u0421\u043a\u043e\u0440\u043e\u0441\u0442\u044c \u0441\u043b\u0435\u0434\u0443\u0435\u0442 \u0437\u0430\u00a0\u0434\u043e\u043b\u0435\u0439 \u043f\u0440\u0438\u043d\u044f\u0442\u044b\u0445 \u0447\u0435\u0440\u043d\u043e\u0432\u0438\u043a\u043e\u0432 \u043f\u043e\u0447\u0442\u0438\u00a0\u043b\u0438\u043d\u0435\u0439\u043d\u043e. \u041d\u0430\u00a0\u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u043e\u043c \u0432\u044b\u0432\u043e\u0434\u0435 MTP \u0443\u0433\u0430\u0434\u044b\u0432\u0430\u0435\u0442 \u0431\u043e\u043b\u044c\u0448\u0435 \u0432\u043e\u0441\u044c\u043c\u0438 \u0442\u043e\u043a\u0435\u043d\u043e\u0432 \u0438\u0437\u00a0\u0434\u0435\u0441\u044f\u0442\u0438, \u043d\u0430\u00a0\u0441\u0432\u043e\u0431\u043e\u0434\u043d\u043e\u0439 \u043f\u0440\u043e\u0437\u0435 \u043e\u043a\u043e\u043b\u043e \u0448\u0435\u0441\u0442\u0438.<\/p>\n<h4>\u0421\u043a\u043e\u043b\u044c\u043a\u043e \u0442\u043e\u043a\u0435\u043d\u043e\u0432 \u0434\u0430\u0451\u0442 \u043e\u0434\u0438\u043d \u043f\u0440\u043e\u0445\u043e\u0434 \u043c\u043e\u0434\u0435\u043b\u0438<\/h4>\n<p>\u0422\u043e\u0442\u00a0\u0436\u0435 \u0437\u0430\u043c\u0435\u0440, \u043d\u043e\u00a0\u0441\u00a0\u043f\u043e\u0434\u0441\u0447\u0451\u0442\u043e\u043c \u0446\u0438\u043a\u043b\u043e\u0432 \u0441\u043f\u0435\u043a\u0443\u043b\u044f\u0442\u0438\u0432\u043d\u043e\u0433\u043e \u0434\u0435\u043a\u043e\u0434\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f (\u043f\u0440\u0435\u0434\u0441\u043a\u0430\u0437\u0430\u043d\u043e \u043c\u0438\u043d\u0443\u0441 \u043f\u0440\u0438\u043d\u044f\u0442\u043e):<\/p>\n<div>\n<div class=\"table\">\n<table>\n<tbody>\n<tr>\n<th>\n<p align=\"left\">\u0417\u0430\u0434\u0430\u0447\u0430<\/p>\n<\/th>\n<th>\n<p align=\"left\">\u0422\u043e\u043a\u0435\u043d\u043e\u0432 \u0437\u0430\u00a0\u043f\u0440\u043e\u0445\u043e\u0434<\/p>\n<\/th>\n<th>\n<p align=\"left\">\u041f\u0440\u0438\u043d\u044f\u0442\u043e \u0447\u0435\u0440\u043d\u043e\u0432\u0438\u043a\u043e\u0432<\/p>\n<\/th>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">\u041a\u043e\u0434 \u043d\u0430\u00a0Python<\/p>\n<\/td>\n<td>\n<p align=\"left\">2,70<\/p>\n<\/td>\n<td>\n<p align=\"left\">85,7%<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">JSON \u043f\u043e\u00a0\u0441\u0445\u0435\u043c\u0435<\/p>\n<\/td>\n<td>\n<p align=\"left\">2,68<\/p>\n<\/td>\n<td>\n<p align=\"left\">85,1%<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">\u041f\u0440\u043e\u0437\u0430 \u043d\u0430\u00a0\u0440\u0443\u0441\u0441\u043a\u043e\u043c<\/p>\n<\/td>\n<td>\n<p align=\"left\">2,22<\/p>\n<\/td>\n<td>\n<p align=\"left\">62,0%<\/p>\n<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<\/div>\n<\/div>\n<p>\u041f\u0440\u0438 <code>--spec-draft-n-max 2<\/code> \u0442\u0435\u043e\u0440\u0435\u0442\u0438\u0447\u0435\u0441\u043a\u0438\u0439 \u043c\u0430\u043a\u0441\u0438\u043c\u0443\u043c \u0440\u0430\u0432\u0435\u043d \u0442\u0440\u0451\u043c \u0442\u043e\u043a\u0435\u043d\u0430\u043c \u0437\u0430\u00a0\u043f\u0440\u043e\u0445\u043e\u0434. \u041d\u0430\u00a0\u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u043e\u043c \u0432\u044b\u0432\u043e\u0434\u0435 \u043c\u043e\u0434\u0435\u043b\u044c \u043f\u043e\u0434\u0445\u043e\u0434\u0438\u0442 \u043a\u00a0\u043d\u0435\u043c\u0443 \u0432\u043f\u043b\u043e\u0442\u043d\u0443\u044e.<\/p>\n<p>\u041e\u0433\u043e\u0432\u043e\u0440\u044e\u0441\u044c: \u0442\u043e\u043a\u0435\u043d\u043e\u0432 \u0437\u0430\u00a0\u043f\u0440\u043e\u0445\u043e\u0434 \u043d\u0435\u00a0\u0442\u043e\u00a0\u0436\u0435 \u0441\u0430\u043c\u043e\u0435, \u0447\u0442\u043e\u00a0\u0443\u0441\u043a\u043e\u0440\u0435\u043d\u0438\u0435. \u041f\u0440\u043e\u0432\u0435\u0440\u044f\u044e\u0449\u0438\u0439 \u043f\u0440\u043e\u0445\u043e\u0434 \u043e\u0431\u0440\u0430\u0431\u0430\u0442\u044b\u0432\u0430\u0435\u0442 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0442\u043e\u043a\u0435\u043d\u043e\u0432 \u0441\u0440\u0430\u0437\u0443 \u0438 \u0441\u0442\u043e\u0438\u0442 \u0434\u043e\u0440\u043e\u0436\u0435 \u043e\u0434\u043d\u043e\u0433\u043e. Unsloth \u0432\u00a0\u043a\u0430\u0440\u0442\u043e\u0447\u043a\u0435 \u043c\u043e\u0434\u0435\u043b\u0438 \u043e\u0431\u0435\u0449\u0430\u0435\u0442 \u0443\u0441\u043a\u043e\u0440\u0435\u043d\u0438\u0435 \u0432 1,5\u20132\u00a0\u0440\u0430\u0437\u0430; \u044f \u044d\u0442\u043e \u043d\u0435\u00a0\u0438\u0437\u043e\u043b\u0438\u0440\u043e\u0432\u0430\u043b, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e\u00a0\u0434\u043b\u044f\u00a0\u0447\u0435\u0441\u0442\u043d\u043e\u0433\u043e A\/B \u043f\u0440\u0438\u0448\u043b\u043e\u0441\u044c\u00a0\u0431\u044b \u043f\u0435\u0440\u0435\u0437\u0430\u043f\u0443\u0441\u043a\u0430\u0442\u044c \u0441\u0435\u0440\u0432\u0435\u0440 \u0431\u0435\u0437 <code>--spec-type draft-mtp<\/code>. \u041f\u0440\u0435\u0441\u0435\u0442 \u044f \u043d\u0435\u00a0\u0442\u0440\u043e\u0433\u0430\u043b.<\/p>\n<h4>\u0414\u043b\u0438\u043d\u043d\u044b\u0439 \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442<\/h4>\n<p>\u0421\u0430\u043c\u0430\u044f \u0438\u043d\u0442\u0435\u0440\u0435\u0441\u043d\u0430\u044f \u0442\u0430\u0431\u043b\u0438\u0446\u0430:<\/p>\n<div>\n<div class=\"table\">\n<table>\n<tbody>\n<tr>\n<th>\n<p align=\"left\">\u041a\u043e\u043d\u0442\u0435\u043a\u0441\u0442, \u0442\u043e\u043a\u0435\u043d\u043e\u0432<\/p>\n<\/th>\n<th>\n<p align=\"left\">\u041e\u0431\u0440\u0430\u0431\u043e\u0442\u043a\u0430 \u043f\u0440\u043e\u043c\u043f\u0442\u0430, \u0442\u043e\u043a\/\u0441<\/p>\n<\/th>\n<th>\n<p align=\"left\">\u0413\u0435\u043d\u0435\u0440\u0430\u0446\u0438\u044f, \u0442\u043e\u043a\/\u0441<\/p>\n<\/th>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">13\u202f865<\/p>\n<\/td>\n<td>\n<p align=\"left\">1820<\/p>\n<\/td>\n<td>\n<p align=\"left\">90,8<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">27\u202f703<\/p>\n<\/td>\n<td>\n<p align=\"left\">1708<\/p>\n<\/td>\n<td>\n<p align=\"left\">87,9<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">42\u202f528<\/p>\n<\/td>\n<td>\n<p align=\"left\">1586<\/p>\n<\/td>\n<td>\n<p align=\"left\">80,6<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">53\u202f401<\/p>\n<\/td>\n<td>\n<p align=\"left\">1504<\/p>\n<\/td>\n<td>\n<p align=\"left\">76,7<\/p>\n<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<\/div>\n<\/div>\n<p>\u0413\u0435\u043d\u0435\u0440\u0430\u0446\u0438\u044f \u043f\u0430\u0434\u0430\u0435\u0442 \u043d\u0430 15% \u043f\u0440\u0438\u00a0\u0440\u043e\u0441\u0442\u0435 \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u0430 \u0441 14K \u0434\u043e 53K: 90,8\u00a0\u2192 76,7. \u0417\u0430\u043c\u0435\u0442\u043d\u043e, \u043d\u043e\u00a0\u043d\u0435\u00a0\u043e\u0431\u0432\u0430\u043b. \u0420\u0430\u0431\u043e\u0442\u0430\u0435\u0442\u00a0\u043b\u0438\u043d\u0435\u0439\u043d\u043e\u0435 \u0432\u043d\u0438\u043c\u0430\u043d\u0438\u0435: \u0441\u043e\u0441\u0442\u043e\u044f\u043d\u0438\u0435 Gated DeltaNet \u043d\u0435\u00a0\u0440\u0430\u0441\u0442\u0451\u0442 \u0441\u00a0\u0434\u043b\u0438\u043d\u043e\u0439 \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u0430, \u0430\u00a0\u043f\u043e\u043b\u043d\u043e\u0435 \u0432\u043d\u0438\u043c\u0430\u043d\u0438\u0435 \u0441\u0442\u043e\u0438\u0442 \u0442\u043e\u043b\u044c\u043a\u043e \u0432\u00a0\u0434\u0435\u0441\u044f\u0442\u0438 \u0441\u043b\u043e\u044f\u0445 \u0438\u0437\u00a0\u0441\u043e\u0440\u043e\u043a\u0430, \u0438 KV \u0442\u0430\u043c \u0443\u0437\u043a\u0438\u0439\u00a0\u2014 2\u00a0\u0433\u043e\u043b\u043e\u0432\u044b \u043f\u043e 256\u00a0\u0438\u0437\u043c\u0435\u0440\u0435\u043d\u0438\u0439, \u043e\u043a\u043e\u043b\u043e 10\u00a0\u041a\u0411 \u043d\u0430\u00a0\u0442\u043e\u043a\u0435\u043d \u043d\u0430\u00a0\u0432\u0441\u0435 \u0434\u0435\u0441\u044f\u0442\u044c \u0441\u043b\u043e\u0451\u0432. \u0423\u00a0\u043f\u043b\u043e\u0442\u043d\u043e\u0439 \u043c\u043e\u0434\u0435\u043b\u0438 \u0441\u00a0\u043f\u043e\u043b\u043d\u044b\u043c \u0432\u043d\u0438\u043c\u0430\u043d\u0438\u0435\u043c \u043d\u0430\u00a0\u0432\u0441\u0435\u0445 \u0441\u043e\u0440\u043e\u043a\u0430 \u0441\u043b\u043e\u044f\u0445 \u043a\u0440\u0438\u0432\u0430\u044f \u0437\u0434\u0435\u0441\u044c \u0443\u0448\u043b\u0430\u00a0\u0431\u044b \u0432\u043d\u0438\u0437 \u0433\u043e\u0440\u0430\u0437\u0434\u043e \u043a\u0440\u0443\u0447\u0435.<\/p>\n<p>\u041e\u0431\u0440\u0430\u0431\u043e\u0442\u043a\u0430 \u043f\u0440\u043e\u043c\u043f\u0442\u0430 \u043f\u0430\u0434\u0430\u0435\u0442\u00a0\u0431\u044b\u0441\u0442\u0440\u0435\u0435 (1820\u00a0\u2192 1504, \u044d\u0442\u043e 17%), \u043d\u043e\u00a0\u0442\u0430\u043c \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u0432\u044b\u0447\u0438\u0441\u043b\u0435\u043d\u0438\u0435, \u0430\u00a0\u043d\u0435\u00a0\u043f\u0430\u043c\u044f\u0442\u044c.<\/p>\n<h4>\u0414\u0432\u0430 \u0441\u043b\u043e\u0442\u0430 \u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u044c\u043d\u043e<\/h4>\n<p>\u041f\u0440\u0435\u0441\u0435\u0442 \u0437\u0430\u0434\u0430\u0451\u0442 <code>parallel = 2<\/code>, \u0442\u043e \u0435\u0441\u0442\u044c \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442 131\u202f072\u00a0\u0434\u0435\u043b\u0438\u0442\u0441\u044f \u043d\u0430\u00a0\u0434\u0432\u0430 \u0441\u043b\u043e\u0442\u0430 \u043f\u043e 65\u202f536. \u0414\u0432\u0430 \u043e\u0434\u043d\u043e\u0432\u0440\u0435\u043c\u0435\u043d\u043d\u044b\u0445 \u0437\u0430\u043f\u0440\u043e\u0441\u0430:<\/p>\n<div>\n<div class=\"table\">\n<table>\n<tbody>\n<tr>\n<th>\n<p align=\"left\">\n<\/th>\n<th>\n<p align=\"left\">\u0413\u0435\u043d\u0435\u0440\u0430\u0446\u0438\u044f, \u0442\u043e\u043a\/\u0441<\/p>\n<\/th>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">\u0421\u043b\u043e\u0442 1\u00a0(\u043a\u043e\u0434)<\/p>\n<\/td>\n<td>\n<p align=\"left\">69,3<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">\u0421\u043b\u043e\u0442 2\u00a0(\u043f\u0440\u043e\u0437\u0430)<\/p>\n<\/td>\n<td>\n<p align=\"left\">60,5<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">\u0421\u0443\u043c\u043c\u0430\u0440\u043d\u043e<\/p>\n<\/td>\n<td>\n<p align=\"left\">\u2248 130<\/p>\n<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<\/div>\n<\/div>\n<p>\u0421\u0443\u043c\u043c\u0430\u0440\u043d\u0430\u044f \u043f\u0440\u043e\u043f\u0443\u0441\u043a\u043d\u0430\u044f \u0441\u043f\u043e\u0441\u043e\u0431\u043d\u043e\u0441\u0442\u044c \u0432\u044b\u0440\u043e\u0441\u043b\u0430 \u0441 109\u00a0\u0434\u043e 130\u00a0\u0442\u043e\u043a\/\u0441, \u043d\u043e\u00a0\u043a\u0430\u0436\u0434\u044b\u0439 \u043e\u0442\u0434\u0435\u043b\u044c\u043d\u044b\u0439 \u0437\u0430\u043f\u0440\u043e\u0441 \u0437\u0430\u043c\u0435\u0434\u043b\u0438\u043b\u0441\u044f \u043f\u043e\u0447\u0442\u0438 \u0432\u0434\u0432\u043e\u0435. \u0414\u043b\u044f\u00a0\u0430\u0433\u0435\u043d\u0442\u0430, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0445\u043e\u0434\u0438\u0442 \u0432\u00a0\u0441\u0435\u0440\u0432\u0435\u0440 \u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u044c\u043d\u043e, \u044d\u0442\u043e \u0441\u043a\u043e\u0440\u0435\u0435 \u043c\u0438\u043d\u0443\u0441: \u0434\u0432\u0430 \u0437\u0430\u043f\u0440\u043e\u0441\u0430 \u0436\u0434\u0443\u0442 \u0434\u0440\u0443\u0433 \u0434\u0440\u0443\u0433\u0430 \u0434\u043e\u043b\u044c\u0448\u0435, \u0447\u0435\u043c \u0435\u0441\u043b\u0438\u00a0\u0431\u044b \u0448\u043b\u0438 \u043f\u043e\u00a0\u043e\u0447\u0435\u0440\u0435\u0434\u0438.<\/p>\n<h3>\u041a\u043e\u043d\u0444\u0438\u0433<\/h3>\n<p>\u041f\u0440\u0435\u0441\u0435\u0442 \u0432 <code>~\/.config\/llama.cpp\/models.ini<\/code>:<\/p>\n<pre><code>[unsloth\/Qwen3.6-35B-A3B-MTP-GGUF-64K]hf = unsloth\/Qwen3.6-35B-A3B-MTP-GGUF:UD-Q4_K_XLctx-size = 131072cache-type-k = q8_0cache-type-v = q8_0spec-type = draft-mtpspec-draft-n-max = 2temperature = 1.0top-p = 0.95top-k = 20min-p = 0.0presence-penalty = 1.5repeat-penalty = 1.0<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><span class=\"sc-logo-wrapper icon-only\"><\/span><\/a><\/div><\/pre>\n<p>\u0417\u0430\u043f\u0443\u0441\u043a\u0430\u0435\u0442\u0441\u044f \u0447\u0435\u0440\u0435\u0437 \u0440\u043e\u0443\u0442\u0435\u0440 <code>llama-server --models-preset<\/code>, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0441\u0430\u043c \u043f\u043e\u0434\u043d\u0438\u043c\u0430\u0435\u0442 \u043c\u043e\u0434\u0435\u043b\u044c \u043e\u0442\u0434\u0435\u043b\u044c\u043d\u044b\u043c \u043f\u0440\u043e\u0446\u0435\u0441\u0441\u043e\u043c. \u0418\u0442\u043e\u0433\u043e\u0432\u0430\u044f \u043a\u043e\u043c\u0430\u043d\u0434\u0430, \u043a\u043e\u0442\u043e\u0440\u0443\u044e \u043e\u043d \u0441\u043e\u0431\u0438\u0440\u0430\u0435\u0442:<\/p>\n<pre><code>llama-server --host 127.0.0.1 --port &lt;\u0434\u0438\u043d\u0430\u043c\u0438\u0447\u0435\u0441\u043a\u0438\u0439&gt; \\  --alias unsloth\/Qwen3.6-35B-A3B-MTP-GGUF-64K \\  --hf-repo unsloth\/Qwen3.6-35B-A3B-MTP-GGUF:UD-Q4_K_XL \\  --ctx-size 131072 --parallel 2 \\  --cache-type-k q8_0 --cache-type-v q8_0 \\  --n-gpu-layers -1 --flash-attn on --load-mode mmap \\  --spec-type draft-mtp --spec-draft-n-max 2 \\  --temperature 1.0 --top-p 0.95 --top-k 20 --min-p 0.0 \\  --presence-penalty 1.5 --repeat-penalty 1.0<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><span class=\"sc-logo-wrapper icon-only\"><\/span><\/a><\/div><\/pre>\n<p>\u0427\u0442\u043e\u00a0\u0437\u0434\u0435\u0441\u044c \u0432\u0430\u0436\u043d\u043e \u0438 \u0447\u0435\u0433\u043e \u043d\u0435\u0442:<\/p>\n<p><strong>\u041d\u0435\u0442 <\/strong><code><strong>--split-mode<\/strong><\/code><strong>.<\/strong> \u0421\u0442\u043e\u0438\u0442 \u0440\u0435\u0436\u0438\u043c \u043f\u043e\u00a0\u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e, \u0442\u043e \u0435\u0441\u0442\u044c \u043f\u043e\u0441\u043b\u043e\u0439\u043d\u044b\u0439. \u0418\u043c\u0435\u043d\u043d\u043e \u043f\u043e\u044d\u0442\u043e\u043c\u0443 Gen2\u00a0x4\u00a0\u043d\u0435\u00a0\u043c\u0435\u0448\u0430\u0435\u0442.<\/p>\n<p><strong>\u0415\u0441\u0442\u044c \u043a\u0432\u0430\u043d\u0442\u0438\u0437\u0430\u0446\u0438\u044f KV\u2011\u043a\u044d\u0448\u0430 \u0434\u043e\u00a0q8_0.<\/strong> KV \u0443\u00a0\u044d\u0442\u043e\u0439 \u043c\u043e\u0434\u0435\u043b\u0438 \u0443\u0437\u043a\u0438\u0439 (2\u00a0\u0433\u043e\u043b\u043e\u0432\u044b), \u0438 \u043d\u0430\u00a0\u043a\u043e\u0440\u043e\u0442\u043a\u043e\u043c \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u0435 \u0432\u044b\u0438\u0433\u0440\u044b\u0448 \u043e\u0442\u00a0\u043a\u0432\u0430\u043d\u0442\u0438\u0437\u0430\u0446\u0438\u0438 \u043d\u0435\u0437\u0430\u043c\u0435\u0442\u0435\u043d. \u041d\u043e\u00a0\u043e\u043d \u043e\u0441\u0432\u043e\u0431\u043e\u0436\u0434\u0430\u0435\u0442 \u043e\u043a\u043e\u043b\u043e \u0433\u0438\u0433\u0430\u0431\u0430\u0439\u0442\u0430 VRAM, \u0430\u00a0\u043d\u0430\u00a0\u044d\u0442\u043e\u0439 \u043f\u0430\u0440\u0435 \u043a\u0430\u0440\u0442 \u043a\u0430\u0436\u0434\u044b\u0439 \u0433\u0438\u0433\u0430\u0431\u0430\u0439\u0442 \u0440\u0435\u0448\u0430\u0435\u0442, \u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0441\u043b\u043e\u0451\u0432 \u0443\u0435\u0434\u0435\u0442 \u043d\u0430\u00a0\u0431\u044b\u0441\u0442\u0440\u0443\u044e 5080. \u041d\u0430\u00a0\u0434\u043b\u0438\u043d\u043d\u043e\u043c \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u0435 \u044d\u043a\u043e\u043d\u043e\u043c\u0438\u044f \u0440\u0430\u0441\u0442\u0451\u0442\u00a0\u043b\u0438\u043d\u0435\u0439\u043d\u043e.<\/p>\n<p><code><strong>--load-mode mmap<\/strong><\/code><strong>, \u0430\u00a0\u043d\u0435 <\/strong><code><strong>mlock<\/strong><\/code><strong>.<\/strong> \u041f\u0440\u043e\u00a0\u044d\u0442\u043e \u0441\u0442\u043e\u0438\u0442 \u0441\u043a\u0430\u0437\u0430\u0442\u044c \u043e\u0442\u0434\u0435\u043b\u044c\u043d\u043e, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e <code>mlock<\/code> \u0442\u0443\u0442 \u043d\u0435\u00a0\u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u0442\u0430\u043a, \u043a\u0430\u043a\u00a0\u0447\u0438\u0442\u0430\u0435\u0442\u0441\u044f. \u0412\u00a0\u044f\u0434\u0440\u0435 <code>RLIMIT_MEMLOCK<\/code> \u043d\u0430\u00a0\u043c\u043e\u0435\u0439 \u043c\u0430\u0448\u0438\u043d\u0435 \u0432\u044b\u0441\u0442\u0430\u0432\u043b\u0435\u043d \u0432 8\u00a0\u041c\u0411, \u0430\u00a0\u043c\u043e\u0434\u0435\u043b\u044c \u0432\u0435\u0441\u0438\u0442 22,85\u00a0\u0413\u0411. llama.cpp \u0447\u0435\u0441\u0442\u043d\u043e \u043f\u0438\u0448\u0435\u0442 \u0432\u00a0\u043b\u043e\u0433 <code>failed to mlock ... Cannot allocate memory<\/code>, \u0430 <code>VmLck<\/code> \u0432 <code>\/proc\/&lt;pid&gt;\/status<\/code> \u043e\u0441\u0442\u0430\u0451\u0442\u0441\u044f \u043d\u0443\u043b\u0435\u0432\u044b\u043c. \u0422\u043e \u0435\u0441\u0442\u044c \u043c\u043e\u0434\u0435\u043b\u044c \u043d\u0435\u00a0\u0437\u0430\u0431\u043b\u043e\u043a\u0438\u0440\u043e\u0432\u0430\u043d\u0430 \u0432\u00a0\u043f\u0430\u043c\u044f\u0442\u0438, \u0438 \u0440\u0435\u0436\u0438\u043c \u0442\u043e\u043b\u044c\u043a\u043e \u0441\u043e\u0437\u0434\u0430\u0451\u0442 \u0438\u043b\u043b\u044e\u0437\u0438\u044e. <code>mmap<\/code> \u0432\u00a0\u044d\u0442\u043e\u0439 \u0441\u0438\u0442\u0443\u0430\u0446\u0438\u0438 \u0447\u0435\u0441\u0442\u043d\u0435\u0435: \u0444\u0430\u0439\u043b \u043e\u0441\u0442\u0430\u0451\u0442\u0441\u044f \u0432\u00a0\u0441\u0442\u0440\u0430\u043d\u0438\u0447\u043d\u043e\u043c \u043a\u044d\u0448\u0435 \u0438 \u043f\u0435\u0440\u0435\u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442\u0441\u044f \u043f\u0440\u0438\u00a0\u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0435\u0439 \u0437\u0430\u0433\u0440\u0443\u0437\u043a\u0435.<\/p>\n<p><strong>\u041f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u044b \u0441\u044d\u043c\u043f\u043b\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f \u0432\u0437\u044f\u0442\u044b \u0438\u0437\u00a0\u043a\u0430\u0440\u0442\u043e\u0447\u043a\u0438 \u043c\u043e\u0434\u0435\u043b\u0438<\/strong> \u0434\u043b\u044f\u00a0\u0440\u0435\u0436\u0438\u043c\u0430 \u0440\u0430\u0437\u043c\u044b\u0448\u043b\u0435\u043d\u0438\u044f: <code>temperature=1.0, top_p=0.95, top_k=20, min_p=0.0, presence_penalty=1.5<\/code>.<\/p>\n<p><code><strong>parallel = 2<\/strong><\/code><strong> \u043f\u0440\u0438\u00a0\u0432\u043a\u043b\u044e\u0447\u0451\u043d\u043d\u043e\u043c MTP.<\/strong> Unsloth \u0432\u00a0\u043a\u0430\u0440\u0442\u043e\u0447\u043a\u0435 \u043f\u0440\u044f\u043c\u043e \u043f\u0438\u0448\u0435\u0442, \u0447\u0442\u043e <code>-np &gt; 1<\/code> \u0438 <code>--mmproj<\/code> \u0432\u043c\u0435\u0441\u0442\u0435 \u0441\u00a0MTP \u043f\u043e\u043a\u0430 \u043d\u0435\u00a0\u043f\u043e\u0434\u0434\u0435\u0440\u0436\u0438\u0432\u0430\u044e\u0442\u0441\u044f. \u0423\u00a0\u043c\u0435\u043d\u044f <code>parallel = 2<\/code>, \u0442\u043e \u0435\u0441\u0442\u044c <code>-np 2<\/code>, \u0438 \u0441\u0432\u044f\u0437\u043a\u0430 \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442: \u0442\u043e\u043a\u0435\u043d\u044b \u0438\u0434\u0443\u0442, \u0432\u0441\u0435 \u0437\u0430\u043c\u0435\u0440\u044b \u0432\u044b\u0448\u0435 \u0441\u043d\u044f\u0442\u044b \u0438\u043c\u0435\u043d\u043d\u043e \u0441\u00a0\u043d\u0435\u0451. <code>--mmproj<\/code> \u0432\u00a0\u043f\u0440\u0435\u0441\u0435\u0442\u0435 \u043d\u0435\u0442, \u0442\u0430\u043a \u0447\u0442\u043e\u00a0\u0432\u0442\u043e\u0440\u0430\u044f \u043f\u043e\u043b\u043e\u0432\u0438\u043d\u0430 \u043f\u0440\u0435\u0434\u0443\u043f\u0440\u0435\u0436\u0434\u0435\u043d\u0438\u044f \u043c\u0435\u043d\u044f \u043d\u0435\u00a0\u043a\u0430\u0441\u0430\u0435\u0442\u0441\u044f.<\/p>\n<h3>\u0427\u0442\u043e\u00a0\u043e\u0433\u0440\u0430\u043d\u0438\u0447\u0438\u0432\u0430\u0435\u0442 \u043d\u0430\u00a0\u0441\u0430\u043c\u043e\u043c \u0434\u0435\u043b\u0435<\/h3>\n<p>\u0417\u0430\u043c\u0435\u0440\u044b \u0432\u044b\u0448\u0435 \u043e\u0442\u0432\u0435\u043b\u0438 \u043f\u043e\u0434\u043e\u0437\u0440\u0435\u043d\u0438\u0435 \u043e\u0442\u00a0PCIe. \u041d\u043e\u00a0\u0447\u0442\u043e\u00a0\u0442\u043e\u0433\u0434\u0430 \u0443\u043f\u0438\u0440\u0430\u0435\u0442\u0441\u044f?<\/p>\n<p>\u042f \u0441\u043d\u0438\u043c\u0430\u043b <code>nvidia-smi<\/code> \u0440\u0430\u0437 \u0432\u00a0\u0441\u0435\u043a\u0443\u043d\u0434\u0443 \u0432\u043e\u00a0\u0432\u0440\u0435\u043c\u044f \u0434\u043b\u0438\u043d\u043d\u043e\u0439 \u0433\u0435\u043d\u0435\u0440\u0430\u0446\u0438\u0438\u00a0\u2014 2200\u00a0\u0442\u043e\u043a\u0435\u043d\u043e\u0432 \u0437\u0430 24\u00a0\u0441\u0435\u043a\u0443\u043d\u0434\u044b, 23\u00a0\u0441\u044d\u043c\u043f\u043b\u0430 \u043d\u0430\u00a0\u043a\u0430\u0440\u0442\u0443. \u0412\u00a0\u0441\u0442\u0430\u0442\u0438\u0441\u0442\u0438\u043a\u0443 \u0438\u0434\u0443\u0442 \u0442\u043e\u043b\u044c\u043a\u043e \u0441\u044d\u043c\u043f\u043b\u044b \u0441\u00a0\u043d\u0435\u043d\u0443\u043b\u0435\u0432\u043e\u0439 \u0437\u0430\u0433\u0440\u0443\u0437\u043a\u043e\u0439, \u0438\u043d\u0430\u0447\u0435 \u0432\u00a0\u0432\u044b\u0431\u043e\u0440\u043a\u0443 \u043f\u043e\u043f\u0430\u0434\u0430\u0435\u0442 \u043f\u0440\u043e\u0441\u0442\u043e\u0439 \u0438 \u043f\u043e\u0440\u0442\u0438\u0442 \u043c\u0438\u043d\u0438\u043c\u0443\u043c.<\/p>\n<div>\n<div class=\"table\">\n<table>\n<tbody>\n<tr>\n<th>\n<p align=\"left\">GPU<\/p>\n<\/th>\n<th>\n<p align=\"left\">\u0421\u0440\u0435\u0434\u043d\u044f\u044f \u0437\u0430\u0433\u0440\u0443\u0437\u043a\u0430<\/p>\n<\/th>\n<th>\n<p align=\"left\">\u0420\u0430\u0437\u0431\u0440\u043e\u0441<\/p>\n<\/th>\n<th>\n<p align=\"left\">\u0421\u0440\u0435\u0434\u043d\u044f\u044f \u043c\u043e\u0449\u043d\u043e\u0441\u0442\u044c<\/p>\n<\/th>\n<th>\n<p align=\"left\">\u0420\u0430\u0437\u0431\u0440\u043e\u0441<\/p>\n<\/th>\n<th>\n<p align=\"left\">\u041b\u0438\u043c\u0438\u0442<\/p>\n<\/th>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">RTX 3060<\/p>\n<\/td>\n<td>\n<p align=\"left\">62%<\/p>\n<\/td>\n<td>\n<p align=\"left\">58\u201366%<\/p>\n<\/td>\n<td>\n<p align=\"left\">110,7\u00a0\u0412\u0442<\/p>\n<\/td>\n<td>\n<p align=\"left\">102\u2013113\u00a0\u0412\u0442<\/p>\n<\/td>\n<td>\n<p align=\"left\">170\u00a0\u0412\u0442<\/p>\n<\/td>\n<\/tr>\n<tr>\n<td>\n<p align=\"left\">RTX 5080<\/p>\n<\/td>\n<td>\n<p align=\"left\"><strong>15%<\/strong><\/p>\n<\/td>\n<td>\n<p align=\"left\">14\u201318%<\/p>\n<\/td>\n<td>\n<p align=\"left\">67,6\u00a0\u0412\u0442<\/p>\n<\/td>\n<td>\n<p align=\"left\">65\u201368\u00a0\u0412\u0442<\/p>\n<\/td>\n<td>\n<p align=\"left\">360\u00a0\u0412\u0442<\/p>\n<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<\/div>\n<\/div>\n<p>\u0412\u043e\u0442 \u044d\u0442\u043e \u0438 \u0435\u0441\u0442\u044c \u043e\u0442\u0432\u0435\u0442. 3060\u00a0\u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u043d\u0430 62% \u0438 \u0435\u0441\u0442 \u0434\u0432\u0435 \u0442\u0440\u0435\u0442\u0438 \u0441\u0432\u043e\u0435\u0433\u043e\u00a0\u043b\u0438\u043c\u0438\u0442\u0430. 5080\u00a0\u043f\u0440\u0438\u00a0\u044d\u0442\u043e\u043c \u0437\u0430\u0433\u0440\u0443\u0436\u0435\u043d\u0430 \u043d\u0430 15% \u0438 \u043f\u043e\u0442\u0440\u0435\u0431\u043b\u044f\u0435\u0442 \u043c\u0435\u043d\u044c\u0448\u0435 \u043f\u044f\u0442\u043e\u0439 \u0447\u0430\u0441\u0442\u0438 \u0442\u043e\u0433\u043e, \u0447\u0442\u043e\u00a0\u043c\u043e\u0436\u0435\u0442. \u041a\u0430\u0440\u0442\u044b \u043d\u0435\u00a0\u043d\u0430\u0441\u044b\u0449\u0435\u043d\u044b:\u00a0\u0431\u044b\u0441\u0442\u0440\u0430\u044f \u043f\u0440\u043e\u0441\u0442\u0430\u0438\u0432\u0430\u0435\u0442, \u043e\u0436\u0438\u0434\u0430\u044f \u043c\u0435\u0434\u043b\u0435\u043d\u043d\u0443\u044e.<\/p>\n<p>\u041e\u0433\u043e\u0432\u043e\u0440\u044e\u0441\u044c \u043f\u0440\u043e\u00a0\u043c\u0435\u0442\u043e\u0434\u0438\u043a\u0443: \u0441\u044d\u043c\u043f\u043b \u0440\u0430\u0437 \u0432\u00a0\u0441\u0435\u043a\u0443\u043d\u0434\u0443 \u0443\u0441\u0440\u0435\u0434\u043d\u044f\u0435\u0442 \u043e\u043a\u043e\u043b\u043e \u0441\u043e\u0442\u043d\u0438 \u0442\u043e\u043a\u0435\u043d\u043e\u0432, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 \u043f\u043e\u00a0\u044d\u0442\u0438\u043c \u0447\u0438\u0441\u043b\u0430\u043c \u043d\u0435\u043b\u044c\u0437\u044f \u0441\u0443\u0434\u0438\u0442\u044c \u043e\u00a0\u0442\u043e\u043c, \u0447\u0442\u043e\u00a0\u043f\u0440\u043e\u0438\u0441\u0445\u043e\u0434\u0438\u0442 \u0432\u043d\u0443\u0442\u0440\u0438 \u043e\u0434\u043d\u043e\u0433\u043e \u0442\u043e\u043a\u0435\u043d\u0430. \u0417\u0434\u0435\u0441\u044c \u0432\u0430\u0436\u043d\u0430 \u0441\u0440\u0435\u0434\u043d\u044f\u044f \u0437\u0430\u0433\u0440\u0443\u0437\u043a\u0430 \u0437\u0430\u00a0\u043f\u0440\u043e\u0433\u043e\u043d, \u0430\u00a0\u043d\u0435\u00a0\u043c\u0433\u043d\u043e\u0432\u0435\u043d\u043d\u044b\u0439 \u043f\u0440\u043e\u0444\u0438\u043b\u044c.<\/p>\n<p>\u041e\u0431\u0449\u0430\u044f \u043f\u0430\u043c\u044f\u0442\u044c \u043f\u043e\u0434\u00a0\u043c\u043e\u0434\u0435\u043b\u044c: 10\u202f462\u00a0\u041c\u0438\u0411 \u043d\u0430 3060\u00a0\u0438 14\u202f986\u00a0\u041c\u0438\u0411 \u043d\u0430 5080.\u00a0\u0411\u044b\u0441\u0442\u0440\u0430\u044f \u043a\u0430\u0440\u0442\u0430 \u043f\u043e\u043b\u0443\u0447\u0438\u043b\u0430 \u0437\u0430\u043c\u0435\u0442\u043d\u043e \u0431\u043e\u043b\u044c\u0448\u0435 \u0441\u043b\u043e\u0451\u0432, \u043d\u043e\u00a0\u0442\u0440\u0438 \u0447\u0435\u0442\u0432\u0435\u0440\u0442\u0438 \u0432\u0440\u0435\u043c\u0435\u043d\u0438 \u043e\u043d\u0430 \u0432\u0441\u0451 \u0440\u0430\u0432\u043d\u043e \u0436\u0434\u0451\u0442.<\/p>\n<p>\u0412\u044b\u0432\u043e\u0434: \u0443\u0437\u043a\u043e\u0435 \u043c\u0435\u0441\u0442\u043e \u043d\u0435\u00a0\u0448\u0438\u043d\u0430 \u0438 \u043d\u0435\u00a0\u043f\u0440\u043e\u043f\u0443\u0441\u043a\u043d\u0430\u044f \u0441\u043f\u043e\u0441\u043e\u0431\u043d\u043e\u0441\u0442\u044c \u043f\u0430\u043c\u044f\u0442\u0438, \u0430 <strong>\u043f\u043e\u0441\u043b\u0435\u0434\u043e\u0432\u0430\u0442\u0435\u043b\u044c\u043d\u0430\u044f \u0446\u0435\u043f\u043e\u0447\u043a\u0430 \u0437\u0430\u0432\u0438\u0441\u0438\u043c\u043e\u0441\u0442\u0435\u0439<\/strong>. 5080\u00a0\u043d\u0435\u00a0\u043c\u043e\u0436\u0435\u0442 \u043d\u0430\u0447\u0430\u0442\u044c \u0441\u0432\u043e\u0438 \u0441\u043b\u043e\u0438, \u043f\u043e\u043a\u0430 3060\u00a0\u043d\u0435\u00a0\u0437\u0430\u043a\u043e\u043d\u0447\u0438\u043b\u0430 \u0441\u0432\u043e\u0438, \u0438 \u043d\u0430\u043e\u0431\u043e\u0440\u043e\u0442. \u0421\u043e\u0440\u043e\u043a \u0441\u043b\u043e\u0451\u0432, \u0441\u043e\u0440\u043e\u043a \u043f\u0435\u0440\u0435\u0434\u0430\u0447 \u0443\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u0438\u044f, \u0438 \u043d\u0430\u00a0\u043a\u0430\u0436\u0434\u043e\u0439 \u043a\u0430\u0440\u0442\u0430 \u0436\u0434\u0451\u0442 \u0441\u043e\u0441\u0435\u0434\u0430. \u041c\u044b \u043f\u043b\u0430\u0442\u0438\u043c \u043b\u0430\u0442\u0435\u043d\u0442\u043d\u043e\u0441\u0442\u044c\u044e, \u0430\u00a0\u043d\u0435\u00a0\u0431\u0430\u0439\u0442\u0430\u043c\u0438.<\/p>\n<p>MoE \u0434\u0435\u043b\u0430\u0435\u0442 \u043a\u0430\u0436\u0434\u044b\u0439 \u0448\u0430\u0433 \u043d\u0430\u0441\u0442\u043e\u043b\u044c\u043a\u043e \u0434\u0435\u0448\u0451\u0432\u044b\u043c, \u0447\u0442\u043e\u00a0\u0434\u0430\u0436\u0435 \u043f\u0440\u0438\u00a0\u0442\u0430\u043a\u043e\u0439 \u0440\u0430\u0441\u0442\u043e\u0447\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0439 \u0441\u0445\u0435\u043c\u0435 \u043f\u043e\u043b\u0443\u0447\u0430\u0435\u0442\u0441\u044f 109\u00a0\u0442\u043e\u043a\/\u0441.<\/p>\n<h3>\u0427\u0435\u0433\u043e \u044f \u043d\u0435\u00a0\u043f\u0440\u043e\u0432\u0435\u0440\u044f\u043b<\/h3>\n<p>\u0422\u0440\u0438 \u0432\u0435\u0449\u0438, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0447\u0435\u0441\u0442\u043d\u0435\u0435 \u043d\u0430\u0437\u0432\u0430\u0442\u044c, \u0447\u0435\u043c \u0443\u043c\u043e\u043b\u0447\u0430\u0442\u044c.<\/p>\n<p><strong>\u0422\u0435\u043d\u0437\u043e\u0440\u043d\u044b\u0439 \u0441\u043f\u043b\u0438\u0442 \u043d\u0430\u00a0\u044d\u0442\u043e\u0439 \u043f\u0430\u0440\u0435 \u043a\u0430\u0440\u0442.<\/strong> \u041e\u043d \u0434\u043e\u043b\u0436\u0435\u043d \u0443\u0431\u0440\u0430\u0442\u044c \u043f\u0440\u043e\u0441\u0442\u043e\u0438, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e\u00a0\u043a\u0430\u0440\u0442\u044b \u0441\u0447\u0438\u0442\u0430\u044e\u0442 \u043a\u0430\u0436\u0434\u044b\u0439 \u0441\u043b\u043e\u0439 \u043e\u0434\u043d\u043e\u0432\u0440\u0435\u043c\u0435\u043d\u043d\u043e. \u041d\u043e\u00a0\u0441\u0442\u043e\u0438\u0442 \u043e\u043d \u0434\u043e\u0440\u043e\u0436\u0435 \u043f\u043e\u00a0\u0448\u0438\u043d\u0435, \u0430\u00a0\u0443 3060\u00a0\u043b\u0438\u043d\u0438\u044f Gen2\u00a0x4. \u0415\u0441\u0442\u044c\u00a0\u043b\u0438 \u0432\u044b\u0438\u0433\u0440\u044b\u0448 \u043d\u0430\u00a0\u0442\u0430\u043a\u043e\u0439 \u0430\u0441\u0438\u043c\u043c\u0435\u0442\u0440\u0438\u0447\u043d\u043e\u0439 \u043f\u0430\u0440\u0435, \u0432\u043e\u043f\u0440\u043e\u0441 \u043e\u0442\u043a\u0440\u044b\u0442\u044b\u0439.<\/p>\n<p><strong>MTP \u0431\u0435\u0437\u00a0MTP.<\/strong> \u0414\u043b\u044f\u00a0\u0447\u0435\u0441\u0442\u043d\u043e\u0433\u043e \u0437\u0430\u043c\u0435\u0440\u0430 \u043d\u0443\u0436\u0435\u043d \u0432\u0442\u043e\u0440\u043e\u0439 \u0437\u0430\u043f\u0443\u0441\u043a \u0441\u0435\u0440\u0432\u0435\u0440\u0430, \u0430\u00a0\u043f\u0440\u0435\u0441\u0435\u0442 \u044f \u043d\u0435\u00a0\u043c\u0435\u043d\u044f\u043b.<\/p>\n<p><strong>\u041a\u0430\u0447\u0435\u0441\u0442\u0432\u043e \u043d\u0430\u00a0\u0434\u043b\u0438\u043d\u043d\u043e\u043c \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u0435.<\/strong> \u0412\u0441\u0435 \u0437\u0430\u043c\u0435\u0440\u044b \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u0438 \u0441\u043d\u0438\u043c\u0430\u043b\u0438\u0441\u044c \u043d\u0430\u00a0\u043e\u0434\u043d\u043e\u043c \u0444\u0438\u043a\u0441\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u043e\u043c \u043f\u0440\u043e\u043c\u043f\u0442\u0435. \u0427\u0442\u043e\u00a0\u043c\u043e\u0434\u0435\u043b\u044c \u043e\u0434\u0438\u043d\u0430\u043a\u043e\u0432\u043e \u0445\u043e\u0440\u043e\u0448\u043e \u043e\u0442\u0432\u0435\u0447\u0430\u0435\u0442 \u043d\u0430 53K \u0438 \u043d\u0430 1K, \u044f \u043d\u0435\u00a0\u043f\u0440\u043e\u0432\u0435\u0440\u044f\u043b. \u0413\u043e\u043d\u044f\u043b \u0442\u043e\u043b\u044c\u043a\u043e \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u044c.<\/p>\n<h3>\u0418\u0442\u043e\u0433\u0438<\/h3>\n<p>\u0410\u0440\u0433\u0443\u043c\u0435\u043d\u0442 \u00ab\u043e\u0434\u043d\u0430 \u0432\u0438\u0434\u0435\u043e\u043a\u0430\u0440\u0442\u0430 \u043b\u0443\u0447\u0448\u0435 \u0434\u0432\u0443\u0445\u00bb \u0432\u0435\u0440\u0435\u043d \u0434\u043b\u044f\u00a0\u043f\u043b\u043e\u0442\u043d\u044b\u0445 \u043c\u043e\u0434\u0435\u043b\u0435\u0439 \u0438 \u0442\u0435\u043d\u0437\u043e\u0440\u043d\u043e\u0433\u043e \u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u0438\u0437\u043c\u0430. \u0422\u0430\u043c \u043f\u043e\u043b\u043e\u0441\u044b \u043f\u0440\u043e\u043f\u0443\u0441\u043a\u0430\u043d\u0438\u044f \u0441\u043a\u043b\u0430\u0434\u044b\u0432\u0430\u044e\u0442\u0441\u044f \u0432\u00a0\u0443\u0437\u043a\u043e\u0435 \u043c\u0435\u0441\u0442\u043e, \u0438 \u0440\u0430\u0437\u043d\u0438\u0446\u0430 \u043c\u0435\u0436\u0434\u0443 \u043a\u0430\u0440\u0442\u0430\u043c\u0438 \u0431\u044c\u0451\u0442 \u0431\u043e\u043b\u044c\u043d\u043e.<\/p>\n<p>\u0414\u043b\u044f\u00a0MoE \u0441\u00a0\u043f\u043e\u0441\u043b\u043e\u0439\u043d\u044b\u043c \u0441\u043f\u043b\u0438\u0442\u043e\u043c \u043e\u043d \u043d\u0435\u00a0\u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442. \u041f\u0440\u0438\u0447\u0438\u043d\u044b \u0434\u0432\u0435:<\/p>\n<ol>\n<li>\n<p><strong>\u0410\u043a\u0442\u0438\u0432\u043d\u044b\u0445 \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u043e\u0432 \u0432\u00a0\u0440\u0430\u0437\u044b \u043c\u0435\u043d\u044c\u0448\u0435 \u043e\u0431\u0449\u0438\u0445.<\/strong> 3B \u0438\u0437 35B, \u0430\u00a0\u043f\u043b\u043e\u0442\u043d\u0430\u044f \u043c\u043e\u0434\u0435\u043b\u044c \u0442\u0430\u043a\u043e\u0433\u043e \u0440\u0430\u0437\u043c\u0435\u0440\u0430 \u0447\u0438\u0442\u0430\u043b\u0430\u00a0\u0431\u044b \u0432\u00a0\u0434\u0435\u0441\u044f\u0442\u044c \u0440\u0430\u0437 \u0431\u043e\u043b\u044c\u0448\u0435 \u0431\u0430\u0439\u0442 \u043d\u0430\u00a0\u0442\u043e\u043a\u0435\u043d.<\/p>\n<\/li>\n<li>\n<p><strong>\u041f\u043e\u00a0\u0448\u0438\u043d\u0435 \u0435\u0434\u0435\u0442 \u0430\u043a\u0442\u0438\u0432\u0430\u0446\u0438\u044f, \u0430\u00a0\u043d\u0435\u00a0\u0432\u0435\u0441.<\/strong> 4\u00a0\u041a\u0411 \u043d\u0430\u00a0\u043f\u0435\u0440\u0435\u0445\u043e\u0434 \u043f\u0440\u0438 2\u00a0\u0413\u0411\/\u0441 \u044d\u0442\u043e \u043d\u0438\u0447\u0442\u043e. \u041a\u0440\u0438\u0432\u0430\u044f\u00a0\u043b\u0438\u043d\u0438\u044f 3060\u00a0\u043f\u0440\u043e\u0441\u0442\u043e \u043d\u0435\u00a0\u0443\u0447\u0430\u0441\u0442\u0432\u0443\u0435\u0442 \u0432\u00a0\u0433\u043e\u0440\u044f\u0447\u0435\u043c \u043f\u0443\u0442\u0438.<\/p>\n<\/li>\n<\/ol>\n<p>\u0427\u0442\u043e\u00a0\u0432 \u044d\u0442\u043e\u0439 \u0441\u0445\u0435\u043c\u0435 \u0434\u0435\u0439\u0441\u0442\u0432\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u0441\u0442\u043e\u0438\u0442 \u0434\u0435\u043d\u0435\u0433 \u0438 \u0432\u043d\u0438\u043c\u0430\u043d\u0438\u044f: \u043a\u0430\u0440\u0442\u044b \u0440\u0430\u0431\u043e\u0442\u0430\u044e\u0442 \u043f\u043e\u00a0\u043e\u0447\u0435\u0440\u0435\u0434\u0438, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 \u043b\u0430\u0442\u0435\u043d\u0442\u043d\u043e\u0441\u0442\u044c \u0441\u043a\u043b\u0430\u0434\u044b\u0432\u0430\u0435\u0442\u0441\u044f, \u0430\u00a0\u0441\u0443\u043c\u043c\u0430\u0440\u043d\u0430\u044f \u043f\u043e\u043b\u043e\u0441\u0430 \u043d\u0435\u00a0\u0440\u0430\u0441\u0442\u0451\u0442. \u0415\u0441\u043b\u0438 \u0431\u044e\u0434\u0436\u0435\u0442 \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u0435\u0442 \u043e\u0434\u043d\u0443\u00a0\u0431\u044b\u0441\u0442\u0440\u0443\u044e \u043a\u0430\u0440\u0442\u0443 \u0432\u043c\u0435\u0441\u0442\u043e \u0434\u0432\u0443\u0445 \u043c\u0435\u0434\u043b\u0435\u043d\u043d\u044b\u0445, \u043f\u043b\u043e\u0442\u043d\u0443\u044e \u043c\u043e\u0434\u0435\u043b\u044c \u043d\u0430\u00a0\u043d\u0435\u0439 \u0431\u0443\u0434\u0435\u0442 \u0443\u0434\u043e\u0431\u043d\u0435\u0435. \u0415\u0441\u043b\u0438 \u0443\u00a0\u0432\u0430\u0441 \u0443\u0436\u0435 \u0435\u0441\u0442\u044c \u0434\u0432\u0435 \u0440\u0430\u0437\u043d\u044b\u0435 \u043a\u0430\u0440\u0442\u044b, \u043a\u0430\u043a\u00a0\u0443\u00a0\u043c\u0435\u043d\u044f, \u0438 \u0432\u044b \u0431\u0435\u0440\u0451\u0442\u0435 MoE\u2011\u043c\u043e\u0434\u0435\u043b\u044c \u0441\u00a0\u0443\u0437\u043a\u0438\u043c KV\u00a0\u2014 \u0441\u0432\u044f\u0437\u043a\u0430 \u0432\u044b\u0434\u0430\u0451\u0442 109\u00a0\u0442\u043e\u043a\/\u0441 \u043d\u0430\u00a0\u043a\u043e\u0440\u043e\u0442\u043a\u0438\u0445 \u043f\u0440\u043e\u043c\u043f\u0442\u0430\u0445 \u0438 77\u00a0\u043d\u0430\u00a0\u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u0435 53\u00a0\u0442\u044b\u0441\u044f\u0447 \u0442\u043e\u043a\u0435\u043d\u043e\u0432.<\/p>\n<p>\u042d\u0442\u043e \u043f\u043e\u2011\u043f\u0440\u0435\u0436\u043d\u0435\u043c\u0443 \u043d\u0435\u00a0\u0441\u0435\u0440\u0432\u0435\u0440. \u041d\u043e\u00a0\u044d\u0442\u043e \u0441\u0442\u043e\u0438\u0442 \u043f\u043e\u0434\u00a0\u0441\u0442\u043e\u043b\u043e\u043c \u0438 \u043d\u0435\u00a0\u0442\u0440\u0435\u0431\u0443\u0435\u0442 \u043d\u0438\u0447\u0435\u0433\u043e, \u043a\u0440\u043e\u043c\u0435 \u0441\u043b\u043e\u0442\u043e\u0432 PCIe.<\/p>\n<h3>\u041a\u0430\u043a\u00a0\u043f\u043e\u0432\u0442\u043e\u0440\u0438\u0442\u044c \u0443\u00a0\u0441\u0435\u0431\u044f<\/h3>\n<p>\u041f\u0440\u0435\u0441\u0435\u0442, \u0441\u00a0\u043a\u043e\u0442\u043e\u0440\u043e\u0433\u043e \u044f \u043d\u0430\u0447\u0438\u043d\u0430\u043b, \u043b\u0435\u0436\u0438\u0442 \u0432\u00a0\u043e\u0442\u043a\u0440\u044b\u0442\u043e\u043c \u0440\u0435\u043f\u043e\u0437\u0438\u0442\u043e\u0440\u0438\u0438: <a href=\"https:\/\/github.com\/aigen31\/llama-cpp-preset-base\" rel=\"noopener nofollow\">github.com\/aigen31\/llama\u2011cpp\u2011preset\u2011base<\/a>,\u00a0\u043b\u0438\u0446\u0435\u043d\u0437\u0438\u044f MIT. \u042d\u0442\u043e \u0443\u0441\u0442\u0430\u043d\u043e\u0432\u0449\u0438\u043a, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0440\u0430\u0441\u043a\u043b\u0430\u0434\u044b\u0432\u0430\u0435\u0442 \u0442\u0440\u0438 \u0432\u0435\u0449\u0438: \u043b\u0430\u0443\u043d\u0447\u0435\u0440 <code>llama-qwen<\/code>, INI\u2011\u043f\u0440\u0435\u0441\u0435\u0442 <code>~\/.config\/llama.cpp\/models.ini<\/code> \u0438 \u043f\u0440\u043e\u0432\u0435\u0440\u043a\u0443, \u0447\u0442\u043e <code>llama-server<\/code> \u0432\u043e\u043e\u0431\u0449\u0435 \u0435\u0441\u0442\u044c \u0432 <code>PATH<\/code>.<\/p>\n<p>\u041a\u043e\u043c\u043f\u0438\u043b\u0438\u0440\u043e\u0432\u0430\u0442\u044c llama.cpp \u043e\u043d \u043d\u0435\u00a0\u043f\u044b\u0442\u0430\u0435\u0442\u0441\u044f. \u0415\u0441\u043b\u0438 \u0431\u0438\u043d\u0430\u0440\u043d\u0438\u043a\u0430 \u043d\u0435\u0442, \u0441\u043a\u0440\u0438\u043f\u0442 \u043f\u0440\u043e\u0441\u0442\u043e \u043f\u043e\u043a\u0430\u0437\u044b\u0432\u0430\u0435\u0442 \u0441\u0441\u044b\u043b\u043a\u0443 \u043d\u0430 <a href=\"https:\/\/github.com\/ggml-org\/llama.cpp\" rel=\"noopener nofollow\">\u0430\u043f\u0441\u0442\u0440\u0438\u043c<\/a> \u0438 \u0442\u0430\u0431\u043b\u0438\u0446\u0443 \u0431\u044d\u043a\u0435\u043d\u0434\u043e\u0432 \u043f\u043e\u0434\u00a0\u0432\u0430\u0448\u0435\u00a0\u0436\u0435\u043b\u0435\u0437\u043e: CUDA, ROCm, Vulkan, SYCL, Metal \u0438\u043b\u0438\u00a0\u0447\u0438\u0441\u0442\u044b\u0439 CPU. \u0421\u0431\u043e\u0440\u043a\u0430 \u043e\u0441\u0442\u0430\u0451\u0442\u0441\u044f \u0437\u0430\u00a0\u0432\u0430\u043c\u0438, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e\u00a0\u043f\u0440\u0430\u0432\u0438\u043b\u044c\u043d\u044b\u0439 \u0444\u043b\u0430\u0433 \u0437\u0430\u0432\u0438\u0441\u0438\u0442 \u043e\u0442\u00a0\u0442\u043e\u0433\u043e, \u0447\u0442\u043e\u00a0\u0441\u0442\u043e\u0438\u0442 \u0432\u00a0\u043a\u043e\u0440\u043f\u0443\u0441\u0435.<\/p>\n<p>\u041c\u043e\u0434\u0435\u043b\u0438 \u043e\u043f\u0438\u0441\u044b\u0432\u0430\u044e\u0442\u0441\u044f \u043e\u0434\u043d\u0438\u043c \u043a\u043b\u044e\u0447\u043e\u043c <code>hf<\/code> \u0441\u00a0\u043f\u043e\u043b\u043d\u043e\u0439 \u0441\u0441\u044b\u043b\u043a\u043e\u0439 \u0438 \u043a\u0432\u0430\u043d\u0442\u0438\u0437\u0430\u0446\u0438\u0435\u0439, \u043d\u0430\u043f\u0440\u0438\u043c\u0435\u0440 <code>hf = unsloth\/Qwen3.6-35B-A3B-MTP-GGUF:UD-Q4_K_XL<\/code>. \u041f\u0440\u0438\u00a0\u043f\u0435\u0440\u0432\u043e\u043c \u0437\u0430\u043f\u0440\u043e\u0441\u0435 llama\u2011server \u0441\u0430\u043c \u0441\u043a\u0430\u0447\u0430\u0435\u0442 GGUF \u0441\u00a0Hugging Face. API\u2011\u043a\u043b\u044e\u0447 \u0433\u0435\u043d\u0435\u0440\u0438\u0440\u0443\u0435\u0442\u0441\u044f \u0432\u00a0\u0444\u043e\u0440\u043c\u0430\u0442\u0435 <code>sk-<\/code> \u043f\u043b\u044e\u0441 48\u00a0\u0441\u0438\u043c\u0432\u043e\u043b\u043e\u0432, \u0443\u0441\u0442\u0430\u043d\u043e\u0432\u0449\u0438\u043a \u043d\u0435\u0438\u043d\u0442\u0435\u0440\u0430\u043a\u0442\u0438\u0432\u043d\u044b\u0439 \u0438 \u0433\u043e\u0434\u0438\u0442\u0441\u044f \u0434\u043b\u044f <code>curl | bash<\/code>. README \u043f\u0440\u043e\u0434\u0443\u0431\u043b\u0438\u0440\u043e\u0432\u0430\u043d \u043d\u0430\u00a0\u0430\u043d\u0433\u043b\u0438\u0439\u0441\u043a\u043e\u043c, \u0440\u0443\u0441\u0441\u043a\u043e\u043c \u0438 \u043a\u0438\u0442\u0430\u0439\u0441\u043a\u043e\u043c.<\/p>\n<p>\u041c\u043e\u0439 \u0440\u0430\u0431\u043e\u0447\u0438\u0439 \u043a\u043e\u043d\u0444\u0438\u0433 \u043e\u0442\u043b\u0438\u0447\u0430\u0435\u0442\u0441\u044f \u043e\u0442\u00a0\u0448\u0430\u0431\u043b\u043e\u043d\u0430 \u0432\u00a0\u0440\u0435\u043f\u043e\u0437\u0438\u0442\u043e\u0440\u0438\u0438: \u044f \u0434\u043e\u043f\u0438\u0441\u0430\u043b \u043a\u0432\u0430\u043d\u0442\u0438\u0437\u0430\u0446\u0438\u044e KV\u2011\u043a\u044d\u0448\u0430 \u0438 \u0437\u0430\u043c\u0435\u043d\u0438\u043b <code>mlock<\/code> \u043d\u0430 <code>mmap<\/code> \u043f\u043e\u0441\u043b\u0435 \u0442\u043e\u0433\u043e, \u043a\u0430\u043a\u00a0\u0432\u044b\u044f\u0441\u043d\u0438\u043b, \u0447\u0442\u043e\u00a0\u043b\u0438\u043c\u0438\u0442 \u043d\u0430\u00a0\u0431\u043b\u043e\u043a\u0438\u0440\u043e\u0432\u043a\u0443 \u043f\u0430\u043c\u044f\u0442\u0438 \u043d\u0430\u00a0\u044d\u0442\u043e\u0439 \u043c\u0430\u0448\u0438\u043d\u0435 \u0440\u0430\u0432\u0435\u043d 8\u00a0\u041c\u0411.<\/p>\n<\/div>\n<p>\u0441\u0441\u044b\u043b\u043a\u0430 \u043d\u0430 \u043e\u0440\u0438\u0433\u0438\u043d\u0430\u043b \u0441\u0442\u0430\u0442\u044c\u0438 <a href=\"https:\/\/habr.com\/ru\/articles\/1093074\/\">https:\/\/habr.com\/ru\/articles\/1093074\/<\/a><\/p>\n","protected":false},"excerpt":{"rendered":"<p>\u00ab\u041a\u0430\u043a\u00a0MoE \u0438 \u043f\u043e\u0441\u043b\u043e\u0439\u043d\u044b\u0439 \u0441\u043f\u043b\u0438\u0442 \u043e\u0431\u043d\u0443\u043b\u044f\u044e\u0442 \u0430\u0440\u0433\u0443\u043c\u0435\u043d\u0442 \u201e\u043e\u0434\u043d\u0430 \u0432\u0438\u0434\u0435\u043e\u043a\u0430\u0440\u0442\u0430 \u043b\u0443\u0447\u0448\u0435 \u0434\u0432\u0443\u0445\u201c.\u00bb\u041d\u0430\u00a0\u0425\u0430\u0431\u0440\u0435 \u044d\u0442\u043e\u043c\u0443 \u043f\u043e\u0441\u0432\u044f\u0449\u0435\u043d\u0430 \u043e\u0442\u0434\u0435\u043b\u044c\u043d\u0430\u044f \u0441\u0442\u0430\u0442\u044c\u044f: \u00ab\u0421\u043e\u0431\u0438\u0440\u0430\u0435\u043c \u0441\u0435\u0440\u0432\u0435\u0440 \u043f\u043e\u0434\u00a0\u0441\u0432\u043e\u0439 \u043b\u043e\u043a\u0430\u043b\u044c\u043d\u044b\u0439 \u0418\u0418: \u0441\u043a\u043e\u043b\u044c\u043a\u043e \u043d\u0443\u0436\u043d\u043e VRAM \u0438 \u043f\u043e\u0447\u0435\u043c\u0443 \u043e\u0434\u043d\u0430 \u0432\u0438\u0434\u0435\u043e\u043a\u0430\u0440\u0442\u0430 \u043b\u0443\u0447\u0448\u0435 \u0434\u0432\u0443\u0445\u00bb. \u0422\u0430\u043c \u043f\u0440\u044f\u043c\u044b\u043c \u0442\u0435\u043a\u0441\u0442\u043e\u043c: \u00ab1\u00a0\u0432\u0438\u0434\u0435\u043e\u043a\u0430\u0440\u0442\u0430 \u043d\u0430 32\u00a0\u0413\u0411 \u043b\u0443\u0447\u0448\u0435 \u0447\u0435\u043c 2\u00a0\u043f\u043e 16\u0413\u0411\u00bb, \u0430\u00a0\u043f\u0440\u0438\u0447\u0438\u043d\u0430 \u0432\u00a0\u0448\u0438\u043d\u0435. \u0412\u0442\u043e\u0440\u043e\u0439 \u0441\u043b\u043e\u0442 \u043d\u0430\u00a0\u043e\u0431\u044b\u0447\u043d\u043e\u0439 \u043c\u0430\u0442\u0435\u0440\u0438\u043d\u043a\u0435 \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u043d\u0430\u00a0\u0443\u0440\u0435\u0437\u0430\u043d\u043d\u044b\u0445 x4\u00a0\u0438\u043b\u0438\u00a0x8, \u0438 \u043e\u0431\u043c\u0435\u043d \u043c\u0435\u0436\u0434\u0443 \u043a\u0430\u0440\u0442\u0430\u043c\u0438 \u0443\u043f\u0438\u0440\u0430\u0435\u0442\u0441\u044f \u0438\u043c\u0435\u043d\u043d\u043e \u0432\u00a0\u043d\u0435\u0433\u043e. \u0422\u043e\u0442\u00a0\u0436\u0435 \u0441\u043f\u043e\u0440 \u0438\u0434\u0451\u0442 \u0432\u00a0\u043a\u043e\u043c\u043c\u0435\u043d\u0442\u0430\u0440\u0438\u044f\u0445 \u043f\u043e\u0434\u00a0\u0441\u0440\u0430\u0432\u043d\u0435\u043d\u0438\u044f\u043c\u0438 \u0432\u0440\u043e\u0434\u0435 \u00ab\u0434\u0432\u0435 RTX 5060\u00a0Ti 16GB \u0438\u043b\u0438\u00a0\u043e\u0434\u043d\u0430 RTX 3090 24GB\u00bb \u0438 \u0432\u00a0\u043e\u0431\u0441\u0443\u0436\u0434\u0435\u043d\u0438\u044f\u0445 \u0441\u0431\u043e\u0440\u043e\u043a \u043d\u0430\u00a0\u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u0438\u0445 \u043a\u0430\u0440\u0442\u0430\u0445. \u0412\u00a0\u043a\u043e\u043c\u043c\u0435\u043d\u0442\u0430\u0440\u0438\u044f\u0445 \u043a\u00a0\u0442\u043e\u0439\u00a0\u0436\u0435 \u0441\u0442\u0430\u0442\u044c\u0435 \u0432\u043e\u0437\u0440\u0430\u0436\u0430\u044e\u0442 \u0441\u0440\u0430\u0437\u0443: 24\u00a0\u0413\u0411, \u043c\u043e\u043b, \u043e\u0442\u043b\u0438\u0447\u043d\u043e \u0442\u044f\u043d\u0443\u0442 27B \u0438 35B\u2011MoE \u0441\u00a0\u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u043e\u043c 256K.\u0423\u00a0\u043c\u0435\u043d\u044f \u0440\u043e\u0432\u043d\u043e \u0442\u043e\u0442 \u0441\u043b\u0443\u0447\u0430\u0439, \u043e\u00a0\u043a\u043e\u0442\u043e\u0440\u043e\u043c \u043f\u0440\u0435\u0434\u0443\u043f\u0440\u0435\u0436\u0434\u0430\u0435\u0442 \u0442\u0430 \u0441\u0442\u0430\u0442\u044c\u044f: \u043d\u0430\u00a0\u043c\u0430\u0442\u0435\u0440\u0438\u043d\u0441\u043a\u043e\u0439 \u043f\u043b\u0430\u0442\u0435 \u044f \u0441\u044d\u043a\u043e\u043d\u043e\u043c\u0438\u043b, \u0438 \u0432\u043c\u0435\u0441\u0442\u043e \u043d\u0435\u0451 \u0441\u0442\u043e\u0438\u0442 ASUS Prime B450-Plus, \u0443\u00a0\u043a\u043e\u0442\u043e\u0440\u043e\u0439 \u0432\u0442\u043e\u0440\u043e\u0439 \u0441\u043b\u043e\u0442 x16\u00a0\u0440\u0430\u0441\u043f\u0430\u044f\u043d \u043a\u0430\u043a\u00a0PCIe 2.0\u00a0x4. \u0422\u043e \u0435\u0441\u0442\u044c \u0445\u0443\u0434\u0448\u0438\u0439 \u0432\u0430\u0440\u0438\u0430\u043d\u0442 \u0438\u0437\u00a0\u0432\u043e\u0437\u043c\u043e\u0436\u043d\u044b\u0445, \u0430\u00a0\u043d\u0435 \u00ab\u043d\u0443 \u0447\u0443\u0442\u044c \u043c\u0435\u0434\u043b\u0435\u043d\u043d\u0435\u0435, \u0447\u0435\u043c x8\u00bb.Qwen3.6\u201335B\u2011A3B \u0443\u00a0\u043c\u0435\u043d\u044f \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u043d\u0430\u00a0RTX 5080\u00a0\u0438 RTX 3060. \u041f\u0440\u0438\u0447\u0451\u043c 3060\u00a0\u0432\u0438\u0441\u0438\u0442 \u043d\u0430\u00a0PCIe Gen2\u00a0x4. \u042d\u0442\u043e 2\u00a0\u0413\u0411\/\u0441, \u0432\u00a0\u0432\u043e\u0441\u0435\u043c\u044c \u0440\u0430\u0437 \u043c\u0435\u0434\u043b\u0435\u043d\u043d\u0435\u0435, \u0447\u0435\u043c\u00a0\u043b\u0438\u043d\u0438\u044f \u0443 5080. \u0421\u043a\u043e\u0440\u043e\u0441\u0442\u044c \u0433\u0435\u043d\u0435\u0440\u0430\u0446\u0438\u0438: 109\u00a0\u0442\u043e\u043a\u0435\u043d\u043e\u0432 \u0432\u00a0\u0441\u0435\u043a\u0443\u043d\u0434\u0443 \u043d\u0430\u00a0\u043a\u043e\u0440\u043e\u0442\u043a\u043e\u043c \u043f\u0440\u043e\u043c\u043f\u0442\u0435 \u0438 77\u00a0\u043d\u0430\u00a0\u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u0435 53\u00a0\u0442\u044b\u0441\u044f\u0447 \u0442\u043e\u043a\u0435\u043d\u043e\u0432.\u0420\u0430\u0437\u0431\u0435\u0440\u0443, \u043f\u043e\u0447\u0435\u043c\u0443 \u044d\u0442\u043e \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442, \u0438 \u0432\u00a0\u043a\u0430\u043a\u043e\u043c \u0441\u043b\u0443\u0447\u0430\u0435 \u0430\u0440\u0433\u0443\u043c\u0435\u043d\u0442 \u043f\u0440\u043e\u00a0PCIe \u0432\u0441\u0451\u2011\u0442\u0430\u043a\u0438 \u043f\u0440\u0430\u0432.\u0421\u0442\u0435\u043d\u0434CPU: Ryzen 7 5800X, 8\u00a0\u044f\u0434\u0435\u0440 \/ 16\u00a0\u043f\u043e\u0442\u043e\u043a\u043e\u0432RAM: 64\u00a0\u0413\u0411 DDR4\u041c\u0430\u0442\u043f\u043b\u0430\u0442\u0430: ASUS Prime B450-Plus (\u0432\u0442\u043e\u0440\u043e\u0439 \u0441\u043b\u043e\u0442 x16\u00a0= PCIe 2.0\u00a0x4)GPU 0: RTX 3060 12\u00a0\u0413\u0411, GDDR6, \u0448\u0438\u043d\u0430 192\u00a0\u0431\u0438\u0442\u0430, 15\u00a0\u0413\u0431\u0438\u0442\/\u0441 \u2192 360\u00a0\u0413\u0411\/\u0441GPU 1: RTX 5080 16\u00a0\u0413\u0411, GDDR7, \u0448\u0438\u043d\u0430 256\u00a0\u0431\u0438\u0442, 30\u00a0\u0413\u0431\u0438\u0442\/\u0441 \u2192 960\u00a0\u0413\u0411\/\u0441NVLink: \u043d\u0435\u0442OS: Arch Linux, \u044f\u0434\u0440\u043e 7.1.11\u00a0(i use arch btw)\u0414\u0440\u0430\u0439\u0432\u0435\u0440 610.57.04, CUDA 13.3llama.cpp build 10\u202f738\u0421\u0443\u043c\u043c\u0430\u0440\u043d\u043e 28\u00a0\u0413\u0411 \u0432\u0438\u0434\u0435\u043e\u043f\u0430\u043c\u044f\u0442\u0438. \u041f\u043e\u043b\u043e\u0441\u044b \u043f\u0440\u043e\u043f\u0443\u0441\u043a\u0430\u043d\u0438\u044f \u0441\u043a\u043b\u0430\u0434\u044b\u0432\u0430\u0442\u044c \u043d\u0435\u043b\u044c\u0437\u044f: \u043a\u0430\u0440\u0442\u044b \u0440\u0430\u0431\u043e\u0442\u0430\u044e\u0442 \u043f\u043e\u0441\u043b\u0435\u0434\u043e\u0432\u0430\u0442\u0435\u043b\u044c\u043d\u043e, \u0430\u00a0\u043d\u0435\u00a0\u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u044c\u043d\u043e. \u041a\u00a0\u044d\u0442\u043e\u043c\u0443 \u0432\u0435\u0440\u043d\u0443\u0441\u044c.\u041f\u0440\u043e\u00a0PCIe \u0440\u0430\u0437\u0433\u043e\u0432\u043e\u0440 \u043e\u0441\u043e\u0431\u044b\u0439, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e\u00a0\u044d\u0442\u043e \u0441\u0430\u043c\u0430\u044f \u0438\u043d\u0442\u0435\u0440\u0435\u0441\u043d\u0430\u044f \u0447\u0430\u0441\u0442\u044c \u0441\u0442\u0435\u043d\u0434\u0430:GPU 0 (RTX 3060):  Gen2 x4   \u2248 2 \u0413\u0411\/\u0441    (\u043a\u0430\u0440\u0442\u0430 \u0443\u043c\u0435\u0435\u0442 Gen4 x16)GPU 1 (RTX 5080):  Gen3 x16  \u2248 16 \u0413\u0411\/\u0441   (\u043a\u0430\u0440\u0442\u0430 \u0443\u043c\u0435\u0435\u0442 Gen5 x16)3060\u00a0\u0441\u0442\u043e\u0438\u0442 \u0432\u043e\u00a0\u0432\u0442\u043e\u0440\u043e\u043c \u0441\u043b\u043e\u0442\u0435, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0443\u00a0B450-Plus \u043f\u043e\u00a0\u0441\u043f\u0435\u0446\u0438\u0444\u0438\u043a\u0430\u0446\u0438\u0438 \u0440\u0430\u0441\u043f\u0430\u044f\u043d \u043a\u0430\u043a\u00a0PCIe 2.0\u00a0x4: \u0447\u0435\u0442\u044b\u0440\u0435\u00a0\u043b\u0438\u043d\u0438\u0438 \u0432\u043c\u0435\u0441\u0442\u043e \u0448\u0435\u0441\u0442\u043d\u0430\u0434\u0446\u0430\u0442\u0438, \u0438 \u043d\u0435\u00a0\u043f\u043e\u00a0\u043e\u0448\u0438\u0431\u043a\u0435 \u0441\u0431\u043e\u0440\u043a\u0438, \u0430\u00a0\u043f\u043e\u00a0\u0437\u0430\u043c\u044b\u0441\u043b\u0443 \u043f\u043b\u0430\u0442\u044b. \u0412\u0435\u0440\u0445\u043d\u0438\u0439 \u0441\u043b\u043e\u0442 \u043f\u043b\u0430\u0442\u0430 \u043e\u0442\u0434\u0430\u0451\u0442 \u043a\u0430\u043a\u00a0PCIe 3.0\u00a0x16, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 5080\u00a0\u0441\u00a0\u0435\u0451 Gen5\u00a0\u0442\u043e\u0436\u0435 \u0443\u043f\u0438\u0440\u0430\u0435\u0442\u0441\u044f \u0432\u00a0\u043f\u043e\u0442\u043e\u043b\u043e\u043a B450. \u041e\u0431\u0435 \u043a\u0430\u0440\u0442\u044b \u0432\u0438\u0441\u044f\u0442 \u043d\u0430\u00a0\u043e\u0434\u043d\u043e\u043c PCIe\u2011\u0445\u043e\u0441\u0442\u0435. \u041d\u0438\u043a\u0430\u043a\u043e\u0433\u043e NVLink, \u043d\u0438\u043a\u0430\u043a\u043e\u0433\u043e x16\/x16.\u041f\u043e\u0447\u0435\u043c\u0443 PCIe \u0437\u0434\u0435\u0441\u044c \u043d\u0438 \u043f\u0440\u0438\u00a0\u0447\u0451\u043c\u041a\u043b\u0430\u0441\u0441\u0438\u0447\u0435\u0441\u043a\u0438\u0439 \u0430\u0440\u0433\u0443\u043c\u0435\u043d\u0442 \u043f\u0440\u043e\u0442\u0438\u0432 \u0434\u0432\u0443\u0445 \u043a\u0430\u0440\u0442 \u043e\u043f\u0438\u0440\u0430\u0435\u0442\u0441\u044f \u043d\u0430\u00a0\u0442\u0435\u043d\u0437\u043e\u0440\u043d\u044b\u0439 \u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u0438\u0437\u043c. \u0422\u0430\u043c \u043a\u0430\u0436\u0434\u0430\u044f \u043a\u0430\u0440\u0442\u0430 \u0441\u0447\u0438\u0442\u0430\u0435\u0442 \u0441\u0432\u043e\u0439 \u043a\u0443\u0441\u043e\u043a \u043a\u0430\u0436\u0434\u043e\u0433\u043e \u0441\u043b\u043e\u044f, \u0438 \u043f\u043e\u0441\u043b\u0435 \u043a\u0430\u0436\u0434\u043e\u0433\u043e \u0441\u043b\u043e\u044f \u043d\u0443\u0436\u043d\u043e \u0441\u0438\u043d\u0445\u0440\u043e\u043d\u0438\u0437\u0438\u0440\u043e\u0432\u0430\u0442\u044c \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u044b \u0447\u0435\u0440\u0435\u0437 all\u2011reduce. \u0427\u0435\u043c \u0434\u043b\u0438\u043d\u043d\u0435\u0435 \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442, \u0442\u0435\u043c \u0431\u043e\u043b\u044c\u0448\u0435 \u0434\u0430\u043d\u043d\u044b\u0445 \u0433\u043e\u043d\u044f\u0435\u0442\u0441\u044f \u043f\u043e\u00a0\u0448\u0438\u043d\u0435. \u0412\u043e\u0442 \u0442\u0430\u043c Gen2\u00a0x4\u00a0\u0434\u0435\u0439\u0441\u0442\u0432\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u0443\u0431\u0438\u0432\u0430\u0435\u0442.\u0423\u00a0\u043c\u0435\u043d\u044f \u0432\u043a\u043b\u044e\u0447\u0451\u043d \u043f\u043e\u0441\u043b\u043e\u0439\u043d\u044b\u0439 \u0441\u043f\u043b\u0438\u0442 (\u0432 llama.cpp \u044d\u0442\u043e \u0440\u0435\u0436\u0438\u043c \u043f\u043e\u00a0\u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e). \u0421\u043b\u043e\u0438 \u043f\u0440\u043e\u0441\u0442\u043e \u043f\u043e\u0434\u0435\u043b\u0435\u043d\u044b \u043c\u0435\u0436\u0434\u0443 \u043a\u0430\u0440\u0442\u0430\u043c\u0438: \u043e\u0434\u043d\u0430 \u0434\u0435\u0440\u0436\u0438\u0442 \u043f\u0435\u0440\u0432\u0443\u044e \u043f\u043e\u043b\u043e\u0432\u0438\u043d\u0443, \u0432\u0442\u043e\u0440\u0430\u044f \u0434\u0440\u0443\u0433\u0443\u044e. \u041f\u043e\u00a0\u0448\u0438\u043d\u0435 \u0445\u043e\u0434\u0438\u0442 \u043d\u0435\u00a0\u0432\u0435\u0441, \u0430\u00a0\u0430\u043a\u0442\u0438\u0432\u0430\u0446\u0438\u044f, \u0438 \u0440\u043e\u0432\u043d\u043e \u043e\u0434\u0438\u043d \u0440\u0430\u0437 \u0437\u0430\u00a0\u0442\u043e\u043a\u0435\u043d.\u0421\u0447\u0438\u0442\u0430\u0435\u043c. \u0421\u043a\u0440\u044b\u0442\u0430\u044f \u0440\u0430\u0437\u043c\u0435\u0440\u043d\u043e\u0441\u0442\u044c \u043c\u043e\u0434\u0435\u043b\u0438 \u0440\u0430\u0432\u043d\u0430 2048. \u0410\u043a\u0442\u0438\u0432\u0430\u0446\u0438\u044f \u0432\u00a0fp16\u00a0\u0437\u0430\u043d\u0438\u043c\u0430\u0435\u0442 2048\u00a0\u00d7 2\u00a0\u0431\u0430\u0439\u0442\u0430, \u0442\u043e \u0435\u0441\u0442\u044c 4\u00a0\u041a\u0411. \u041e\u0434\u0438\u043d \u043f\u0435\u0440\u0435\u0445\u043e\u0434 \u043c\u0435\u0436\u0434\u0443 \u043a\u0430\u0440\u0442\u0430\u043c\u0438 \u0437\u0430\u00a0\u0442\u043e\u043a\u0435\u043d.\u041f\u0440\u0438 109\u00a0\u0442\u043e\u043a\/\u0441 \u044d\u0442\u043e 437\u00a0\u041a\u0411\/\u0441.\u00a0\u041b\u0438\u043d\u0438\u044f Gen2\u00a0x4\u00a0\u0434\u0430\u0451\u0442 2\u00a0\u0413\u0411\/\u0441. \u0417\u0430\u0433\u0440\u0443\u0437\u043a\u0430 \u0448\u0438\u043d\u044b \u0438\u0437\u043c\u0435\u0440\u044f\u0435\u0442\u0441\u044f \u0441\u043e\u0442\u044b\u043c\u0438 \u0434\u043e\u043b\u044f\u043c\u0438 \u043f\u0440\u043e\u0446\u0435\u043d\u0442\u0430.\u0414\u0430\u0436\u0435 \u043d\u0430\u00a0\u043f\u0440\u0435\u0444\u0438\u043b\u043b\u0435 \u043a\u0430\u0440\u0442\u0438\u043d\u0430 \u043d\u0435\u00a0\u043c\u0435\u043d\u044f\u0435\u0442\u0441\u044f. \u0411\u0430\u0442\u0447 \u0438\u0437 2048\u00a0\u0442\u043e\u043a\u0435\u043d\u043e\u0432 \u0437\u0430\u043d\u0438\u043c\u0430\u0435\u0442 8\u00a0\u041c\u0411, \u0438 \u043e\u043d\u0438 \u0440\u0430\u0437\u043c\u0430\u0437\u044b\u0432\u0430\u044e\u0442\u0441\u044f \u043f\u043e\u00a0\u0432\u0441\u0435\u0439 \u043e\u0431\u0440\u0430\u0431\u043e\u0442\u043a\u0435 \u043f\u0440\u043e\u043c\u043f\u0442\u0430. \u041f\u0440\u0438 1500\u00a0\u0442\u043e\u043a\/\u0441 \u043f\u0440\u0435\u0444\u0438\u043b\u043b\u0430 \u043f\u043e\u043b\u0443\u0447\u0430\u0435\u0442\u0441\u044f \u043e\u043a\u043e\u043b\u043e 6\u00a0\u041c\u0411\/\u0441.\u0412\u043e\u0442 \u043f\u043e\u0447\u0435\u043c\u0443 \u043a\u0440\u0438\u0432\u0430\u044f Gen2\u00a0x4\u00a0\u043d\u0435\u00a0\u043c\u0435\u0448\u0430\u0435\u0442: \u043e\u043d\u0430 \u043d\u0435\u00a0\u0443\u0447\u0430\u0441\u0442\u0432\u0443\u0435\u0442 \u0432\u00a0\u0433\u043e\u0440\u044f\u0447\u0435\u043c \u043f\u0443\u0442\u0438. \u0412\u0435\u0441\u0430 \u043e\u0441\u0442\u0430\u044e\u0442\u0441\u044f \u043d\u0430\u00a0\u0441\u0432\u043e\u0438\u0445 \u043a\u0430\u0440\u0442\u0430\u0445, \u043f\u043e\u00a0\u0448\u0438\u043d\u0435 \u0435\u0434\u0435\u0442 \u0442\u043e\u043b\u044c\u043a\u043e \u0430\u043a\u0442\u0438\u0432\u0430\u0446\u0438\u044f.\u041f\u043e\u0447\u0435\u043c\u0443 MoE \u043c\u0435\u043d\u044f\u0435\u0442 \u0430\u0440\u0438\u0444\u043c\u0435\u0442\u0438\u043a\u0443\u0415\u0441\u043b\u0438\u00a0\u0431\u044b Qwen3.6\u201335B\u2011A3B\u00a0\u0431\u044b\u043b\u0430 \u043f\u043b\u043e\u0442\u043d\u043e\u0439 \u043c\u043e\u0434\u0435\u043b\u044c\u044e, \u0432\u0441\u0451\u00a0\u0431\u044b\u043b\u043e\u00a0\u0431\u044b \u0438\u043d\u0430\u0447\u0435. \u0424\u0430\u0439\u043b \u0432\u0435\u0441\u0438\u0442 21,3\u00a0\u0413\u0438\u0411, \u0438 \u043f\u043b\u043e\u0442\u043d\u0430\u044f \u043c\u043e\u0434\u0435\u043b\u044c \u0447\u0438\u0442\u0430\u043b\u0430\u00a0\u0431\u044b \u0432\u0441\u0435 \u044d\u0442\u0438 \u0433\u0438\u0433\u0430\u0431\u0430\u0439\u0442\u044b \u043d\u0430\u00a0\u043a\u0430\u0436\u0434\u044b\u0439 \u0442\u043e\u043a\u0435\u043d. \u041d\u0430 5080\u00a0\u0441\u00a0\u0435\u0451 960\u00a0\u0413\u0411\/\u0441 \u044d\u0442\u043e \u043f\u043e\u0442\u043e\u043b\u043e\u043a \u043e\u043a\u043e\u043b\u043e 42\u00a0\u0442\u043e\u043a\/\u0441, \u0438 \u0442\u043e \u0431\u0435\u0437\u00a0\u0432\u0442\u043e\u0440\u043e\u0439 \u043a\u0430\u0440\u0442\u044b. \u0421\u00a0\u043f\u043e\u0441\u043b\u043e\u0439\u043d\u044b\u043c \u0441\u043f\u043b\u0438\u0442\u043e\u043c \u043a\u0430\u0440\u0442\u044b \u0440\u0430\u0431\u043e\u0442\u0430\u044e\u0442 \u043f\u043e\u00a0\u043e\u0447\u0435\u0440\u0435\u0434\u0438, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 \u043f\u043e\u043b\u043e\u0441\u044b \u043d\u0435\u00a0\u0441\u043a\u043b\u0430\u0434\u044b\u0432\u0430\u044e\u0442\u0441\u044f, \u0430\u00a0\u0432\u0440\u0435\u043c\u044f \u0441\u0443\u043c\u043c\u0438\u0440\u0443\u0435\u0442\u0441\u044f.\u041d\u043e\u00a0Qwen3.6\u201335B\u2011A3B \u044d\u0442\u043e MoE. \u0418\u0437 35B \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u043e\u0432 \u043d\u0430\u00a0\u043a\u0430\u0436\u0434\u043e\u043c \u0442\u043e\u043a\u0435\u043d\u0435 \u0430\u043a\u0442\u0438\u0432\u0438\u0440\u0443\u044e\u0442\u0441\u044f \u043f\u0440\u0438\u043c\u0435\u0440\u043d\u043e 3B: 8\u00a0\u043c\u0430\u0440\u0448\u0440\u0443\u0442\u0438\u0437\u0438\u0440\u0443\u0435\u043c\u044b\u0445 \u044d\u043a\u0441\u043f\u0435\u0440\u0442\u043e\u0432 \u0438\u0437 256\u00a0\u043f\u043b\u044e\u0441 \u043e\u0434\u0438\u043d \u043e\u0431\u0449\u0438\u0439. \u041e\u0441\u0442\u0430\u043b\u044c\u043d\u044b\u0435 32B \u043b\u0435\u0436\u0430\u0442 \u0432\u00a0\u043f\u0430\u043c\u044f\u0442\u0438 \u0438 \u043d\u0435\u00a0\u0447\u0438\u0442\u0430\u044e\u0442\u0441\u044f.\u041e\u0442\u0441\u044e\u0434\u0430 \u0438 \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442. \u041c\u043e\u0434\u0435\u043b\u044c \u043d\u0430 35B \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u043e\u0432 \u043f\u043e\u00a0\u0442\u0440\u0435\u0431\u043e\u0432\u0430\u043d\u0438\u044f\u043c \u043a\u00a0\u043f\u0430\u043c\u044f\u0442\u0438, \u043d\u043e\u00a0\u043f\u043e\u00a0\u0441\u0442\u043e\u0438\u043c\u043e\u0441\u0442\u0438 \u043e\u0434\u043d\u043e\u0433\u043e \u0442\u043e\u043a\u0435\u043d\u0430 \u0431\u043b\u0438\u0436\u0435 \u043a 3B. \u0418\u043c\u0435\u043d\u043d\u043e \u044d\u0442\u043e \u0440\u0430\u0441\u0441\u043e\u0433\u043b\u0430\u0441\u043e\u0432\u0430\u043d\u0438\u0435 \u0438 \u0434\u0435\u043b\u0430\u0435\u0442 \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e\u0439 \u0440\u0430\u0431\u043e\u0442\u0443 \u043d\u0430\u00a0\u0434\u0432\u0443\u0445 \u0440\u0430\u0437\u043d\u044b\u0445 \u043f\u043e\u0442\u0440\u0435\u0431\u0438\u0442\u0435\u043b\u044c\u0441\u043a\u0438\u0445 \u043a\u0430\u0440\u0442\u0430\u0445.\u0421\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u0430 \u043c\u043e\u0434\u0435\u043b\u0438, \u043f\u043e\u00a0\u043a\u0430\u0440\u0442\u043e\u0447\u043a\u0435 \u043d\u0430\u00a0HuggingFace:40\u00a0\u0441\u043b\u043e\u0451\u0432, \u0441\u043a\u0440\u044b\u0442\u0430\u044f \u0440\u0430\u0437\u043c\u0435\u0440\u043d\u043e\u0441\u0442\u044c 2048256\u00a0\u044d\u043a\u0441\u043f\u0435\u0440\u0442\u043e\u0432, \u0438\u0437\u00a0\u043d\u0438\u0445 8\u00a0\u043c\u0430\u0440\u0448\u0440\u0443\u0442\u0438\u0437\u0438\u0440\u0443\u0435\u043c\u044b\u0445 + 1\u00a0\u043e\u0431\u0449\u0438\u0439 \u043d\u0430\u00a0\u0442\u043e\u043a\u0435\u043d\u0447\u0435\u0440\u0435\u0434\u043e\u0432\u0430\u043d\u0438\u0435 Gated DeltaNet (\u043b\u0438\u043d\u0435\u0439\u043d\u043e\u0435 \u0432\u043d\u0438\u043c\u0430\u043d\u0438\u0435) \u0438 Gated Attention\u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442 262\u202f144\u00a0\u0442\u043e\u043a\u0435\u043d\u0430 \u043d\u0430\u0442\u0438\u0432\u043d\u043eMTP\u2011\u0433\u043e\u043b\u043e\u0432\u0430 \u0434\u043b\u044f\u00a0\u0441\u043f\u0435\u043a\u0443\u043b\u044f\u0442\u0438\u0432\u043d\u043e\u0433\u043e \u0434\u0435\u043a\u043e\u0434\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f\u0422\u0435\u043f\u0435\u0440\u044c \u043f\u0440\u043e\u00a0\u0432\u043d\u0438\u043c\u0430\u043d\u0438\u0435. \u041f\u043e\u043b\u043d\u043e\u0435 \u0432\u043d\u0438\u043c\u0430\u043d\u0438\u0435 \u0441\u0442\u043e\u0438\u0442 \u0432\u00a0\u043a\u0430\u0436\u0434\u043e\u043c \u0447\u0435\u0442\u0432\u0451\u0440\u0442\u043e\u043c \u0441\u043b\u043e\u0435, \u0432\u00a0\u043e\u0441\u0442\u0430\u043b\u044c\u043d\u044b\u0445 \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 Gated DeltaNet \u0441\u00a0\u0441\u043e\u0441\u0442\u043e\u044f\u043d\u0438\u0435\u043c \u043f\u043e\u0441\u0442\u043e\u044f\u043d\u043d\u043e\u0433\u043e \u0440\u0430\u0437\u043c\u0435\u0440\u0430. \u041f\u043e\u044d\u0442\u043e\u043c\u0443 KV\u2011\u043a\u044d\u0448 \u0440\u0430\u0441\u0442\u0451\u0442 \u043c\u0435\u0434\u043b\u0435\u043d\u043d\u043e, \u0438 \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u044c \u0433\u0435\u043d\u0435\u0440\u0430\u0446\u0438\u0438 \u043f\u043e\u0447\u0442\u0438 \u043d\u0435\u00a0\u0437\u0430\u0432\u0438\u0441\u0438\u0442 \u043e\u0442\u00a0\u0434\u043b\u0438\u043d\u044b \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u0430. \u041d\u0438\u0436\u0435 \u044d\u0442\u043e \u0432\u0438\u0434\u043d\u043e \u0432\u00a0\u0437\u0430\u043c\u0435\u0440\u0430\u0445.\u0417\u0430\u043c\u0435\u0440\u044b\u0412\u0441\u0435 \u0437\u0430\u043c\u0435\u0440\u044b \u0441\u043d\u044f\u0442\u044b \u0447\u0435\u0440\u0435\u0437 \/completion \u0441 cache_prompt: false, \u0442\u043e \u0435\u0441\u0442\u044c \u043f\u0440\u043e\u043c\u043f\u0442 \u043a\u0430\u0436\u0434\u044b\u0439 \u0440\u0430\u0437 \u043e\u0431\u0440\u0430\u0431\u0430\u0442\u044b\u0432\u0430\u0435\u0442\u0441\u044f \u0437\u0430\u043d\u043e\u0432\u043e. \u041f\u0440\u0435\u0441\u0435\u0442 \u043d\u0435\u00a0\u043c\u0435\u043d\u044f\u043b\u0441\u044f, \u0441\u0435\u0440\u0432\u0435\u0440 \u043d\u0435\u00a0\u043f\u0435\u0440\u0435\u0437\u0430\u043f\u0443\u0441\u043a\u0430\u043b\u0441\u044f, \u0437\u0430\u043c\u0435\u0440\u044b \u0448\u043b\u0438 \u043f\u043e\u0441\u043b\u0435\u0434\u043e\u0432\u0430\u0442\u0435\u043b\u044c\u043d\u043e. \u041d\u0438\u0436\u0435 \u043d\u0435\u00a0\u043f\u0435\u0440\u0435\u0441\u0447\u0451\u0442 \u0441\u0442\u0430\u0440\u044b\u0445 \u0447\u0438\u0441\u0435\u043b, \u0430\u00a0\u043e\u0442\u0434\u0435\u043b\u044c\u043d\u044b\u0439 \u043f\u0440\u043e\u0433\u043e\u043d \u043d\u0430\u00a0\u0436\u0438\u0432\u043e\u043c \u0441\u0435\u0440\u0432\u0435\u0440\u0435.\u0411\u0430\u0437\u043e\u0432\u0430\u044f \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u044c\u041a\u043e\u0440\u043e\u0442\u043a\u0438\u0439 \u043f\u0440\u043e\u043c\u043f\u0442, \u0433\u0435\u043d\u0435\u0440\u0430\u0446\u0438\u044f 256\u00a0\u0442\u043e\u043a\u0435\u043d\u043e\u0432, \u043f\u044f\u0442\u044c \u043f\u0440\u043e\u0433\u043e\u043d\u043e\u0432 \u043f\u043e\u0434\u0440\u044f\u0434:\u041f\u0440\u043e\u0433\u043e\u043d\u0413\u0435\u043d\u0435\u0440\u0430\u0446\u0438\u044f, \u0442\u043e\u043a\/\u04411109,22109,73106,04109,65108,4\u0420\u0430\u0437\u0431\u0440\u043e\u0441 \u043c\u0435\u0436\u0434\u0443 \u043f\u0440\u043e\u0433\u043e\u043d\u0430\u043c\u0438 3,5%, \u0441\u0440\u0435\u0434\u043d\u0435\u0435 108,6. \u042d\u0442\u043e \u043c\u0435\u043d\u044c\u0448\u0435, \u0447\u0435\u043c \u0440\u0430\u0437\u043d\u0438\u0446\u0430 \u043c\u0435\u0436\u0434\u0443 \u0431\u043e\u043b\u044c\u0448\u0438\u043d\u0441\u0442\u0432\u043e\u043c \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u0439 \u043d\u0438\u0436\u0435, \u0442\u0430\u043a \u0447\u0442\u043e\u00a0\u0431\u0430\u0437\u043e\u0432\u0443\u044e \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u044c \u043c\u043e\u0436\u043d\u043e \u0441\u0447\u0438\u0442\u0430\u0442\u044c \u0443\u0441\u0442\u043e\u0439\u0447\u0438\u0432\u043e\u0439.\u041e\u0442\u00a0\u0442\u0438\u043f\u0430 \u043a\u043e\u043d\u0442\u0435\u043d\u0442\u0430\u0417\u0434\u0435\u0441\u044c \u0440\u0430\u0437\u0431\u0440\u043e\u0441 \u0443\u0436\u0435 \u043d\u0435\u00a0\u0448\u0443\u043c\u043e\u0432\u043e\u0439, \u0430\u00a0\u0441\u043e\u0434\u0435\u0440\u0436\u0430\u0442\u0435\u043b\u044c\u043d\u044b\u0439:\u0417\u0430\u0434\u0430\u0447\u0430\u0413\u0435\u043d\u0435\u0440\u0430\u0446\u0438\u044f, \u0442\u043e\u043a\/\u0441\u041f\u0440\u0438\u043d\u044f\u0442\u043e \u0447\u0435\u0440\u043d\u043e\u0432\u0438\u043a\u043e\u0432 MTP\u041a\u043e\u0434 \u043d\u0430\u00a0Python114,685,7%JSON \u043f\u043e\u00a0\u0441\u0445\u0435\u043c\u0435113,385,1%\u041a\u043e\u0434 \u043d\u0430\u00a0\u0440\u0443\u0441\u0441\u043a\u043e\u043c100,468,8%\u041f\u0440\u043e\u0437\u0430 \u043d\u0430\u00a0\u0430\u043d\u0433\u043b\u0438\u0439\u0441\u043a\u043e\u043c96,062,9%\u041f\u0440\u043e\u0437\u0430 \u043d\u0430\u00a0\u0440\u0443\u0441\u0441\u043a\u043e\u043c95,462,0%\u0421\u043a\u043e\u0440\u043e\u0441\u0442\u044c \u0441\u043b\u0435\u0434\u0443\u0435\u0442 \u0437\u0430\u00a0\u0434\u043e\u043b\u0435\u0439 \u043f\u0440\u0438\u043d\u044f\u0442\u044b\u0445 \u0447\u0435\u0440\u043d\u043e\u0432\u0438\u043a\u043e\u0432 \u043f\u043e\u0447\u0442\u0438\u00a0\u043b\u0438\u043d\u0435\u0439\u043d\u043e. \u041d\u0430\u00a0\u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u043e\u043c \u0432\u044b\u0432\u043e\u0434\u0435 MTP \u0443\u0433\u0430\u0434\u044b\u0432\u0430\u0435\u0442 \u0431\u043e\u043b\u044c\u0448\u0435 \u0432\u043e\u0441\u044c\u043c\u0438 \u0442\u043e\u043a\u0435\u043d\u043e\u0432 \u0438\u0437\u00a0\u0434\u0435\u0441\u044f\u0442\u0438, \u043d\u0430\u00a0\u0441\u0432\u043e\u0431\u043e\u0434\u043d\u043e\u0439 \u043f\u0440\u043e\u0437\u0435 \u043e\u043a\u043e\u043b\u043e \u0448\u0435\u0441\u0442\u0438.\u0421\u043a\u043e\u043b\u044c\u043a\u043e \u0442\u043e\u043a\u0435\u043d\u043e\u0432 \u0434\u0430\u0451\u0442 \u043e\u0434\u0438\u043d \u043f\u0440\u043e\u0445\u043e\u0434 \u043c\u043e\u0434\u0435\u043b\u0438\u0422\u043e\u0442\u00a0\u0436\u0435 \u0437\u0430\u043c\u0435\u0440, \u043d\u043e\u00a0\u0441\u00a0\u043f\u043e\u0434\u0441\u0447\u0451\u0442\u043e\u043c \u0446\u0438\u043a\u043b\u043e\u0432 \u0441\u043f\u0435\u043a\u0443\u043b\u044f\u0442\u0438\u0432\u043d\u043e\u0433\u043e \u0434\u0435\u043a\u043e\u0434\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f (\u043f\u0440\u0435\u0434\u0441\u043a\u0430\u0437\u0430\u043d\u043e \u043c\u0438\u043d\u0443\u0441 \u043f\u0440\u0438\u043d\u044f\u0442\u043e):\u0417\u0430\u0434\u0430\u0447\u0430\u0422\u043e\u043a\u0435\u043d\u043e\u0432 \u0437\u0430\u00a0\u043f\u0440\u043e\u0445\u043e\u0434\u041f\u0440\u0438\u043d\u044f\u0442\u043e \u0447\u0435\u0440\u043d\u043e\u0432\u0438\u043a\u043e\u0432\u041a\u043e\u0434 \u043d\u0430\u00a0Python2,7085,7%JSON \u043f\u043e\u00a0\u0441\u0445\u0435\u043c\u04352,6885,1%\u041f\u0440\u043e\u0437\u0430 \u043d\u0430\u00a0\u0440\u0443\u0441\u0441\u043a\u043e\u043c2,2262,0%\u041f\u0440\u0438 &#8212;spec-draft-n-max 2 \u0442\u0435\u043e\u0440\u0435\u0442\u0438\u0447\u0435\u0441\u043a\u0438\u0439 \u043c\u0430\u043a\u0441\u0438\u043c\u0443\u043c \u0440\u0430\u0432\u0435\u043d \u0442\u0440\u0451\u043c \u0442\u043e\u043a\u0435\u043d\u0430\u043c \u0437\u0430\u00a0\u043f\u0440\u043e\u0445\u043e\u0434. \u041d\u0430\u00a0\u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u043e\u043c \u0432\u044b\u0432\u043e\u0434\u0435 \u043c\u043e\u0434\u0435\u043b\u044c \u043f\u043e\u0434\u0445\u043e\u0434\u0438\u0442 \u043a\u00a0\u043d\u0435\u043c\u0443 \u0432\u043f\u043b\u043e\u0442\u043d\u0443\u044e.\u041e\u0433\u043e\u0432\u043e\u0440\u044e\u0441\u044c: \u0442\u043e\u043a\u0435\u043d\u043e\u0432 \u0437\u0430\u00a0\u043f\u0440\u043e\u0445\u043e\u0434 \u043d\u0435\u00a0\u0442\u043e\u00a0\u0436\u0435 \u0441\u0430\u043c\u043e\u0435, \u0447\u0442\u043e\u00a0\u0443\u0441\u043a\u043e\u0440\u0435\u043d\u0438\u0435. \u041f\u0440\u043e\u0432\u0435\u0440\u044f\u044e\u0449\u0438\u0439 \u043f\u0440\u043e\u0445\u043e\u0434 \u043e\u0431\u0440\u0430\u0431\u0430\u0442\u044b\u0432\u0430\u0435\u0442 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0442\u043e\u043a\u0435\u043d\u043e\u0432 \u0441\u0440\u0430\u0437\u0443 \u0438 \u0441\u0442\u043e\u0438\u0442 \u0434\u043e\u0440\u043e\u0436\u0435 \u043e\u0434\u043d\u043e\u0433\u043e. Unsloth \u0432\u00a0\u043a\u0430\u0440\u0442\u043e\u0447\u043a\u0435 \u043c\u043e\u0434\u0435\u043b\u0438 \u043e\u0431\u0435\u0449\u0430\u0435\u0442 \u0443\u0441\u043a\u043e\u0440\u0435\u043d\u0438\u0435 \u0432 1,5\u20132\u00a0\u0440\u0430\u0437\u0430; \u044f \u044d\u0442\u043e \u043d\u0435\u00a0\u0438\u0437\u043e\u043b\u0438\u0440\u043e\u0432\u0430\u043b, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e\u00a0\u0434\u043b\u044f\u00a0\u0447\u0435\u0441\u0442\u043d\u043e\u0433\u043e A\/B \u043f\u0440\u0438\u0448\u043b\u043e\u0441\u044c\u00a0\u0431\u044b \u043f\u0435\u0440\u0435\u0437\u0430\u043f\u0443\u0441\u043a\u0430\u0442\u044c \u0441\u0435\u0440\u0432\u0435\u0440 \u0431\u0435\u0437 &#8212;spec-type draft-mtp. \u041f\u0440\u0435\u0441\u0435\u0442 \u044f \u043d\u0435\u00a0\u0442\u0440\u043e\u0433\u0430\u043b.\u0414\u043b\u0438\u043d\u043d\u044b\u0439 \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u0421\u0430\u043c\u0430\u044f \u0438\u043d\u0442\u0435\u0440\u0435\u0441\u043d\u0430\u044f \u0442\u0430\u0431\u043b\u0438\u0446\u0430:\u041a\u043e\u043d\u0442\u0435\u043a\u0441\u0442, \u0442\u043e\u043a\u0435\u043d\u043e\u0432\u041e\u0431\u0440\u0430\u0431\u043e\u0442\u043a\u0430 \u043f\u0440\u043e\u043c\u043f\u0442\u0430, \u0442\u043e\u043a\/\u0441\u0413\u0435\u043d\u0435\u0440\u0430\u0446\u0438\u044f, \u0442\u043e\u043a\/\u044113\u202f865182090,827\u202f703170887,942\u202f528158680,653\u202f401150476,7\u0413\u0435\u043d\u0435\u0440\u0430\u0446\u0438\u044f \u043f\u0430\u0434\u0430\u0435\u0442 \u043d\u0430 15% \u043f\u0440\u0438\u00a0\u0440\u043e\u0441\u0442\u0435 \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u0430 \u0441 14K \u0434\u043e 53K: 90,8\u00a0\u2192 76,7. \u0417\u0430\u043c\u0435\u0442\u043d\u043e, \u043d\u043e\u00a0\u043d\u0435\u00a0\u043e\u0431\u0432\u0430\u043b. \u0420\u0430\u0431\u043e\u0442\u0430\u0435\u0442\u00a0\u043b\u0438\u043d\u0435\u0439\u043d\u043e\u0435 \u0432\u043d\u0438\u043c\u0430\u043d\u0438\u0435: \u0441\u043e\u0441\u0442\u043e\u044f\u043d\u0438\u0435 Gated DeltaNet \u043d\u0435\u00a0\u0440\u0430\u0441\u0442\u0451\u0442 \u0441\u00a0\u0434\u043b\u0438\u043d\u043e\u0439 \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u0430, \u0430\u00a0\u043f\u043e\u043b\u043d\u043e\u0435 \u0432\u043d\u0438\u043c\u0430\u043d\u0438\u0435 \u0441\u0442\u043e\u0438\u0442 \u0442\u043e\u043b\u044c\u043a\u043e \u0432\u00a0\u0434\u0435\u0441\u044f\u0442\u0438 \u0441\u043b\u043e\u044f\u0445 \u0438\u0437\u00a0\u0441\u043e\u0440\u043e\u043a\u0430, \u0438 KV \u0442\u0430\u043c \u0443\u0437\u043a\u0438\u0439\u00a0\u2014 2\u00a0\u0433\u043e\u043b\u043e\u0432\u044b \u043f\u043e 256\u00a0\u0438\u0437\u043c\u0435\u0440\u0435\u043d\u0438\u0439, \u043e\u043a\u043e\u043b\u043e 10\u00a0\u041a\u0411 \u043d\u0430\u00a0\u0442\u043e\u043a\u0435\u043d \u043d\u0430\u00a0\u0432\u0441\u0435 \u0434\u0435\u0441\u044f\u0442\u044c \u0441\u043b\u043e\u0451\u0432. \u0423\u00a0\u043f\u043b\u043e\u0442\u043d\u043e\u0439 \u043c\u043e\u0434\u0435\u043b\u0438 \u0441\u00a0\u043f\u043e\u043b\u043d\u044b\u043c \u0432\u043d\u0438\u043c\u0430\u043d\u0438\u0435\u043c \u043d\u0430\u00a0\u0432\u0441\u0435\u0445 \u0441\u043e\u0440\u043e\u043a\u0430 \u0441\u043b\u043e\u044f\u0445 \u043a\u0440\u0438\u0432\u0430\u044f \u0437\u0434\u0435\u0441\u044c \u0443\u0448\u043b\u0430\u00a0\u0431\u044b \u0432\u043d\u0438\u0437 \u0433\u043e\u0440\u0430\u0437\u0434\u043e \u043a\u0440\u0443\u0447\u0435.\u041e\u0431\u0440\u0430\u0431\u043e\u0442\u043a\u0430 \u043f\u0440\u043e\u043c\u043f\u0442\u0430 \u043f\u0430\u0434\u0430\u0435\u0442\u00a0\u0431\u044b\u0441\u0442\u0440\u0435\u0435 (1820\u00a0\u2192 1504, \u044d\u0442\u043e 17%), \u043d\u043e\u00a0\u0442\u0430\u043c \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u0432\u044b\u0447\u0438\u0441\u043b\u0435\u043d\u0438\u0435, \u0430\u00a0\u043d\u0435\u00a0\u043f\u0430\u043c\u044f\u0442\u044c.\u0414\u0432\u0430 \u0441\u043b\u043e\u0442\u0430 \u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u044c\u043d\u043e\u041f\u0440\u0435\u0441\u0435\u0442 \u0437\u0430\u0434\u0430\u0451\u0442 parallel = 2, \u0442\u043e \u0435\u0441\u0442\u044c \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442 131\u202f072\u00a0\u0434\u0435\u043b\u0438\u0442\u0441\u044f \u043d\u0430\u00a0\u0434\u0432\u0430 \u0441\u043b\u043e\u0442\u0430 \u043f\u043e 65\u202f536. \u0414\u0432\u0430 \u043e\u0434\u043d\u043e\u0432\u0440\u0435\u043c\u0435\u043d\u043d\u044b\u0445 \u0437\u0430\u043f\u0440\u043e\u0441\u0430:\u0413\u0435\u043d\u0435\u0440\u0430\u0446\u0438\u044f, \u0442\u043e\u043a\/\u0441\u0421\u043b\u043e\u0442 1\u00a0(\u043a\u043e\u0434)69,3\u0421\u043b\u043e\u0442 2\u00a0(\u043f\u0440\u043e\u0437\u0430)60,5\u0421\u0443\u043c\u043c\u0430\u0440\u043d\u043e\u2248 130\u0421\u0443\u043c\u043c\u0430\u0440\u043d\u0430\u044f \u043f\u0440\u043e\u043f\u0443\u0441\u043a\u043d\u0430\u044f \u0441\u043f\u043e\u0441\u043e\u0431\u043d\u043e\u0441\u0442\u044c \u0432\u044b\u0440\u043e\u0441\u043b\u0430 \u0441 109\u00a0\u0434\u043e 130\u00a0\u0442\u043e\u043a\/\u0441, \u043d\u043e\u00a0\u043a\u0430\u0436\u0434\u044b\u0439 \u043e\u0442\u0434\u0435\u043b\u044c\u043d\u044b\u0439 \u0437\u0430\u043f\u0440\u043e\u0441 \u0437\u0430\u043c\u0435\u0434\u043b\u0438\u043b\u0441\u044f \u043f\u043e\u0447\u0442\u0438 \u0432\u0434\u0432\u043e\u0435. \u0414\u043b\u044f\u00a0\u0430\u0433\u0435\u043d\u0442\u0430, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0445\u043e\u0434\u0438\u0442 \u0432\u00a0\u0441\u0435\u0440\u0432\u0435\u0440 \u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u044c\u043d\u043e, \u044d\u0442\u043e \u0441\u043a\u043e\u0440\u0435\u0435 \u043c\u0438\u043d\u0443\u0441: \u0434\u0432\u0430 \u0437\u0430\u043f\u0440\u043e\u0441\u0430 \u0436\u0434\u0443\u0442 \u0434\u0440\u0443\u0433 \u0434\u0440\u0443\u0433\u0430 \u0434\u043e\u043b\u044c\u0448\u0435, \u0447\u0435\u043c \u0435\u0441\u043b\u0438\u00a0\u0431\u044b \u0448\u043b\u0438 \u043f\u043e\u00a0\u043e\u0447\u0435\u0440\u0435\u0434\u0438.\u041a\u043e\u043d\u0444\u0438\u0433\u041f\u0440\u0435\u0441\u0435\u0442 \u0432 ~\/.config\/llama.cpp\/models.ini:[unsloth\/Qwen3.6-35B-A3B-MTP-GGUF-64K]hf = unsloth\/Qwen3.6-35B-A3B-MTP-GGUF:UD-Q4_K_XLctx-size = 131072cache-type-k = q8_0cache-type-v = q8_0spec-type = draft-mtpspec-draft-n-max = 2temperature = 1.0top-p = 0.95top-k = 20min-p = 0.0presence-penalty = 1.5repeat-penalty = 1.0\u0417\u0430\u043f\u0443\u0441\u043a\u0430\u0435\u0442\u0441\u044f \u0447\u0435\u0440\u0435\u0437 \u0440\u043e\u0443\u0442\u0435\u0440 llama-server &#8212;models-preset, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0441\u0430\u043c \u043f\u043e\u0434\u043d\u0438\u043c\u0430\u0435\u0442 \u043c\u043e\u0434\u0435\u043b\u044c \u043e\u0442\u0434\u0435\u043b\u044c\u043d\u044b\u043c \u043f\u0440\u043e\u0446\u0435\u0441\u0441\u043e\u043c. \u0418\u0442\u043e\u0433\u043e\u0432\u0430\u044f \u043a\u043e\u043c\u0430\u043d\u0434\u0430, \u043a\u043e\u0442\u043e\u0440\u0443\u044e \u043e\u043d \u0441\u043e\u0431\u0438\u0440\u0430\u0435\u0442:llama-server &#8212;host 127.0.0.1 &#8212;port &lt;\u0434\u0438\u043d\u0430\u043c\u0438\u0447\u0435\u0441\u043a\u0438\u0439&gt; \\  &#8212;alias unsloth\/Qwen3.6-35B-A3B-MTP-GGUF-64K \\  &#8212;hf-repo unsloth\/Qwen3.6-35B-A3B-MTP-GGUF:UD-Q4_K_XL \\  &#8212;ctx-size 131072 &#8212;parallel 2 \\  &#8212;cache-type-k q8_0 &#8212;cache-type-v q8_0 \\  &#8212;n-gpu-layers -1 &#8212;flash-attn on &#8212;load-mode mmap \\  &#8212;spec-type draft-mtp &#8212;spec-draft-n-max 2 \\  &#8212;temperature 1.0 &#8212;top-p 0.95 &#8212;top-k 20 &#8212;min-p 0.0 \\  &#8212;presence-penalty 1.5 &#8212;repeat-penalty 1.0\u0427\u0442\u043e\u00a0\u0437\u0434\u0435\u0441\u044c \u0432\u0430\u0436\u043d\u043e \u0438 \u0447\u0435\u0433\u043e \u043d\u0435\u0442:\u041d\u0435\u0442 &#8212;split-mode. \u0421\u0442\u043e\u0438\u0442 \u0440\u0435\u0436\u0438\u043c \u043f\u043e\u00a0\u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e, \u0442\u043e \u0435\u0441\u0442\u044c \u043f\u043e\u0441\u043b\u043e\u0439\u043d\u044b\u0439. \u0418\u043c\u0435\u043d\u043d\u043e \u043f\u043e\u044d\u0442\u043e\u043c\u0443 Gen2\u00a0x4\u00a0\u043d\u0435\u00a0\u043c\u0435\u0448\u0430\u0435\u0442.\u0415\u0441\u0442\u044c \u043a\u0432\u0430\u043d\u0442\u0438\u0437\u0430\u0446\u0438\u044f KV\u2011\u043a\u044d\u0448\u0430 \u0434\u043e\u00a0q8_0. KV \u0443\u00a0\u044d\u0442\u043e\u0439 \u043c\u043e\u0434\u0435\u043b\u0438 \u0443\u0437\u043a\u0438\u0439 (2\u00a0\u0433\u043e\u043b\u043e\u0432\u044b), \u0438 \u043d\u0430\u00a0\u043a\u043e\u0440\u043e\u0442\u043a\u043e\u043c \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u0435 \u0432\u044b\u0438\u0433\u0440\u044b\u0448 \u043e\u0442\u00a0\u043a\u0432\u0430\u043d\u0442\u0438\u0437\u0430\u0446\u0438\u0438 \u043d\u0435\u0437\u0430\u043c\u0435\u0442\u0435\u043d. \u041d\u043e\u00a0\u043e\u043d \u043e\u0441\u0432\u043e\u0431\u043e\u0436\u0434\u0430\u0435\u0442 \u043e\u043a\u043e\u043b\u043e \u0433\u0438\u0433\u0430\u0431\u0430\u0439\u0442\u0430 VRAM, \u0430\u00a0\u043d\u0430\u00a0\u044d\u0442\u043e\u0439 \u043f\u0430\u0440\u0435 \u043a\u0430\u0440\u0442 \u043a\u0430\u0436\u0434\u044b\u0439 \u0433\u0438\u0433\u0430\u0431\u0430\u0439\u0442 \u0440\u0435\u0448\u0430\u0435\u0442, \u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0441\u043b\u043e\u0451\u0432 \u0443\u0435\u0434\u0435\u0442 \u043d\u0430\u00a0\u0431\u044b\u0441\u0442\u0440\u0443\u044e 5080. \u041d\u0430\u00a0\u0434\u043b\u0438\u043d\u043d\u043e\u043c \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u0435 \u044d\u043a\u043e\u043d\u043e\u043c\u0438\u044f \u0440\u0430\u0441\u0442\u0451\u0442\u00a0\u043b\u0438\u043d\u0435\u0439\u043d\u043e.&#8212;load-mode mmap, \u0430\u00a0\u043d\u0435 mlock. \u041f\u0440\u043e\u00a0\u044d\u0442\u043e \u0441\u0442\u043e\u0438\u0442 \u0441\u043a\u0430\u0437\u0430\u0442\u044c \u043e\u0442\u0434\u0435\u043b\u044c\u043d\u043e, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e mlock \u0442\u0443\u0442 \u043d\u0435\u00a0\u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u0442\u0430\u043a, \u043a\u0430\u043a\u00a0\u0447\u0438\u0442\u0430\u0435\u0442\u0441\u044f. \u0412\u00a0\u044f\u0434\u0440\u0435 RLIMIT_MEMLOCK \u043d\u0430\u00a0\u043c\u043e\u0435\u0439 \u043c\u0430\u0448\u0438\u043d\u0435 \u0432\u044b\u0441\u0442\u0430\u0432\u043b\u0435\u043d \u0432 8\u00a0\u041c\u0411, \u0430\u00a0\u043c\u043e\u0434\u0435\u043b\u044c \u0432\u0435\u0441\u0438\u0442 22,85\u00a0\u0413\u0411. llama.cpp \u0447\u0435\u0441\u0442\u043d\u043e \u043f\u0438\u0448\u0435\u0442 \u0432\u00a0\u043b\u043e\u0433 failed to mlock &#8230; Cannot allocate memory, \u0430 VmLck \u0432 \/proc\/&lt;pid&gt;\/status \u043e\u0441\u0442\u0430\u0451\u0442\u0441\u044f \u043d\u0443\u043b\u0435\u0432\u044b\u043c. \u0422\u043e \u0435\u0441\u0442\u044c \u043c\u043e\u0434\u0435\u043b\u044c \u043d\u0435\u00a0\u0437\u0430\u0431\u043b\u043e\u043a\u0438\u0440\u043e\u0432\u0430\u043d\u0430 \u0432\u00a0\u043f\u0430\u043c\u044f\u0442\u0438, \u0438 \u0440\u0435\u0436\u0438\u043c \u0442\u043e\u043b\u044c\u043a\u043e \u0441\u043e\u0437\u0434\u0430\u0451\u0442 \u0438\u043b\u043b\u044e\u0437\u0438\u044e. mmap \u0432\u00a0\u044d\u0442\u043e\u0439 \u0441\u0438\u0442\u0443\u0430\u0446\u0438\u0438 \u0447\u0435\u0441\u0442\u043d\u0435\u0435: \u0444\u0430\u0439\u043b \u043e\u0441\u0442\u0430\u0451\u0442\u0441\u044f \u0432\u00a0\u0441\u0442\u0440\u0430\u043d\u0438\u0447\u043d\u043e\u043c \u043a\u044d\u0448\u0435 \u0438 \u043f\u0435\u0440\u0435\u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442\u0441\u044f \u043f\u0440\u0438\u00a0\u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0435\u0439 \u0437\u0430\u0433\u0440\u0443\u0437\u043a\u0435.\u041f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u044b \u0441\u044d\u043c\u043f\u043b\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f \u0432\u0437\u044f\u0442\u044b \u0438\u0437\u00a0\u043a\u0430\u0440\u0442\u043e\u0447\u043a\u0438 \u043c\u043e\u0434\u0435\u043b\u0438 \u0434\u043b\u044f\u00a0\u0440\u0435\u0436\u0438\u043c\u0430 \u0440\u0430\u0437\u043c\u044b\u0448\u043b\u0435\u043d\u0438\u044f: temperature=1.0, top_p=0.95, top_k=20, min_p=0.0, presence_penalty=1.5.parallel = 2 \u043f\u0440\u0438\u00a0\u0432\u043a\u043b\u044e\u0447\u0451\u043d\u043d\u043e\u043c MTP. Unsloth \u0432\u00a0\u043a\u0430\u0440\u0442\u043e\u0447\u043a\u0435 \u043f\u0440\u044f\u043c\u043e \u043f\u0438\u0448\u0435\u0442, \u0447\u0442\u043e -np &gt; 1 \u0438 &#8212;mmproj \u0432\u043c\u0435\u0441\u0442\u0435 \u0441\u00a0MTP \u043f\u043e\u043a\u0430 \u043d\u0435\u00a0\u043f\u043e\u0434\u0434\u0435\u0440\u0436\u0438\u0432\u0430\u044e\u0442\u0441\u044f. \u0423\u00a0\u043c\u0435\u043d\u044f parallel = 2, \u0442\u043e \u0435\u0441\u0442\u044c -np 2, \u0438 \u0441\u0432\u044f\u0437\u043a\u0430 \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442: \u0442\u043e\u043a\u0435\u043d\u044b \u0438\u0434\u0443\u0442, \u0432\u0441\u0435 \u0437\u0430\u043c\u0435\u0440\u044b \u0432\u044b\u0448\u0435 \u0441\u043d\u044f\u0442\u044b \u0438\u043c\u0435\u043d\u043d\u043e \u0441\u00a0\u043d\u0435\u0451. &#8212;mmproj \u0432\u00a0\u043f\u0440\u0435\u0441\u0435\u0442\u0435 \u043d\u0435\u0442, \u0442\u0430\u043a \u0447\u0442\u043e\u00a0\u0432\u0442\u043e\u0440\u0430\u044f \u043f\u043e\u043b\u043e\u0432\u0438\u043d\u0430 \u043f\u0440\u0435\u0434\u0443\u043f\u0440\u0435\u0436\u0434\u0435\u043d\u0438\u044f \u043c\u0435\u043d\u044f \u043d\u0435\u00a0\u043a\u0430\u0441\u0430\u0435\u0442\u0441\u044f.\u0427\u0442\u043e\u00a0\u043e\u0433\u0440\u0430\u043d\u0438\u0447\u0438\u0432\u0430\u0435\u0442 \u043d\u0430\u00a0\u0441\u0430\u043c\u043e\u043c \u0434\u0435\u043b\u0435\u0417\u0430\u043c\u0435\u0440\u044b \u0432\u044b\u0448\u0435 \u043e\u0442\u0432\u0435\u043b\u0438 \u043f\u043e\u0434\u043e\u0437\u0440\u0435\u043d\u0438\u0435 \u043e\u0442\u00a0PCIe. \u041d\u043e\u00a0\u0447\u0442\u043e\u00a0\u0442\u043e\u0433\u0434\u0430 \u0443\u043f\u0438\u0440\u0430\u0435\u0442\u0441\u044f?\u042f \u0441\u043d\u0438\u043c\u0430\u043b nvidia-smi \u0440\u0430\u0437 \u0432\u00a0\u0441\u0435\u043a\u0443\u043d\u0434\u0443 \u0432\u043e\u00a0\u0432\u0440\u0435\u043c\u044f \u0434\u043b\u0438\u043d\u043d\u043e\u0439 \u0433\u0435\u043d\u0435\u0440\u0430\u0446\u0438\u0438\u00a0\u2014 2200\u00a0\u0442\u043e\u043a\u0435\u043d\u043e\u0432 \u0437\u0430 24\u00a0\u0441\u0435\u043a\u0443\u043d\u0434\u044b, 23\u00a0\u0441\u044d\u043c\u043f\u043b\u0430 \u043d\u0430\u00a0\u043a\u0430\u0440\u0442\u0443. \u0412\u00a0\u0441\u0442\u0430\u0442\u0438\u0441\u0442\u0438\u043a\u0443 \u0438\u0434\u0443\u0442 \u0442\u043e\u043b\u044c\u043a\u043e \u0441\u044d\u043c\u043f\u043b\u044b \u0441\u00a0\u043d\u0435\u043d\u0443\u043b\u0435\u0432\u043e\u0439 \u0437\u0430\u0433\u0440\u0443\u0437\u043a\u043e\u0439, \u0438\u043d\u0430\u0447\u0435 \u0432\u00a0\u0432\u044b\u0431\u043e\u0440\u043a\u0443 \u043f\u043e\u043f\u0430\u0434\u0430\u0435\u0442 \u043f\u0440\u043e\u0441\u0442\u043e\u0439 \u0438 \u043f\u043e\u0440\u0442\u0438\u0442 \u043c\u0438\u043d\u0438\u043c\u0443\u043c.GPU\u0421\u0440\u0435\u0434\u043d\u044f\u044f \u0437\u0430\u0433\u0440\u0443\u0437\u043a\u0430\u0420\u0430\u0437\u0431\u0440\u043e\u0441\u0421\u0440\u0435\u0434\u043d\u044f\u044f \u043c\u043e\u0449\u043d\u043e\u0441\u0442\u044c\u0420\u0430\u0437\u0431\u0440\u043e\u0441\u041b\u0438\u043c\u0438\u0442RTX&#8230;<\/p>\n","protected":false},"author":1,"featured_media":0,"comment_status":"closed","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[],"tags":[],"class_list":["post-498224","post","type-post","status-publish","format-standard","hentry"],"_links":{"self":[{"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/posts\/498224","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=%2Fwp%2Fv2%2Fcomments&post=498224"}],"version-history":[{"count":0,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/posts\/498224\/revisions"}],"wp:attachment":[{"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=%2Fwp%2Fv2%2Fmedia&parent=498224"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=%2Fwp%2Fv2%2Fcategories&post=498224"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=%2Fwp%2Fv2%2Ftags&post=498224"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}