{"id":494424,"date":"2026-09-11T18:00:03","date_gmt":"2026-09-11T18:00:03","guid":{"rendered":"https:\/\/savepearlharbor.com\/?p=494424"},"modified":"-0001-11-30T00:00:00","modified_gmt":"-0001-11-29T21:00:00","slug":"","status":"publish","type":"post","link":"https:\/\/savepearlharbor.com\/?p=494424","title":{"rendered":"Manticore Search 29.9.0: chunked auto-embeddings \u0438 mmap-\u0434\u043e\u0441\u0442\u0443\u043f \u043a columnar-\u0430\u0442\u0440\u0438\u0431\u0443\u0442\u0430\u043c"},"content":{"rendered":"<div xmlns=\"http:\/\/www.w3.org\/1999\/xhtml\">\n<figure class=\"\"><img decoding=\"async\" src=\"https:\/\/habrastorage.org\/r\/w1560\/getpro\/habr\/upload_files\/629\/3f9\/7a2\/6293f97a249de87883229418fbcc2198.png\" alt=\"Manticore Search 29.9.0: chunked auto-embeddings \u0438 mmap-\u0434\u043e\u0441\u0442\u0443\u043f \u043a columnar-\u0430\u0442\u0440\u0438\u0431\u0443\u0442\u0430\u043c\" sizes=\"(max-width: 780px) 100vw, 50vw\" srcset=\"https:\/\/habrastorage.org\/r\/w780\/getpro\/habr\/upload_files\/629\/3f9\/7a2\/6293f97a249de87883229418fbcc2198.png 780w,&#10;       https:\/\/habrastorage.org\/r\/w1560\/getpro\/habr\/upload_files\/629\/3f9\/7a2\/6293f97a249de87883229418fbcc2198.png 781w\" loading=\"lazy\" decode=\"async\"\/><\/p>\n<div><figcaption>Manticore Search 29.9.0: chunked auto-embeddings \u0438 mmap-\u0434\u043e\u0441\u0442\u0443\u043f \u043a columnar-\u0430\u0442\u0440\u0438\u0431\u0443\u0442\u0430\u043c<\/figcaption><\/div>\n<\/figure>\n<h2>Manticore Search 29.9.0: chunked auto-embeddings \u0438 mmap-\u0434\u043e\u0441\u0442\u0443\u043f \u043a columnar-\u0430\u0442\u0440\u0438\u0431\u0443\u0442\u0430\u043c<\/h2>\n<p>Manticore Search 29.9.0 \u0434\u043e\u0431\u0430\u0432\u043b\u044f\u0435\u0442 chunked \u0438 multi-vector auto-embeddings, \u043e\u0433\u0440\u0430\u043d\u0438\u0447\u0435\u043d\u0438\u0435 \u0432\u0445\u043e\u0434\u0430 \u0434\u043b\u044f embedding-\u043c\u043e\u0434\u0435\u043b\u0435\u0439, UTF-8 \u0438\u0434\u0435\u043d\u0442\u0438\u0444\u0438\u043a\u0430\u0442\u043e\u0440\u044b, mmap-\u0434\u043e\u0441\u0442\u0443\u043f \u043a columnar-\u0430\u0442\u0440\u0438\u0431\u0443\u0442\u0430\u043c \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e, \u0430 \u0442\u0430\u043a\u0436\u0435 \u0438\u0441\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u0438\u044f \u0434\u043b\u044f hybrid search, KNN, bulk ingestion \u0438 \u0433\u0440\u0443\u043f\u043f\u0438\u0440\u043e\u0432\u043a\u0438.<\/p>\n<p>\u0412\u044b\u0448\u0435\u043b [Manticore Search 29.9.0](<a href=\"https:\/\/mnt.cr\/go\/6d9yh8\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/6d9yh8<\/a> \u0413\u043b\u0430\u0432\u043d\u043e\u0435 \u0438\u0437\u043c\u0435\u043d\u0435\u043d\u0438\u0435 \u043e\u0442\u043d\u043e\u0441\u0438\u0442\u0441\u044f \u043a auto-embeddings: \u0434\u043b\u0438\u043d\u043d\u044b\u0435 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u044b \u0442\u0435\u043f\u0435\u0440\u044c \u043c\u043e\u0436\u043d\u043e \u0440\u0430\u0437\u0431\u0438\u0432\u0430\u0442\u044c \u043d\u0430 \u0444\u0440\u0430\u0433\u043c\u0435\u043d\u0442\u044b, \u0430 \u043e\u0434\u0438\u043d \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442 \u043c\u043e\u0436\u0435\u0442 \u0445\u0440\u0430\u043d\u0438\u0442\u044c \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0432\u0435\u043a\u0442\u043e\u0440\u043e\u0432 \u0432\u043c\u0435\u0441\u0442\u043e \u0442\u043e\u0433\u043e, \u0447\u0442\u043e\u0431\u044b \u0441\u0436\u0438\u043c\u0430\u0442\u044c \u0432\u0441\u0451 \u0441\u043e\u0434\u0435\u0440\u0436\u0438\u043c\u043e\u0435 \u0432 \u043e\u0434\u0438\u043d. \u0412 \u0440\u0435\u043b\u0438\u0437\u0435 \u0442\u0430\u043a\u0436\u0435 <code>mmap<\/code> \u0441\u0442\u0430\u043b \u0440\u0435\u0436\u0438\u043c\u043e\u043c \u0434\u043e\u0441\u0442\u0443\u043f\u0430 \u043a columnar-\u0430\u0442\u0440\u0438\u0431\u0443\u0442\u0430\u043c \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e, \u043f\u043e\u044f\u0432\u0438\u043b\u0438\u0441\u044c \u0431\u043e\u043b\u0435\u0435 \u0431\u0435\u0437\u043e\u043f\u0430\u0441\u043d\u044b\u0435 \u043d\u0430\u0441\u0442\u0440\u043e\u0439\u043a\u0438 \u0434\u043b\u044f embedding-\u043d\u0430\u0433\u0440\u0443\u0437\u043e\u043a, UTF-8 \u0438\u0434\u0435\u043d\u0442\u0438\u0444\u0438\u043a\u0430\u0442\u043e\u0440\u044b, \u0443\u043b\u0443\u0447\u0448\u0435\u043d\u0438\u044f backup \u0438 \u0438\u0441\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u0438\u044f \u0432 hybrid search, KNN, bulk ingestion, grouped search \u0438 \u0438\u0437\u043c\u0435\u043d\u0435\u043d\u0438\u044f\u0445 \u0441\u0445\u0435\u043c\u044b.<\/p>\n<p>\u042d\u0442\u043e\u0442 \u043f\u043e\u0441\u0442 \u043f\u043e\u043a\u0440\u044b\u0432\u0430\u0435\u0442 \u0432\u0441\u0451, \u0447\u0442\u043e \u0432\u044b\u0448\u043b\u043e \u043f\u043e\u0441\u043b\u0435 29.0.2, \u0441 <strong>29.0.3 \u043f\u043e 29.9.0<\/strong>.<\/p>\n<p>\u0421\u043f\u0430\u0441\u0438\u0431\u043e [<a class=\"mention\" href=\"\/users\/tudorvasinca\">@tudorvasinca<\/a>](<a href=\"https:\/\/mnt.cr\/go\/TIds5B\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/TIds5B<\/a> \u0437\u0430 \u0440\u0430\u0431\u043e\u0442\u0443 \u043d\u0430\u0434 [PR #4857](<a href=\"https:\/\/mnt.cr\/go\/B1SXr5\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/B1SXr5<\/a>, [PR #4859](<a href=\"https:\/\/mnt.cr\/go\/O0eEjC\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/O0eEjC<\/a> \u0438 [PR #4873](<a href=\"https:\/\/mnt.cr\/go\/drbfcB\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/drbfcB<\/a><\/p>\n<hr\/>\n<h3>\u0427\u0442\u043e \u0443\u0447\u0435\u0441\u0442\u044c \u043f\u0440\u0438 \u043e\u0431\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0438<\/h3>\n<p>\u041e\u0431\u044f\u0437\u0430\u0442\u0435\u043b\u044c\u043d\u043e\u0439 \u043c\u0438\u0433\u0440\u0430\u0446\u0438\u0438 \u0434\u0430\u043d\u043d\u044b\u0445 \u043d\u0430 \u0443\u0440\u043e\u0432\u043d\u0435 \u0432\u0441\u0435\u0433\u043e \u0440\u0435\u043b\u0438\u0437\u0430 \u043d\u0435\u0442. \u0421\u0443\u0449\u0435\u0441\u0442\u0432\u0443\u044e\u0449\u0438\u0435 \u0442\u0430\u0431\u043b\u0438\u0446\u044b \u0438 \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044e \u043c\u043e\u0436\u043d\u043e \u043e\u0431\u043d\u043e\u0432\u043b\u044f\u0442\u044c \u043e\u0431\u044b\u0447\u043d\u044b\u043c \u043e\u0431\u0440\u0430\u0437\u043e\u043c, \u043d\u043e \u043d\u0435\u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0438\u0441\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u0438\u044f \u0442\u0440\u0435\u0431\u0443\u044e\u0442 \u0434\u043e\u043f\u043e\u043b\u043d\u0438\u0442\u0435\u043b\u044c\u043d\u044b\u0445 \u0434\u0435\u0439\u0441\u0442\u0432\u0438\u0439, \u0435\u0441\u043b\u0438 \u0441\u0442\u0430\u0440\u043e\u0435 \u043f\u043e\u0432\u0435\u0434\u0435\u043d\u0438\u0435 \u0443\u0436\u0435 \u043f\u043e\u0432\u043b\u0438\u044f\u043b\u043e \u043d\u0430 \u0434\u0430\u043d\u043d\u044b\u0435:<\/p>\n<ul>\n<li>\n<p>\u041d\u043e\u0440\u043c\u0430\u043b\u0438\u0437\u0430\u0446\u0438\u044f \u043d\u0435\u043c\u0435\u0446\u043a\u043e\u0433\u043e sharp-s \u0432\u043a\u043b\u044e\u0447\u0430\u0435\u0442\u0441\u044f \u044f\u0432\u043d\u043e. \u0415\u0441\u043b\u0438 \u043f\u0435\u0440\u0435\u043a\u043b\u044e\u0447\u0438\u0442\u044c \u0441\u0443\u0449\u0435\u0441\u0442\u0432\u0443\u044e\u0449\u0443\u044e \u0442\u0430\u0431\u043b\u0438\u0446\u0443 \u043d\u0430 <code>lemmatize_de_v2<\/code> \u0438\u043b\u0438 <code>lemmatize_de_v2_all<\/code>, \u0438\u043d\u0434\u0435\u043a\u0441\u0438\u0440\u0443\u0435\u043c\u044b\u0435 \u0442\u0435\u0440\u043c\u044b \u0438\u0437\u043c\u0435\u043d\u044f\u0442\u0441\u044f, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 plain-\u0442\u0430\u0431\u043b\u0438\u0446\u0443 \u043d\u0443\u0436\u043d\u043e \u043f\u0435\u0440\u0435\u0441\u0442\u0440\u043e\u0438\u0442\u044c, \u0430 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u044b \u0432 RT-\u0442\u0430\u0431\u043b\u0438\u0446\u0443 \u2014 \u043f\u0435\u0440\u0435\u0438\u0433\u0440\u0430\u0442\u044c \u0437\u0430\u043d\u043e\u0432\u043e.<\/p>\n<\/li>\n<li>\n<p>\u0414\u043b\u044f authenticated <code>BACKUP<\/code> \u043f\u043e\u044f\u0432\u0438\u043b\u043e\u0441\u044c \u0434\u0435\u0439\u0441\u0442\u0432\u0438\u0435 \u0430\u0432\u0442\u043e\u0440\u0438\u0437\u0430\u0446\u0438\u0438 <code>backup<\/code>. \u041f\u0435\u0440\u0435\u0434 downgrade \u0434\u043e 29.3.12 \u0438\u043b\u0438 \u0431\u043e\u043b\u0435\u0435 \u0440\u0430\u043d\u043d\u0435\u0439 \u0432\u0435\u0440\u0441\u0438\u0438 \u043d\u0443\u0436\u043d\u043e \u0443\u0434\u0430\u043b\u0438\u0442\u044c \u0432\u0441\u0435 <code>backup<\/code> grants.<\/p>\n<\/li>\n<li>\n<p>Columnar-\u0430\u0442\u0440\u0438\u0431\u0443\u0442\u044b \u0442\u0435\u043f\u0435\u0440\u044c \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u044e\u0442 <code>mmap<\/code> \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e \u0432\u043c\u0435\u0441\u0442\u043e buffered <code>file<\/code> reads. \u0415\u0441\u043b\u0438 \u043d\u0443\u0436\u0435\u043d \u043f\u0440\u0435\u0436\u043d\u0438\u0439 \u0440\u0435\u0436\u0438\u043c \u0434\u043e\u0441\u0442\u0443\u043f\u0430, \u0437\u0430\u0434\u0430\u0439\u0442\u0435 <code>access_columnar_attrs='file'<\/code> \u044f\u0432\u043d\u043e.<\/p>\n<\/li>\n<\/ul>\n<hr\/>\n<h3>\u0414\u043b\u0438\u043d\u043d\u044b\u0435 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u044b \u043c\u043e\u0433\u0443\u0442 \u0445\u0440\u0430\u043d\u0438\u0442\u044c \u0431\u043e\u043b\u044c\u0448\u0435 \u043e\u0434\u043d\u043e\u0433\u043e embedding<\/h3>\n<p>\u0421\u0442\u0430\u0440\u044b\u0439 \u043f\u0443\u0442\u044c auto-embedding \u0441\u043e\u0437\u0434\u0430\u0432\u0430\u043b \u043e\u0434\u0438\u043d \u0432\u0435\u043a\u0442\u043e\u0440 \u043d\u0430 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442 \u0438 \u043e\u0431\u0440\u0435\u0437\u0430\u043b \u0442\u0435\u043a\u0441\u0442, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u043d\u0435 \u043f\u043e\u043c\u0435\u0449\u0430\u043b\u0441\u044f \u0432 \u043e\u043a\u043d\u043e \u0432\u0445\u043e\u0434\u0430 \u043c\u043e\u0434\u0435\u043b\u0438. \u0414\u043b\u044f \u0437\u0430\u0433\u043e\u043b\u043e\u0432\u043a\u043e\u0432 \u0438 \u043a\u043e\u0440\u043e\u0442\u043a\u0438\u0445 \u043e\u043f\u0438\u0441\u0430\u043d\u0438\u0439 \u044d\u0442\u043e \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442, \u043d\u043e \u0440\u0435\u043b\u0435\u0432\u0430\u043d\u0442\u043d\u044b\u0439 \u0430\u0431\u0437\u0430\u0446 \u0431\u043b\u0438\u0436\u0435 \u043a \u043a\u043e\u043d\u0446\u0443 \u0434\u043b\u0438\u043d\u043d\u043e\u0439 \u0441\u0442\u0430\u0442\u044c\u0438 \u043c\u043e\u0433 \u0432\u043e\u043e\u0431\u0449\u0435 \u043d\u0435 \u043f\u043e\u043f\u0430\u0441\u0442\u044c \u0432 \u0438\u043d\u0434\u0435\u043a\u0441.<\/p>\n<p>Manticore Search \u0442\u0435\u043f\u0435\u0440\u044c \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u0438\u0432\u0430\u0435\u0442 \u043f\u044f\u0442\u044c [\u0441\u0442\u0440\u0430\u0442\u0435\u0433\u0438\u0439 \u0440\u0430\u0437\u0431\u0438\u0435\u043d\u0438\u044f \u043d\u0430 chunks](<a href=\"https:\/\/mnt.cr\/go\/fCxeBG\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/fCxeBG<\/a><\/p>\n<ul>\n<li>\n<p><code>truncate<\/code> \u0441\u043e\u0445\u0440\u0430\u043d\u044f\u0435\u0442 \u043f\u0440\u0435\u0436\u043d\u0435\u0435 \u043f\u043e\u0432\u0435\u0434\u0435\u043d\u0438\u0435 \u0438 \u043e\u0441\u0442\u0430\u0451\u0442\u0441\u044f \u0441\u0442\u0440\u0430\u0442\u0435\u0433\u0438\u0435\u0439 \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e.<\/p>\n<\/li>\n<li>\n<p><code>mean<\/code> \u0441\u0442\u0440\u043e\u0438\u0442 embedding \u0434\u043b\u044f \u043a\u0430\u0436\u0434\u043e\u0433\u043e chunk \u0438 \u0443\u0441\u0440\u0435\u0434\u043d\u044f\u0435\u0442 \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u044b \u0432 \u043e\u0434\u0438\u043d \u0432\u0435\u043a\u0442\u043e\u0440.<\/p>\n<\/li>\n<li>\n<p><code>fixed<\/code> \u0440\u0430\u0437\u0431\u0438\u0432\u0430\u0435\u0442 \u0442\u0435\u043a\u0441\u0442 \u043d\u0430 \u043e\u043a\u043d\u0430 \u0444\u0438\u043a\u0441\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u043e\u0433\u043e \u0440\u0430\u0437\u043c\u0435\u0440\u0430 \u0432 \u0442\u043e\u043a\u0435\u043d\u0430\u0445.<\/p>\n<\/li>\n<li>\n<p><code>recursive<\/code> \u043f\u0440\u0435\u0434\u043f\u043e\u0447\u0438\u0442\u0430\u0435\u0442 \u0433\u0440\u0430\u043d\u0438\u0446\u044b \u0430\u0431\u0437\u0430\u0446\u0435\u0432, \u0441\u0442\u0440\u043e\u043a, \u043f\u0440\u0435\u0434\u043b\u043e\u0436\u0435\u043d\u0438\u0439 \u0438 \u043f\u0440\u043e\u0431\u0435\u043b\u043e\u0432 \u0438\u043c\u0435\u043d\u043d\u043e \u0432 \u0442\u0430\u043a\u043e\u043c \u043f\u043e\u0440\u044f\u0434\u043a\u0435.<\/p>\n<\/li>\n<li>\n<p><code>sentence<\/code> \u0433\u0440\u0443\u043f\u043f\u0438\u0440\u0443\u0435\u0442 \u043f\u043e\u043b\u043d\u044b\u0435 \u043f\u0440\u0435\u0434\u043b\u043e\u0436\u0435\u043d\u0438\u044f \u0434\u043e \u0437\u0430\u0434\u0430\u043d\u043d\u043e\u0433\u043e \u043b\u0438\u043c\u0438\u0442\u0430.<\/p>\n<\/li>\n<\/ul>\n<p>Multi-vector \u0441\u0442\u0440\u0430\u0442\u0435\u0433\u0438\u0438 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u044e\u0442 [<code>float_vector_array<\/code>](<a href=\"https:\/\/mnt.cr\/go\/UuFwcw\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/UuFwcw<\/a> \u041a\u0430\u0436\u0434\u044b\u0439 chunk \u0443\u0447\u0430\u0441\u0442\u0432\u0443\u0435\u0442 \u0432 KNN-\u043f\u043e\u0438\u0441\u043a\u0435 \u043d\u0435\u0437\u0430\u0432\u0438\u0441\u0438\u043c\u043e, \u043d\u043e Manticore \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0430\u0435\u0442 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442 \u043e\u0434\u0438\u043d \u0440\u0430\u0437 \u0438 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442 \u0431\u043b\u0438\u0436\u0430\u0439\u0448\u0438\u0439 chunk \u0434\u043b\u044f <code>knn_dist()<\/code>:<\/p>\n<pre><code class=\"sql\">CREATE TABLE articles (  title text,  content text,  chunks float_vector_array knn_type='hnsw' hnsw_similarity='cosine'    model_name='Xenova\/all-MiniLM-L6-v2' from='title,content'    chunk_strategy='sentence' max_tokens='256' overlap_tokens='32');INSERT INTO articles (id, title, content)VALUES (1, 'Rotating certificates', 'A long guide with many sections ...');SELECT id, knn_dist()FROM articlesWHERE knn(chunks, 5, 'how do I rotate a certificate');<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:87px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p><code>MAX_TOKENS<\/code>, <code>OVERLAP_TOKENS<\/code> \u0438 <code>MAX_CHUNKS<\/code> \u0443\u043f\u0440\u0430\u0432\u043b\u044f\u044e\u0442 \u0440\u0430\u0437\u043c\u0435\u0440\u043e\u043c chunk, \u043e\u0431\u0449\u0438\u043c \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u043e\u043c \u043d\u0430 \u0433\u0440\u0430\u043d\u0438\u0446\u0430\u0445 \u0438 \u043c\u0430\u043a\u0441\u0438\u043c\u0430\u043b\u044c\u043d\u044b\u043c \u043a\u043e\u043b\u0438\u0447\u0435\u0441\u0442\u0432\u043e\u043c \u0432\u0435\u043a\u0442\u043e\u0440\u043e\u0432. Model-backed <code>float_vector_array<\/code> \u043d\u0443\u0436\u043d\u043e \u043e\u0431\u044a\u044f\u0432\u043b\u044f\u0442\u044c \u043f\u0440\u0438 \u0441\u043e\u0437\u0434\u0430\u043d\u0438\u0438 \u0442\u0430\u0431\u043b\u0438\u0446\u044b: \u0434\u043e\u0431\u0430\u0432\u0438\u0442\u044c \u0435\u0433\u043e \u043f\u043e\u0437\u0436\u0435 \u0447\u0435\u0440\u0435\u0437 <code>ALTER TABLE ... ADD COLUMN<\/code> \u0438 \u043f\u0435\u0440\u0435\u0441\u0442\u0440\u043e\u0438\u0442\u044c embeddings \u043f\u043e\u043a\u0430 \u043d\u0435\u043b\u044c\u0437\u044f.<\/p>\n<h3>\u041e\u0433\u0440\u0430\u043d\u0438\u0447\u0435\u043d\u0438\u0435 \u043b\u043e\u043a\u0430\u043b\u044c\u043d\u043e\u0439 embedding-\u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0438<\/h3>\n<p>\u041c\u043e\u0434\u0435\u043b\u0438 \u0441 \u0434\u043b\u0438\u043d\u043d\u044b\u043c \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u043e\u043c \u043c\u043e\u0433\u0443\u0442 \u0441\u0434\u0435\u043b\u0430\u0442\u044c \u043e\u0434\u0438\u043d \u0431\u043e\u043b\u044c\u0448\u043e\u0439 \u0432\u0445\u043e\u0434 \u043d\u0435\u043e\u0436\u0438\u0434\u0430\u043d\u043d\u043e \u0434\u043e\u0440\u043e\u0433\u0438\u043c, \u043e\u0441\u043e\u0431\u0435\u043d\u043d\u043e \u043d\u0430 CPU. \u041d\u043e\u0432\u0430\u044f \u043e\u043f\u0446\u0438\u044f \u043a\u043e\u043b\u043e\u043d\u043a\u0438 [<code>MAX_INPUT_TOKENS<\/code>](<a href=\"https:\/\/mnt.cr\/go\/zZvLPe\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/zZvLPe<\/a> \u043e\u0433\u0440\u0430\u043d\u0438\u0447\u0438\u0432\u0430\u0435\u0442 \u043e\u0431\u044a\u0451\u043c \u043a\u0430\u0436\u0434\u043e\u0433\u043e \u0432\u0445\u043e\u0434\u0430, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u043e\u0442\u043f\u0440\u0430\u0432\u043b\u044f\u0435\u0442\u0441\u044f \u0432 \u043b\u043e\u043a\u0430\u043b\u044c\u043d\u0443\u044e embedding-\u043c\u043e\u0434\u0435\u043b\u044c:<\/p>\n<pre><code class=\"sql\">ALTER TABLE articlesMODIFY COLUMN chunks MAX_INPUT_TOKENS='512';<\/code><div class=\"code-explainer\"><a href=\"https:\/\/sourcecraft.dev\/\" class=\"tm-button code-explainer__link\" style=\"visibility: hidden;\"><img style=\"width:14px;height:14px;object-fit:cover;object-position:left;\"\/><\/a><\/div><\/pre>\n<p>\u0418\u0437\u043c\u0435\u043d\u0435\u043d\u0438\u0435 \u043f\u0440\u0438\u043c\u0435\u043d\u044f\u0435\u0442\u0441\u044f \u043a embeddings, \u0441\u043e\u0437\u0434\u0430\u043d\u043d\u044b\u043c \u043f\u043e\u0441\u043b\u0435 \u044d\u0442\u043e\u0433\u043e; \u0441\u0443\u0449\u0435\u0441\u0442\u0432\u0443\u044e\u0449\u0438\u0435 \u0432\u0435\u043a\u0442\u043e\u0440\u044b \u043e\u0441\u0442\u0430\u044e\u0442\u0441\u044f \u043a\u0430\u043a \u0435\u0441\u0442\u044c. \u041e\u043f\u0446\u0438\u044e \u043c\u043e\u0436\u043d\u043e \u0437\u0430\u0434\u0430\u0442\u044c \u043f\u0440\u0438 <code>CREATE TABLE<\/code> \u0438\u043b\u0438 \u0438\u0437\u043c\u0435\u043d\u0438\u0442\u044c \u043f\u043e\u0437\u0436\u0435 \u0431\u0435\u0437 re-embedding \u0442\u0430\u0431\u043b\u0438\u0446\u044b. \u0417\u043d\u0430\u0447\u0435\u043d\u0438\u0435 <code>0<\/code> \u0438\u043b\u0438 \u043e\u0442\u0441\u0443\u0442\u0441\u0442\u0432\u0438\u0435 \u043e\u043f\u0446\u0438\u0438 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442 \u0441\u043e\u0431\u0441\u0442\u0432\u0435\u043d\u043d\u044b\u0439 \u043b\u0438\u043c\u0438\u0442 \u043c\u043e\u0434\u0435\u043b\u0438.<\/p>\n<p>\u0412 \u044d\u0442\u043e\u043c \u0436\u0435 \u043d\u0430\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u0438\u0438 \u0438\u0441\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u044b \u0434\u0432\u0435 \u043c\u0435\u043d\u0435\u0435 \u0437\u0430\u043c\u0435\u0442\u043d\u044b\u0435 \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u044b: \u043c\u043e\u0434\u0435\u043b\u0438 \u0431\u043e\u043b\u044c\u0448\u0435 \u043d\u0435 \u043e\u0441\u0442\u0430\u044e\u0442\u0441\u044f \u0432 cache \u043f\u043e\u0441\u043b\u0435 \u0438\u0437\u043c\u0435\u043d\u0435\u043d\u0438\u044f embedding-\u043a\u043e\u043b\u043e\u043d\u043a\u0438, \u0430 \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u0438 \u0441 \u0440\u0430\u0437\u043d\u044b\u043c\u0438 <code>API_TIMEOUT<\/code> \u0438\u043b\u0438 <code>MAX_INPUT_TOKENS<\/code> \u0431\u043e\u043b\u044c\u0448\u0435 \u043d\u0435 \u0441\u0442\u0430\u043b\u043a\u0438\u0432\u0430\u044e\u0442\u0441\u044f \u0438 \u043d\u0435 \u043f\u0435\u0440\u0435\u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u044e\u0442 \u043d\u0435\u0432\u0435\u0440\u043d\u0443\u044e cached model.<\/p>\n<hr\/>\n<h3>UTF-8 \u0438\u0434\u0435\u043d\u0442\u0438\u0444\u0438\u043a\u0430\u0442\u043e\u0440\u044b \u0438 \u043b\u0443\u0447\u0448\u0435\u0435 \u0441\u043e\u043f\u043e\u0441\u0442\u0430\u0432\u043b\u0435\u043d\u0438\u0435 \u043d\u0435\u043c\u0435\u0446\u043a\u0438\u0445 \u0441\u043b\u043e\u0432<\/h3>\n<p>\u0418\u043c\u0435\u043d\u0430 \u0442\u0430\u0431\u043b\u0438\u0446, \u043f\u043e\u043b\u0435\u0439 \u0438 \u0430\u0442\u0440\u0438\u0431\u0443\u0442\u043e\u0432 \u0442\u0435\u043f\u0435\u0440\u044c \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u044e\u0442 \u0435\u0434\u0438\u043d\u044b\u0439 [\u0431\u0435\u0437\u043e\u043f\u0430\u0441\u043d\u044b\u0439 \u0441\u0438\u043d\u0442\u0430\u043a\u0441\u0438\u0441 UTF-8 \u0438\u0434\u0435\u043d\u0442\u0438\u0444\u0438\u043a\u0430\u0442\u043e\u0440\u043e\u0432](<a href=\"https:\/\/mnt.cr\/go\/6un5co\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/6un5co<\/a> RT, percolate, distributed, template \u0438 plain tables \u043c\u043e\u0433\u0443\u0442 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c \u043b\u043e\u043a\u0430\u043b\u0438\u0437\u043e\u0432\u0430\u043d\u043d\u044b\u0435 \u0438\u043c\u0435\u043d\u0430, \u043d\u0430\u043f\u0440\u0438\u043c\u0435\u0440 \u043a\u0438\u0442\u0430\u0439\u0441\u043a\u0438\u0435 \u0438\u043b\u0438 \u043a\u0438\u0440\u0438\u043b\u043b\u0438\u0447\u0435\u0441\u043a\u0438\u0435 \u0438\u0434\u0435\u043d\u0442\u0438\u0444\u0438\u043a\u0430\u0442\u043e\u0440\u044b, \u0432 DDL, \u0432\u044b\u0440\u0430\u0436\u0435\u043d\u0438\u044f\u0445, field selectors \u0438 inferred source schemas.<\/p>\n<p>\u041d\u0435\u043c\u0435\u0446\u043a\u0430\u044f AOT-\u043c\u043e\u0440\u0444\u043e\u043b\u043e\u0433\u0438\u044f \u043f\u043e\u043b\u0443\u0447\u0438\u043b\u0430 \u043e\u043f\u0446\u0438\u043e\u043d\u0430\u043b\u044c\u043d\u0443\u044e \u043d\u043e\u0440\u043c\u0430\u043b\u0438\u0437\u0430\u0446\u0438\u044e sharp-s. \u0421 <code>charset_table=non_cont,german<\/code> \u0438 <code>morphology=lemmatize_de_v2<\/code> \u0438\u043b\u0438 <code>lemmatize_de_v2_all<\/code> \u0444\u043e\u0440\u043c\u044b \u0432\u0440\u043e\u0434\u0435 <code>Stra\u00dfe<\/code>, <code>Strasse<\/code> \u0438 <code>STRA\u1e9eE<\/code> \u0441\u043e\u0432\u043f\u0430\u0434\u0430\u044e\u0442 \u0432 ordinary whole-word searches. \u0415\u0441\u043b\u0438 \u0432\u043a\u043b\u044e\u0447\u0451\u043d <code>index_exact_words=1<\/code>, exact-word queries \u0432\u0441\u0451 \u0435\u0449\u0451 \u043c\u043e\u0433\u0443\u0442 \u0440\u0430\u0437\u043b\u0438\u0447\u0430\u0442\u044c \u0444\u043e\u0440\u043c\u044b <code>\u00df<\/code> \u0438 <code>ss<\/code>.<\/p>\n<hr\/>\n<h3>\u0423\u043b\u0443\u0447\u0448\u0435\u043d\u0438\u044f load testing \u0438 backup<\/h3>\n<p>[<code>manticore-load<\/code>](<a href=\"https:\/\/mnt.cr\/go\/sdBXEJ\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/sdBXEJ<\/a> \u0442\u0435\u043f\u0435\u0440\u044c \u043c\u043e\u0436\u0435\u0442 \u0437\u0430\u043f\u0443\u0441\u043a\u0430\u0442\u044c benchmark \u0447\u0435\u0440\u0435\u0437 HTTP JSON API \u0441 <code>--http<\/code>. \u0417\u0430\u043f\u0438\u0441\u0438 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u044e\u0442 <code>\/bulk<\/code>, \u043f\u043e\u0438\u0441\u043a\u0438 \u2014 <code>\/search<\/code>, \u0430 <code>--table<\/code> \u0432\u044b\u0431\u0438\u0440\u0430\u0435\u0442 \u0446\u0435\u043b\u0435\u0432\u0443\u044e \u0442\u0430\u0431\u043b\u0438\u0446\u0443. \u041e\u0442\u0447\u0451\u0442\u044b \u0442\u0435\u043f\u0435\u0440\u044c \u0432\u043a\u043b\u044e\u0447\u0430\u044e\u0442 RSS \u043b\u043e\u043a\u0430\u043b\u044c\u043d\u043e\u0433\u043e <code>searchd<\/code> \u0432\u043e \u0432\u0440\u0435\u043c\u044f \u0437\u0430\u043f\u0443\u0441\u043a\u0430, \u0430 \u0442\u0430\u043a\u0436\u0435 peak RSS, disk \u0438 CPU statistics \u0432 \u043a\u043e\u043d\u0446\u0435, \u0432\u043a\u043b\u044e\u0447\u0430\u044f aggregate monitoring \u0434\u043b\u044f multi-command workloads.<\/p>\n<p>[Manticore Backup](<a href=\"https:\/\/mnt.cr\/go\/2yXrq7\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/2yXrq7<\/a> \u0442\u0435\u043f\u0435\u0440\u044c \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u0441 authenticated Manticore Search installations \u0447\u0435\u0440\u0435\u0437 username\/password \u0438\u043b\u0438 bearer-token credentials. SQL [<code>BACKUP<\/code>](<a href=\"https:\/\/mnt.cr\/go\/eqvadg\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/eqvadg<\/a> \u043f\u043e\u043b\u0443\u0447\u0438\u043b \u043e\u0442\u0434\u0435\u043b\u044c\u043d\u043e\u0435 authorization action \u0438 \u043f\u0440\u043e\u0432\u0435\u0440\u044f\u0435\u0442 read access \u043a \u0432\u044b\u0431\u0440\u0430\u043d\u043d\u044b\u043c \u0442\u0430\u0431\u043b\u0438\u0446\u0430\u043c.<\/p>\n<p>S3 backups \u0438 restores \u0442\u0430\u043a\u0436\u0435 \u043c\u043e\u0433\u0443\u0442 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c AWS SDK credential provider chain, \u043a\u043e\u0433\u0434\u0430 static keys \u043d\u0435 \u0437\u0430\u0434\u0430\u043d\u044b. \u042d\u0442\u043e \u0432\u043a\u043b\u044e\u0447\u0430\u0435\u0442 IRSA, shared credentials, ECS task roles \u0438 EC2 instance profiles. Temporary credentials \u043c\u043e\u0433\u0443\u0442 \u0437\u0430\u0434\u0430\u0432\u0430\u0442\u044c <code>AWS_SESSION_TOKEN<\/code>.<\/p>\n<h3>Columnar-\u0430\u0442\u0440\u0438\u0431\u0443\u0442\u044b \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u044e\u0442 mmap \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e<\/h3>\n<p>Manticore Search \u0442\u0435\u043f\u0435\u0440\u044c \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e \u0441\u0442\u0430\u0432\u0438\u0442 [<code>access_columnar_attrs<\/code>](<a href=\"https:\/\/mnt.cr\/go\/6A7EpL\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/6A7EpL<\/a> \u0432 <code>mmap<\/code>. \u041e\u043f\u0435\u0440\u0430\u0446\u0438\u043e\u043d\u043d\u0430\u044f \u0441\u0438\u0441\u0442\u0435\u043c\u0430 \u043e\u0442\u043e\u0431\u0440\u0430\u0436\u0430\u0435\u0442 \u0438 \u043a\u044d\u0448\u0438\u0440\u0443\u0435\u0442 \u0444\u0430\u0439\u043b\u044b columnar-\u0430\u0442\u0440\u0438\u0431\u0443\u0442\u043e\u0432 <code>*.spc<\/code> \u043f\u043e \u0442\u0440\u0435\u0431\u043e\u0432\u0430\u043d\u0438\u044e, \u0431\u0435\u0437 \u043f\u0440\u0435\u0434\u0432\u0430\u0440\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0433\u043e \u0447\u0442\u0435\u043d\u0438\u044f \u0432\u0441\u0435\u0433\u043e \u0444\u0430\u0439\u043b\u0430 \u043d\u0430 \u0441\u0442\u0430\u0440\u0442\u0435. \u041f\u0440\u0435\u0436\u043d\u0438\u0439 buffered path \u043e\u0441\u0442\u0430\u0451\u0442\u0441\u044f \u0434\u043e\u0441\u0442\u0443\u043f\u0435\u043d \u0447\u0435\u0440\u0435\u0437 <code>access_columnar_attrs='file'<\/code>.<\/p>\n<p><code>ALTER TABLE<\/code> \u0442\u0430\u043a\u0436\u0435 \u043f\u0435\u0440\u0435\u043e\u0442\u043a\u0440\u044b\u0432\u0430\u0435\u0442 \u0437\u0430\u043c\u0435\u043d\u0451\u043d\u043d\u043e\u0435 columnar storage \u0441 \u043d\u0430\u0441\u0442\u0440\u043e\u0435\u043d\u043d\u044b\u043c \u0440\u0435\u0436\u0438\u043c\u043e\u043c \u0434\u043e\u0441\u0442\u0443\u043f\u0430, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 \u0438\u0437\u043c\u0435\u043d\u0451\u043d\u043d\u0430\u044f \u0442\u0430\u0431\u043b\u0438\u0446\u0430 \u0431\u043e\u043b\u044c\u0448\u0435 \u043d\u0435 \u043e\u0442\u043a\u0430\u0442\u044b\u0432\u0430\u0435\u0442\u0441\u044f \u043a \u0434\u0440\u0443\u0433\u043e\u043c\u0443 reader, \u043e\u0442\u043b\u0438\u0447\u043d\u043e\u043c\u0443 \u043e\u0442 \u0437\u0430\u043f\u0440\u043e\u0448\u0435\u043d\u043d\u043e\u0433\u043e.<\/p>\n<hr\/>\n<h3>\u0418\u0441\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u0438\u044f vector \u0438 grouped search<\/h3>\n<p>\u041d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0438\u0441\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u0438\u0439 \u043a\u0430\u0441\u0430\u044e\u0442\u0441\u044f \u0437\u0430\u043f\u0440\u043e\u0441\u043e\u0432, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0431\u044b\u043b\u0438 \u0432\u0430\u043b\u0438\u0434\u043d\u044b\u043c\u0438, \u043d\u043e \u043c\u043e\u0433\u043b\u0438 \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0430\u0442\u044c \u043d\u0435\u043f\u043e\u043b\u043d\u044b\u0435 \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u044b \u0438\u043b\u0438 \u043f\u0430\u0434\u0430\u0442\u044c \u043f\u0440\u0438 \u043e\u043f\u0440\u0435\u0434\u0435\u043b\u0451\u043d\u043d\u043e\u0439 \u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u0435 \u0442\u0430\u0431\u043b\u0438\u0446:<\/p>\n<ul>\n<li>\n<p>Distributed \u0438 sharded KNN queries \u0441 local shard \u0431\u043e\u043b\u044c\u0448\u0435 \u043d\u0435 \u043f\u0435\u0440\u0435\u0441\u0447\u0438\u0442\u044b\u0432\u0430\u044e\u0442 merged 1-bit-quantized results \u0434\u0432\u0430\u0436\u0434\u044b, \u0447\u0442\u043e \u043c\u043e\u0433\u043b\u043e \u043f\u0440\u0438\u0432\u0435\u0441\u0442\u0438 \u043a crash coordinator \u0438\u043b\u0438 \u043d\u0435\u0432\u0435\u0440\u043d\u043e\u043c\u0443 nearest neighbor. ([Issue #4791](<a href=\"https:\/\/mnt.cr\/go\/iuOi6U\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/iuOi6U<\/a><\/p>\n<\/li>\n<li>\n<p>KNN queries \u0441 \u0434\u043e\u043f\u043e\u043b\u043d\u0438\u0442\u0435\u043b\u044c\u043d\u044b\u043c\u0438 filters \u0438\u0437\u0431\u0435\u0433\u0430\u044e\u0442 \u043b\u0438\u0448\u043d\u0435\u0433\u043e <code>knn_dist<\/code> prefilter, \u043a\u043e\u0433\u0434\u0430 HNSW \u0443\u0436\u0435 \u0438\u0441\u043a\u043b\u044e\u0447\u0430\u0435\u0442 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u044b \u0431\u0435\u0437 \u0432\u0435\u043a\u0442\u043e\u0440\u043e\u0432. ([PR #4861](<a href=\"https:\/\/mnt.cr\/go\/UTI8PT\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/UTI8PT<\/a><\/p>\n<\/li>\n<li>\n<p><code>LENGTH()<\/code> \u0434\u043b\u044f <code>float_vector_array<\/code> \u0442\u0435\u043f\u0435\u0440\u044c \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0430\u0435\u0442 \u043a\u043e\u043b\u0438\u0447\u0435\u0441\u0442\u0432\u043e \u0432\u0435\u043a\u0442\u043e\u0440\u043e\u0432, \u0430 \u043d\u0435 \u0432\u043d\u0443\u0442\u0440\u0435\u043d\u043d\u0438\u0439 storage-word count. ([PR #4879](<a href=\"https:\/\/mnt.cr\/go\/he0eBc\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/he0eBc<\/a><\/p>\n<\/li>\n<li>\n<p>Hybrid search \u0441 <code>GROUP BY<\/code> \u0441\u043e\u0445\u0440\u0430\u043d\u044f\u0435\u0442 \u0432\u0441\u0435 buckets, \u0432\u043a\u043b\u044e\u0447\u0430\u044f MVA groups, \u0438 \u0441\u043e\u0431\u043b\u044e\u0434\u0430\u0435\u0442 final \u0438 within-group ordering. ([Issue #4639](<a href=\"https:\/\/mnt.cr\/go\/W77QRM\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/W77QRM<\/a><\/p>\n<\/li>\n<li>\n<p>Hybrid filters \u043f\u043e <code>weight()<\/code> \u0438 expressions \u0438\u043b\u0438 aliases, derived from it, \u0442\u0435\u043f\u0435\u0440\u044c \u0432\u044b\u043f\u043e\u043b\u043d\u044f\u044e\u0442\u0441\u044f \u043f\u043e\u0441\u043b\u0435 fusion \u043f\u043e \u0438\u0442\u043e\u0433\u043e\u0432\u043e\u043c\u0443 text weight, \u0430 \u043d\u0435 \u0438\u0433\u043d\u043e\u0440\u0438\u0440\u0443\u044e\u0442\u0441\u044f. Weight-dependent filters \u0432\u043d\u0443\u0442\u0440\u0438 <code>OR<\/code> trees \u043e\u0441\u0442\u0430\u044e\u0442\u0441\u044f \u043d\u0435\u043f\u043e\u0434\u0434\u0435\u0440\u0436\u0430\u043d\u043d\u044b\u043c\u0438 \u0438 \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0430\u044e\u0442 \u044f\u0432\u043d\u0443\u044e \u043e\u0448\u0438\u0431\u043a\u0443. ([Issue #4889](<a href=\"https:\/\/mnt.cr\/go\/VOf6Qq\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/VOf6Qq<\/a><\/p>\n<\/li>\n<li>\n<p>Multi-chunk RT grouping \u0431\u043e\u043b\u044c\u0448\u0435 \u043d\u0435 \u0440\u0438\u0441\u043a\u0443\u0435\u0442 duplicate groups, \u043d\u0435\u0432\u0435\u0440\u043d\u044b\u043c\u0438 split counts \u0438\u043b\u0438 hang \u043f\u0440\u0438 ordering <code>COUNT(DISTINCT ...)<\/code> results. ([Issue #4856](<a href=\"https:\/\/mnt.cr\/go\/fwDLRA\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/fwDLRA<\/a><\/p>\n<\/li>\n<li>\n<p>\u0424\u0438\u043b\u044c\u0442\u0440\u044b \u043f\u043e document ID, signed representation \u043a\u043e\u0442\u043e\u0440\u044b\u0445 \u043e\u0442\u0440\u0438\u0446\u0430\u0442\u0435\u043b\u044c\u043d\u044b\u0439, \u0442\u0435\u043f\u0435\u0440\u044c \u0441\u043b\u0435\u0434\u0443\u044e\u0442 unsigned ordering lookup index. ([Issue #4774](<a href=\"https:\/\/mnt.cr\/go\/VPvgyV\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/VPvgyV<\/a><\/p>\n<\/li>\n<\/ul>\n<p>\u0422\u0430\u043a\u0436\u0435 \u0438\u0441\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u044b crash-\u0441\u0446\u0435\u043d\u0430\u0440\u0438\u0438: \u0432\u0442\u043e\u0440\u043e\u0439 hybrid-search statement \u0432 multi-statement request ([PR #4864](<a href=\"https:\/\/mnt.cr\/go\/i5Kymv\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/i5Kymv<\/a>, distributed JSON aggregation \u0441 \u0441\u043e\u0440\u0442\u0438\u0440\u043e\u0432\u043a\u043e\u0439 \u043f\u043e string attribute ([Issue #4822](<a href=\"https:\/\/mnt.cr\/go\/NCIurP\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/NCIurP<\/a> \u0438 drop table \u0432\u043e \u0432\u0440\u0435\u043c\u044f auto-embedding precommit ([Issue #4860](<a href=\"https:\/\/mnt.cr\/go\/D22E3f\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/D22E3f<\/a><\/p>\n<h3>Bulk ingestion \u0441\u0442\u0430\u043b \u043f\u0440\u0435\u0434\u0441\u043a\u0430\u0437\u0443\u0435\u043c\u0435\u0435<\/h3>\n<p>Elasticsearch-compatible <code>\/_bulk<\/code> requests \u0442\u0435\u043f\u0435\u0440\u044c \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0430\u044e\u0442 HTTP <code>200<\/code> \u043f\u043e\u0441\u043b\u0435 \u043e\u0431\u0440\u0430\u0431\u043e\u0442\u043a\u0438 batch, \u0430 \u043e\u0442\u0434\u0435\u043b\u044c\u043d\u044b\u0435 \u043e\u0448\u0438\u0431\u043a\u0438 \u043e\u0441\u0442\u0430\u044e\u0442\u0441\u044f \u0432\u0438\u0434\u043d\u044b \u0447\u0435\u0440\u0435\u0437 <code>errors: true<\/code> \u0438 per-item statuses. Duplicate <code>create<\/code> actions \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0430\u044e\u0442 per-item <code>409<\/code> <code>version_conflict_engine_exception<\/code>, \u0432\u043a\u043b\u044e\u0447\u0430\u044f \u0434\u0443\u0431\u043b\u0438\u043a\u0430\u0442\u044b \u0432\u043d\u0443\u0442\u0440\u0438 \u043e\u0434\u043d\u043e\u0433\u043e batch. \u042d\u0442\u043e \u043d\u0435 \u0434\u0430\u0451\u0442 \u043a\u043b\u0438\u0435\u043d\u0442\u0430\u043c \u0432\u0440\u043e\u0434\u0435 Fluent Bit \u043f\u043e\u0432\u0442\u043e\u0440\u044f\u0442\u044c \u0437\u0430\u043f\u0438\u0441\u0438, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0443\u0436\u0435 \u0443\u0441\u043f\u0435\u0448\u043d\u043e \u043f\u0440\u043e\u0448\u043b\u0438.<\/p>\n<p>Fixed-length gzip-compressed <code>\/bulk<\/code> bodies \u0442\u0435\u043f\u0435\u0440\u044c \u043a\u043e\u0440\u0440\u0435\u043a\u0442\u043d\u043e \u0434\u0435\u043a\u043e\u0434\u0438\u0440\u0443\u044e\u0442\u0441\u044f, \u0434\u0430\u0436\u0435 \u0435\u0441\u043b\u0438 \u043f\u0440\u0438\u0445\u043e\u0434\u044f\u0442 \u0447\u0435\u0440\u0435\u0437 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e socket reads. \u0410 \u0435\u0441\u043b\u0438 native bulk processing \u043f\u0430\u0434\u0430\u0435\u0442 \u0438\u0437-\u0437\u0430 \u043e\u0442\u0441\u0443\u0442\u0441\u0442\u0432\u0438\u044f \u0446\u0435\u043b\u0435\u0432\u043e\u0439 \u0442\u0430\u0431\u043b\u0438\u0446\u044b, request \u0441\u043d\u043e\u0432\u0430 \u043c\u043e\u0436\u0435\u0442 \u0434\u043e\u0439\u0442\u0438 \u0434\u043e auto-schema fallback Manticore \u0441 \u0432\u0430\u043b\u0438\u0434\u043d\u044b\u043c NDJSON \u0438 \u0441\u043e\u0445\u0440\u0430\u043d\u0438\u0442\u044c \u043e\u0436\u0438\u0434\u0430\u0435\u043c\u044b\u0439 bulk response envelope.<\/p>\n<hr\/>\n<h3>\u0415\u0449\u0451 \u0438\u0441\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u0438\u044f \u043d\u0430\u0434\u0451\u0436\u043d\u043e\u0441\u0442\u0438<\/h3>\n<p>\u041e\u0441\u0442\u0430\u043b\u044c\u043d\u0430\u044f \u0447\u0430\u0441\u0442\u044c \u0440\u0435\u043b\u0438\u0437\u0430 \u0437\u0430\u043a\u0440\u044b\u0432\u0430\u0435\u0442 \u0448\u0438\u0440\u043e\u043a\u0438\u0439 \u043d\u0430\u0431\u043e\u0440 operational \u0438 compatibility \u043f\u0440\u043e\u0431\u043b\u0435\u043c:<\/p>\n<ul>\n<li>\n<p><code>searchd --stopwait<\/code> \u0431\u043e\u043b\u044c\u0448\u0435 \u043d\u0435 \u0437\u0430\u0432\u0438\u0441\u0430\u0435\u0442, \u043f\u043e\u043a\u0430 sharded table rebalanced \u043f\u043e\u0441\u043b\u0435 \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0435\u043d\u0438\u044f node. ([Issue #3905](<a href=\"https:\/\/mnt.cr\/go\/jopxPb\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/jopxPb<\/a><\/p>\n<\/li>\n<li>\n<p>\u0421\u043e\u0432\u043c\u0435\u0441\u0442\u0438\u043c\u044b\u0435 \u0441\u0442\u0430\u0440\u044b\u0435 binlogs \u0431\u0435\u0437\u043e\u043f\u0430\u0441\u043d\u043e replay during upgrade, \u0430 completed RT chunks \u043f\u0443\u0431\u043b\u0438\u043a\u0443\u044e\u0442\u0441\u044f \u043f\u0435\u0440\u0435\u0434 clean shutdown. ([Issue #4808](<a href=\"https:\/\/mnt.cr\/go\/y6w4GH\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/y6w4GH<\/a> Fatal replay diagnostics \u0442\u0430\u043a\u0436\u0435 \u043d\u0430\u0437\u044b\u0432\u0430\u044e\u0442 \u043d\u0443\u0436\u043d\u044b\u0439 recovery flag. ([Issue #4811](<a href=\"https:\/\/mnt.cr\/go\/9w6uNo\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/9w6uNo<\/a><\/p>\n<\/li>\n<li>\n<p><code>indexer<\/code> \u0441\u043e\u0437\u0434\u0430\u0451\u0442 \u043e\u0442\u0441\u0443\u0442\u0441\u0442\u0432\u0443\u044e\u0449\u0438\u0435 parent directories \u0434\u043b\u044f plain-table paths, \u0435\u0441\u043b\u0438 \u0431\u043b\u0438\u0436\u0430\u0439\u0448\u0438\u0439 \u0441\u0443\u0449\u0435\u0441\u0442\u0432\u0443\u044e\u0449\u0438\u0439 parent writable. ([Issue #4793](<a href=\"https:\/\/mnt.cr\/go\/2AyJ8K\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/2AyJ8K<\/a><\/p>\n<\/li>\n<li>\n<p>UUID document IDs \u0431\u043e\u043b\u044c\u0448\u0435 \u043d\u0435 \u043f\u0440\u0438\u0432\u043e\u0434\u044f\u0442 \u043a \u043f\u0443\u0441\u0442\u044b\u043c stored text fields. ([Issue #4833](<a href=\"https:\/\/mnt.cr\/go\/hErEYm\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/hErEYm<\/a><\/p>\n<\/li>\n<li>\n<p><code>ALTER TABLE ... RENAME<\/code> \u0441\u043e\u0445\u0440\u0430\u043d\u044f\u0435\u0442 hidden remote embedding API keys, \u043d\u0435 \u043f\u043e\u043a\u0430\u0437\u044b\u0432\u0430\u044f \u0438\u0445 \u0432 <code>SHOW CREATE TABLE<\/code>. ([Issue #4842](<a href=\"https:\/\/mnt.cr\/go\/YuCTPF\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/YuCTPF<\/a><\/p>\n<\/li>\n<li>\n<p>Compatibility probes Sequel Ace 5.3.1+ \u0441\u043d\u043e\u0432\u0430 \u0440\u0430\u0431\u043e\u0442\u0430\u044e\u0442. ([Issue #4828](<a href=\"https:\/\/mnt.cr\/go\/bVXFrw\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/bVXFrw<\/a><\/p>\n<\/li>\n<li>\n<p>JSON <code>\/search<\/code> \u0441\u043e\u0445\u0440\u0430\u043d\u044f\u0435\u0442 distances \u0434\u043b\u044f negated <code>NEAR<\/code> \u0438 proximity operators. ([Issue #4784](<a href=\"https:\/\/mnt.cr\/go\/tsDLTu\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/tsDLTu<\/a><\/p>\n<\/li>\n<li>\n<p>Internal string-sort helper columns \u0431\u043e\u043b\u044c\u0448\u0435 \u043d\u0435 \u043f\u0440\u043e\u0442\u0435\u043a\u0430\u044e\u0442 \u0438\u0437 <code>LEFT JOIN<\/code> results. ([Issue #4788](<a href=\"https:\/\/mnt.cr\/go\/wS6uNG\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/wS6uNG<\/a><\/p>\n<\/li>\n<li>\n<p>Malformed binary API <code>SEARCH<\/code> element counts \u0442\u0435\u043f\u0435\u0440\u044c \u043e\u0442\u043a\u043b\u043e\u043d\u044f\u044e\u0442\u0441\u044f, \u0430 \u043d\u0435 \u0437\u0430\u0432\u0435\u0440\u0448\u0430\u044e\u0442 <code>searchd<\/code>. ([PR #4790](<a href=\"https:\/\/mnt.cr\/go\/8l9q4g\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/8l9q4g<\/a><\/p>\n<\/li>\n<\/ul>\n<p>\u041f\u043e\u043b\u043d\u044b\u0439 \u0441\u043f\u0438\u0441\u043e\u043a \u2014 \u0432 [changelog \u0432\u0435\u0440\u0441\u0438\u0438 29.9.0](<a href=\"https:\/\/mnt.cr\/go\/Zf4B8X\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/Zf4B8X<\/a><\/p>\n<hr\/>\n<h3>\u041a\u0430\u043a \u043f\u043e\u043b\u0443\u0447\u0438\u0442\u044c Manticore Search 29.9.0<\/h3>\n<p>\u0423\u0441\u0442\u0430\u043d\u043e\u0432\u0438\u0442\u0435 \u0438\u043b\u0438 \u043e\u0431\u043d\u043e\u0432\u0438\u0442\u0435 Manticore Search \u043f\u043e [\u0438\u043d\u0441\u0442\u0440\u0443\u043a\u0446\u0438\u0438 \u043f\u043e \u0443\u0441\u0442\u0430\u043d\u043e\u0432\u043a\u0435](<a href=\"https:\/\/mnt.cr\/go\/6d9yh8\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/6d9yh8<\/a> \u0415\u0441\u043b\u0438 \u0432\u044b \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442\u0435 columnar-\u0430\u0442\u0440\u0438\u0431\u0443\u0442\u044b, \u043d\u0435\u043c\u0435\u0446\u043a\u0443\u044e AOT-\u043c\u043e\u0440\u0444\u043e\u043b\u043e\u0433\u0438\u044e \u0438\u043b\u0438 authenticated backups, \u043f\u043e\u0441\u043c\u043e\u0442\u0440\u0438\u0442\u0435 notes \u043f\u043e \u043e\u0431\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u044e \u0432\u044b\u0448\u0435.<\/p>\n<h3>\u041d\u0443\u0436\u043d\u0430 \u043f\u043e\u043c\u043e\u0449\u044c \u0438\u043b\u0438 \u0445\u043e\u0442\u0438\u0442\u0435 \u043f\u043e\u043e\u0431\u0449\u0430\u0442\u044c\u0441\u044f?<\/h3>\n<ul>\n<li>\n<p>\u041f\u0440\u0438\u0441\u043e\u0435\u0434\u0438\u043d\u044f\u0439\u0442\u0435\u0441\u044c \u043a \u043d\u0430\u0448\u0435\u043c\u0443 [Slack](<a href=\"https:\/\/mnt.cr\/go\/IvlPzm\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/IvlPzm<\/a><\/p>\n<\/li>\n<li>\n<p>\u0417\u0430\u0445\u043e\u0434\u0438\u0442\u0435 \u043d\u0430 [Forum](<a href=\"https:\/\/mnt.cr\/go\/WKDBs8\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/WKDBs8<\/a><\/p>\n<\/li>\n<li>\n<p>\u0421\u043e\u043e\u0431\u0449\u0430\u0439\u0442\u0435 \u043e \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u0430\u0445 \u0438\u043b\u0438 \u043f\u0440\u0435\u0434\u043b\u0430\u0433\u0430\u0439\u0442\u0435 \u0443\u043b\u0443\u0447\u0448\u0435\u043d\u0438\u044f \u043d\u0430 [GitHub](<a href=\"https:\/\/mnt.cr\/go\/PTcXwo\" rel=\"noopener nofollow\">https:\/\/mnt.cr\/go\/PTcXwo<\/a><\/p>\n<\/li>\n<li>\n<p>\u041f\u0438\u0448\u0438\u0442\u0435 \u043d\u0430\u043c \u043d\u0430 <code>contact@manticoresearch.com<\/code><\/p>\n<\/li>\n<\/ul>\n<\/div>\n<p>\u0441\u0441\u044b\u043b\u043a\u0430 \u043d\u0430 \u043e\u0440\u0438\u0433\u0438\u043d\u0430\u043b \u0441\u0442\u0430\u0442\u044c\u0438 <a href=\"https:\/\/habr.com\/ru\/articles\/1081448\/\">https:\/\/habr.com\/ru\/articles\/1081448\/<\/a><\/p>\n","protected":false},"excerpt":{"rendered":"<p>Manticore Search 29.9.0: chunked auto-embeddings \u0438 mmap-\u0434\u043e\u0441\u0442\u0443\u043f \u043a columnar-\u0430\u0442\u0440\u0438\u0431\u0443\u0442\u0430\u043cManticore Search 29.9.0: chunked auto-embeddings \u0438 mmap-\u0434\u043e\u0441\u0442\u0443\u043f \u043a columnar-\u0430\u0442\u0440\u0438\u0431\u0443\u0442\u0430\u043cManticore Search 29.9.0 \u0434\u043e\u0431\u0430\u0432\u043b\u044f\u0435\u0442 chunked \u0438 multi-vector auto-embeddings, \u043e\u0433\u0440\u0430\u043d\u0438\u0447\u0435\u043d\u0438\u0435 \u0432\u0445\u043e\u0434\u0430 \u0434\u043b\u044f embedding-\u043c\u043e\u0434\u0435\u043b\u0435\u0439, UTF-8 \u0438\u0434\u0435\u043d\u0442\u0438\u0444\u0438\u043a\u0430\u0442\u043e\u0440\u044b, mmap-\u0434\u043e\u0441\u0442\u0443\u043f \u043a columnar-\u0430\u0442\u0440\u0438\u0431\u0443\u0442\u0430\u043c \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e, \u0430 \u0442\u0430\u043a\u0436\u0435 \u0438\u0441\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u0438\u044f \u0434\u043b\u044f hybrid search, KNN, bulk ingestion \u0438 \u0433\u0440\u0443\u043f\u043f\u0438\u0440\u043e\u0432\u043a\u0438.\u0412\u044b\u0448\u0435\u043b [Manticore Search 29.9.0](https:\/\/mnt.cr\/go\/6d9yh8 \u0413\u043b\u0430\u0432\u043d\u043e\u0435 \u0438\u0437\u043c\u0435\u043d\u0435\u043d\u0438\u0435 \u043e\u0442\u043d\u043e\u0441\u0438\u0442\u0441\u044f \u043a auto-embeddings: \u0434\u043b\u0438\u043d\u043d\u044b\u0435 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u044b \u0442\u0435\u043f\u0435\u0440\u044c \u043c\u043e\u0436\u043d\u043e \u0440\u0430\u0437\u0431\u0438\u0432\u0430\u0442\u044c \u043d\u0430 \u0444\u0440\u0430\u0433\u043c\u0435\u043d\u0442\u044b, \u0430 \u043e\u0434\u0438\u043d \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442 \u043c\u043e\u0436\u0435\u0442 \u0445\u0440\u0430\u043d\u0438\u0442\u044c \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0432\u0435\u043a\u0442\u043e\u0440\u043e\u0432 \u0432\u043c\u0435\u0441\u0442\u043e \u0442\u043e\u0433\u043e, \u0447\u0442\u043e\u0431\u044b \u0441\u0436\u0438\u043c\u0430\u0442\u044c \u0432\u0441\u0451 \u0441\u043e\u0434\u0435\u0440\u0436\u0438\u043c\u043e\u0435 \u0432 \u043e\u0434\u0438\u043d. \u0412 \u0440\u0435\u043b\u0438\u0437\u0435 \u0442\u0430\u043a\u0436\u0435 mmap \u0441\u0442\u0430\u043b \u0440\u0435\u0436\u0438\u043c\u043e\u043c \u0434\u043e\u0441\u0442\u0443\u043f\u0430 \u043a columnar-\u0430\u0442\u0440\u0438\u0431\u0443\u0442\u0430\u043c \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e, \u043f\u043e\u044f\u0432\u0438\u043b\u0438\u0441\u044c \u0431\u043e\u043b\u0435\u0435 \u0431\u0435\u0437\u043e\u043f\u0430\u0441\u043d\u044b\u0435 \u043d\u0430\u0441\u0442\u0440\u043e\u0439\u043a\u0438 \u0434\u043b\u044f embedding-\u043d\u0430\u0433\u0440\u0443\u0437\u043e\u043a, UTF-8 \u0438\u0434\u0435\u043d\u0442\u0438\u0444\u0438\u043a\u0430\u0442\u043e\u0440\u044b, \u0443\u043b\u0443\u0447\u0448\u0435\u043d\u0438\u044f backup \u0438 \u0438\u0441\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u0438\u044f \u0432 hybrid search, KNN, bulk ingestion, grouped search \u0438 \u0438\u0437\u043c\u0435\u043d\u0435\u043d\u0438\u044f\u0445 \u0441\u0445\u0435\u043c\u044b.\u042d\u0442\u043e\u0442 \u043f\u043e\u0441\u0442 \u043f\u043e\u043a\u0440\u044b\u0432\u0430\u0435\u0442 \u0432\u0441\u0451, \u0447\u0442\u043e \u0432\u044b\u0448\u043b\u043e \u043f\u043e\u0441\u043b\u0435 29.0.2, \u0441 29.0.3 \u043f\u043e 29.9.0.\u0421\u043f\u0430\u0441\u0438\u0431\u043e [@tudorvasinca](https:\/\/mnt.cr\/go\/TIds5B \u0437\u0430 \u0440\u0430\u0431\u043e\u0442\u0443 \u043d\u0430\u0434 [PR #4857](https:\/\/mnt.cr\/go\/B1SXr5, [PR #4859](https:\/\/mnt.cr\/go\/O0eEjC \u0438 [PR #4873](https:\/\/mnt.cr\/go\/drbfcB\u0427\u0442\u043e \u0443\u0447\u0435\u0441\u0442\u044c \u043f\u0440\u0438 \u043e\u0431\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0438\u041e\u0431\u044f\u0437\u0430\u0442\u0435\u043b\u044c\u043d\u043e\u0439 \u043c\u0438\u0433\u0440\u0430\u0446\u0438\u0438 \u0434\u0430\u043d\u043d\u044b\u0445 \u043d\u0430 \u0443\u0440\u043e\u0432\u043d\u0435 \u0432\u0441\u0435\u0433\u043e \u0440\u0435\u043b\u0438\u0437\u0430 \u043d\u0435\u0442. \u0421\u0443\u0449\u0435\u0441\u0442\u0432\u0443\u044e\u0449\u0438\u0435 \u0442\u0430\u0431\u043b\u0438\u0446\u044b \u0438 \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044e \u043c\u043e\u0436\u043d\u043e \u043e\u0431\u043d\u043e\u0432\u043b\u044f\u0442\u044c \u043e\u0431\u044b\u0447\u043d\u044b\u043c \u043e\u0431\u0440\u0430\u0437\u043e\u043c, \u043d\u043e \u043d\u0435\u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0438\u0441\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u0438\u044f \u0442\u0440\u0435\u0431\u0443\u044e\u0442 \u0434\u043e\u043f\u043e\u043b\u043d\u0438\u0442\u0435\u043b\u044c\u043d\u044b\u0445 \u0434\u0435\u0439\u0441\u0442\u0432\u0438\u0439, \u0435\u0441\u043b\u0438 \u0441\u0442\u0430\u0440\u043e\u0435 \u043f\u043e\u0432\u0435\u0434\u0435\u043d\u0438\u0435 \u0443\u0436\u0435 \u043f\u043e\u0432\u043b\u0438\u044f\u043b\u043e \u043d\u0430 \u0434\u0430\u043d\u043d\u044b\u0435:\u041d\u043e\u0440\u043c\u0430\u043b\u0438\u0437\u0430\u0446\u0438\u044f \u043d\u0435\u043c\u0435\u0446\u043a\u043e\u0433\u043e sharp-s \u0432\u043a\u043b\u044e\u0447\u0430\u0435\u0442\u0441\u044f \u044f\u0432\u043d\u043e. \u0415\u0441\u043b\u0438 \u043f\u0435\u0440\u0435\u043a\u043b\u044e\u0447\u0438\u0442\u044c \u0441\u0443\u0449\u0435\u0441\u0442\u0432\u0443\u044e\u0449\u0443\u044e \u0442\u0430\u0431\u043b\u0438\u0446\u0443 \u043d\u0430 lemmatize_de_v2 \u0438\u043b\u0438 lemmatize_de_v2_all, \u0438\u043d\u0434\u0435\u043a\u0441\u0438\u0440\u0443\u0435\u043c\u044b\u0435 \u0442\u0435\u0440\u043c\u044b \u0438\u0437\u043c\u0435\u043d\u044f\u0442\u0441\u044f, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 plain-\u0442\u0430\u0431\u043b\u0438\u0446\u0443 \u043d\u0443\u0436\u043d\u043e \u043f\u0435\u0440\u0435\u0441\u0442\u0440\u043e\u0438\u0442\u044c, \u0430 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u044b \u0432 RT-\u0442\u0430\u0431\u043b\u0438\u0446\u0443 \u2014 \u043f\u0435\u0440\u0435\u0438\u0433\u0440\u0430\u0442\u044c \u0437\u0430\u043d\u043e\u0432\u043e.\u0414\u043b\u044f authenticated BACKUP \u043f\u043e\u044f\u0432\u0438\u043b\u043e\u0441\u044c \u0434\u0435\u0439\u0441\u0442\u0432\u0438\u0435 \u0430\u0432\u0442\u043e\u0440\u0438\u0437\u0430\u0446\u0438\u0438 backup. \u041f\u0435\u0440\u0435\u0434 downgrade \u0434\u043e 29.3.12 \u0438\u043b\u0438 \u0431\u043e\u043b\u0435\u0435 \u0440\u0430\u043d\u043d\u0435\u0439 \u0432\u0435\u0440\u0441\u0438\u0438 \u043d\u0443\u0436\u043d\u043e \u0443\u0434\u0430\u043b\u0438\u0442\u044c \u0432\u0441\u0435 backup grants.Columnar-\u0430\u0442\u0440\u0438\u0431\u0443\u0442\u044b \u0442\u0435\u043f\u0435\u0440\u044c \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u044e\u0442 mmap \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e \u0432\u043c\u0435\u0441\u0442\u043e buffered file reads. \u0415\u0441\u043b\u0438 \u043d\u0443\u0436\u0435\u043d \u043f\u0440\u0435\u0436\u043d\u0438\u0439 \u0440\u0435\u0436\u0438\u043c \u0434\u043e\u0441\u0442\u0443\u043f\u0430, \u0437\u0430\u0434\u0430\u0439\u0442\u0435 access_columnar_attrs=&#8217;file&#8217; \u044f\u0432\u043d\u043e.\u0414\u043b\u0438\u043d\u043d\u044b\u0435 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u044b \u043c\u043e\u0433\u0443\u0442 \u0445\u0440\u0430\u043d\u0438\u0442\u044c \u0431\u043e\u043b\u044c\u0448\u0435 \u043e\u0434\u043d\u043e\u0433\u043e embedding\u0421\u0442\u0430\u0440\u044b\u0439 \u043f\u0443\u0442\u044c auto-embedding \u0441\u043e\u0437\u0434\u0430\u0432\u0430\u043b \u043e\u0434\u0438\u043d \u0432\u0435\u043a\u0442\u043e\u0440 \u043d\u0430 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442 \u0438 \u043e\u0431\u0440\u0435\u0437\u0430\u043b \u0442\u0435\u043a\u0441\u0442, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u043d\u0435 \u043f\u043e\u043c\u0435\u0449\u0430\u043b\u0441\u044f \u0432 \u043e\u043a\u043d\u043e \u0432\u0445\u043e\u0434\u0430 \u043c\u043e\u0434\u0435\u043b\u0438. \u0414\u043b\u044f \u0437\u0430\u0433\u043e\u043b\u043e\u0432\u043a\u043e\u0432 \u0438 \u043a\u043e\u0440\u043e\u0442\u043a\u0438\u0445 \u043e\u043f\u0438\u0441\u0430\u043d\u0438\u0439 \u044d\u0442\u043e \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442, \u043d\u043e \u0440\u0435\u043b\u0435\u0432\u0430\u043d\u0442\u043d\u044b\u0439 \u0430\u0431\u0437\u0430\u0446 \u0431\u043b\u0438\u0436\u0435 \u043a \u043a\u043e\u043d\u0446\u0443 \u0434\u043b\u0438\u043d\u043d\u043e\u0439 \u0441\u0442\u0430\u0442\u044c\u0438 \u043c\u043e\u0433 \u0432\u043e\u043e\u0431\u0449\u0435 \u043d\u0435 \u043f\u043e\u043f\u0430\u0441\u0442\u044c \u0432 \u0438\u043d\u0434\u0435\u043a\u0441.Manticore Search \u0442\u0435\u043f\u0435\u0440\u044c \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u0438\u0432\u0430\u0435\u0442 \u043f\u044f\u0442\u044c [\u0441\u0442\u0440\u0430\u0442\u0435\u0433\u0438\u0439 \u0440\u0430\u0437\u0431\u0438\u0435\u043d\u0438\u044f \u043d\u0430 chunks](https:\/\/mnt.cr\/go\/fCxeBGtruncate \u0441\u043e\u0445\u0440\u0430\u043d\u044f\u0435\u0442 \u043f\u0440\u0435\u0436\u043d\u0435\u0435 \u043f\u043e\u0432\u0435\u0434\u0435\u043d\u0438\u0435 \u0438 \u043e\u0441\u0442\u0430\u0451\u0442\u0441\u044f \u0441\u0442\u0440\u0430\u0442\u0435\u0433\u0438\u0435\u0439 \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e.mean \u0441\u0442\u0440\u043e\u0438\u0442 embedding \u0434\u043b\u044f \u043a\u0430\u0436\u0434\u043e\u0433\u043e chunk \u0438 \u0443\u0441\u0440\u0435\u0434\u043d\u044f\u0435\u0442 \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u044b \u0432 \u043e\u0434\u0438\u043d \u0432\u0435\u043a\u0442\u043e\u0440.fixed \u0440\u0430\u0437\u0431\u0438\u0432\u0430\u0435\u0442 \u0442\u0435\u043a\u0441\u0442 \u043d\u0430 \u043e\u043a\u043d\u0430 \u0444\u0438\u043a\u0441\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u043e\u0433\u043e \u0440\u0430\u0437\u043c\u0435\u0440\u0430 \u0432 \u0442\u043e\u043a\u0435\u043d\u0430\u0445.recursive \u043f\u0440\u0435\u0434\u043f\u043e\u0447\u0438\u0442\u0430\u0435\u0442 \u0433\u0440\u0430\u043d\u0438\u0446\u044b \u0430\u0431\u0437\u0430\u0446\u0435\u0432, \u0441\u0442\u0440\u043e\u043a, \u043f\u0440\u0435\u0434\u043b\u043e\u0436\u0435\u043d\u0438\u0439 \u0438 \u043f\u0440\u043e\u0431\u0435\u043b\u043e\u0432 \u0438\u043c\u0435\u043d\u043d\u043e \u0432 \u0442\u0430\u043a\u043e\u043c \u043f\u043e\u0440\u044f\u0434\u043a\u0435.sentence \u0433\u0440\u0443\u043f\u043f\u0438\u0440\u0443\u0435\u0442 \u043f\u043e\u043b\u043d\u044b\u0435 \u043f\u0440\u0435\u0434\u043b\u043e\u0436\u0435\u043d\u0438\u044f \u0434\u043e \u0437\u0430\u0434\u0430\u043d\u043d\u043e\u0433\u043e \u043b\u0438\u043c\u0438\u0442\u0430.Multi-vector \u0441\u0442\u0440\u0430\u0442\u0435\u0433\u0438\u0438 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u044e\u0442 [float_vector_array](https:\/\/mnt.cr\/go\/UuFwcw \u041a\u0430\u0436\u0434\u044b\u0439 chunk \u0443\u0447\u0430\u0441\u0442\u0432\u0443\u0435\u0442 \u0432 KNN-\u043f\u043e\u0438\u0441\u043a\u0435 \u043d\u0435\u0437\u0430\u0432\u0438\u0441\u0438\u043c\u043e, \u043d\u043e Manticore \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0430\u0435\u0442 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442 \u043e\u0434\u0438\u043d \u0440\u0430\u0437 \u0438 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442 \u0431\u043b\u0438\u0436\u0430\u0439\u0448\u0438\u0439 chunk \u0434\u043b\u044f knn_dist():CREATE TABLE articles (  title text,  content text,  chunks float_vector_array knn_type=&#8217;hnsw&#8217; hnsw_similarity=&#8217;cosine&#8217;    model_name=&#8217;Xenova\/all-MiniLM-L6-v2&#8242; from=&#8217;title,content&#8217;    chunk_strategy=&#8217;sentence&#8217; max_tokens=&#8217;256&#8242; overlap_tokens=&#8217;32&#8217;);INSERT INTO articles (id, title, content)VALUES (1, &#8216;Rotating certificates&#8217;, &#8216;A long guide with many sections &#8230;&#8217;);SELECT id, knn_dist()FROM articlesWHERE knn(chunks, 5, &#8216;how do I rotate a certificate&#8217;);MAX_TOKENS, OVERLAP_TOKENS \u0438 MAX_CHUNKS \u0443\u043f\u0440\u0430\u0432\u043b\u044f\u044e\u0442 \u0440\u0430\u0437\u043c\u0435\u0440\u043e\u043c chunk, \u043e\u0431\u0449\u0438\u043c \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u043e\u043c \u043d\u0430 \u0433\u0440\u0430\u043d\u0438\u0446\u0430\u0445 \u0438 \u043c\u0430\u043a\u0441\u0438\u043c\u0430\u043b\u044c\u043d\u044b\u043c \u043a\u043e\u043b\u0438\u0447\u0435\u0441\u0442\u0432\u043e\u043c \u0432\u0435\u043a\u0442\u043e\u0440\u043e\u0432. Model-backed float_vector_array \u043d\u0443\u0436\u043d\u043e \u043e\u0431\u044a\u044f\u0432\u043b\u044f\u0442\u044c \u043f\u0440\u0438 \u0441\u043e\u0437\u0434\u0430\u043d\u0438\u0438 \u0442\u0430\u0431\u043b\u0438\u0446\u044b: \u0434\u043e\u0431\u0430\u0432\u0438\u0442\u044c \u0435\u0433\u043e \u043f\u043e\u0437\u0436\u0435 \u0447\u0435\u0440\u0435\u0437 ALTER TABLE &#8230; ADD COLUMN \u0438 \u043f\u0435\u0440\u0435\u0441\u0442\u0440\u043e\u0438\u0442\u044c embeddings \u043f\u043e\u043a\u0430 \u043d\u0435\u043b\u044c\u0437\u044f.\u041e\u0433\u0440\u0430\u043d\u0438\u0447\u0435\u043d\u0438\u0435 \u043b\u043e\u043a\u0430\u043b\u044c\u043d\u043e\u0439 embedding-\u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0438\u041c\u043e\u0434\u0435\u043b\u0438 \u0441 \u0434\u043b\u0438\u043d\u043d\u044b\u043c \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u043e\u043c \u043c\u043e\u0433\u0443\u0442 \u0441\u0434\u0435\u043b\u0430\u0442\u044c \u043e\u0434\u0438\u043d \u0431\u043e\u043b\u044c\u0448\u043e\u0439 \u0432\u0445\u043e\u0434 \u043d\u0435\u043e\u0436\u0438\u0434\u0430\u043d\u043d\u043e \u0434\u043e\u0440\u043e\u0433\u0438\u043c, \u043e\u0441\u043e\u0431\u0435\u043d\u043d\u043e \u043d\u0430 CPU. \u041d\u043e\u0432\u0430\u044f \u043e\u043f\u0446\u0438\u044f \u043a\u043e\u043b\u043e\u043d\u043a\u0438 [MAX_INPUT_TOKENS](https:\/\/mnt.cr\/go\/zZvLPe \u043e\u0433\u0440\u0430\u043d\u0438\u0447\u0438\u0432\u0430\u0435\u0442 \u043e\u0431\u044a\u0451\u043c \u043a\u0430\u0436\u0434\u043e\u0433\u043e \u0432\u0445\u043e\u0434\u0430, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u043e\u0442\u043f\u0440\u0430\u0432\u043b\u044f\u0435\u0442\u0441\u044f \u0432 \u043b\u043e\u043a\u0430\u043b\u044c\u043d\u0443\u044e embedding-\u043c\u043e\u0434\u0435\u043b\u044c:ALTER TABLE articlesMODIFY COLUMN chunks MAX_INPUT_TOKENS=&#8217;512&#8242;;\u0418\u0437\u043c\u0435\u043d\u0435\u043d\u0438\u0435 \u043f\u0440\u0438\u043c\u0435\u043d\u044f\u0435\u0442\u0441\u044f \u043a embeddings, \u0441\u043e\u0437\u0434\u0430\u043d\u043d\u044b\u043c \u043f\u043e\u0441\u043b\u0435 \u044d\u0442\u043e\u0433\u043e; \u0441\u0443\u0449\u0435\u0441\u0442\u0432\u0443\u044e\u0449\u0438\u0435 \u0432\u0435\u043a\u0442\u043e\u0440\u044b \u043e\u0441\u0442\u0430\u044e\u0442\u0441\u044f \u043a\u0430\u043a \u0435\u0441\u0442\u044c. \u041e\u043f\u0446\u0438\u044e \u043c\u043e\u0436\u043d\u043e \u0437\u0430\u0434\u0430\u0442\u044c \u043f\u0440\u0438 CREATE TABLE \u0438\u043b\u0438 \u0438\u0437\u043c\u0435\u043d\u0438\u0442\u044c \u043f\u043e\u0437\u0436\u0435 \u0431\u0435\u0437 re-embedding \u0442\u0430\u0431\u043b\u0438\u0446\u044b. \u0417\u043d\u0430\u0447\u0435\u043d\u0438\u0435 0 \u0438\u043b\u0438 \u043e\u0442\u0441\u0443\u0442\u0441\u0442\u0432\u0438\u0435 \u043e\u043f\u0446\u0438\u0438 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442 \u0441\u043e\u0431\u0441\u0442\u0432\u0435\u043d\u043d\u044b\u0439 \u043b\u0438\u043c\u0438\u0442 \u043c\u043e\u0434\u0435\u043b\u0438.\u0412 \u044d\u0442\u043e\u043c \u0436\u0435 \u043d\u0430\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u0438\u0438 \u0438\u0441\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u044b \u0434\u0432\u0435 \u043c\u0435\u043d\u0435\u0435 \u0437\u0430\u043c\u0435\u0442\u043d\u044b\u0435 \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u044b: \u043c\u043e\u0434\u0435\u043b\u0438 \u0431\u043e\u043b\u044c\u0448\u0435 \u043d\u0435 \u043e\u0441\u0442\u0430\u044e\u0442\u0441\u044f \u0432 cache \u043f\u043e\u0441\u043b\u0435 \u0438\u0437\u043c\u0435\u043d\u0435\u043d\u0438\u044f embedding-\u043a\u043e\u043b\u043e\u043d\u043a\u0438, \u0430 \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u0438 \u0441 \u0440\u0430\u0437\u043d\u044b\u043c\u0438 API_TIMEOUT \u0438\u043b\u0438 MAX_INPUT_TOKENS \u0431\u043e\u043b\u044c\u0448\u0435 \u043d\u0435 \u0441\u0442\u0430\u043b\u043a\u0438\u0432\u0430\u044e\u0442\u0441\u044f \u0438 \u043d\u0435 \u043f\u0435\u0440\u0435\u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u044e\u0442 \u043d\u0435\u0432\u0435\u0440\u043d\u0443\u044e cached model.UTF-8 \u0438\u0434\u0435\u043d\u0442\u0438\u0444\u0438\u043a\u0430\u0442\u043e\u0440\u044b \u0438 \u043b\u0443\u0447\u0448\u0435\u0435 \u0441\u043e\u043f\u043e\u0441\u0442\u0430\u0432\u043b\u0435\u043d\u0438\u0435 \u043d\u0435\u043c\u0435\u0446\u043a\u0438\u0445 \u0441\u043b\u043e\u0432\u0418\u043c\u0435\u043d\u0430 \u0442\u0430\u0431\u043b\u0438\u0446, \u043f\u043e\u043b\u0435\u0439 \u0438 \u0430\u0442\u0440\u0438\u0431\u0443\u0442\u043e\u0432 \u0442\u0435\u043f\u0435\u0440\u044c \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u044e\u0442 \u0435\u0434\u0438\u043d\u044b\u0439 [\u0431\u0435\u0437\u043e\u043f\u0430\u0441\u043d\u044b\u0439 \u0441\u0438\u043d\u0442\u0430\u043a\u0441\u0438\u0441 UTF-8 \u0438\u0434\u0435\u043d\u0442\u0438\u0444\u0438\u043a\u0430\u0442\u043e\u0440\u043e\u0432](https:\/\/mnt.cr\/go\/6un5co RT, percolate, distributed, template \u0438 plain tables \u043c\u043e\u0433\u0443\u0442 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c \u043b\u043e\u043a\u0430\u043b\u0438\u0437\u043e\u0432\u0430\u043d\u043d\u044b\u0435 \u0438\u043c\u0435\u043d\u0430, \u043d\u0430\u043f\u0440\u0438\u043c\u0435\u0440 \u043a\u0438\u0442\u0430\u0439\u0441\u043a\u0438\u0435 \u0438\u043b\u0438 \u043a\u0438\u0440\u0438\u043b\u043b\u0438\u0447\u0435\u0441\u043a\u0438\u0435 \u0438\u0434\u0435\u043d\u0442\u0438\u0444\u0438\u043a\u0430\u0442\u043e\u0440\u044b, \u0432 DDL, \u0432\u044b\u0440\u0430\u0436\u0435\u043d\u0438\u044f\u0445, field selectors \u0438 inferred source schemas.\u041d\u0435\u043c\u0435\u0446\u043a\u0430\u044f AOT-\u043c\u043e\u0440\u0444\u043e\u043b\u043e\u0433\u0438\u044f \u043f\u043e\u043b\u0443\u0447\u0438\u043b\u0430 \u043e\u043f\u0446\u0438\u043e\u043d\u0430\u043b\u044c\u043d\u0443\u044e \u043d\u043e\u0440\u043c\u0430\u043b\u0438\u0437\u0430\u0446\u0438\u044e sharp-s. \u0421 charset_table=non_cont,german \u0438 morphology=lemmatize_de_v2 \u0438\u043b\u0438 lemmatize_de_v2_all \u0444\u043e\u0440\u043c\u044b \u0432\u0440\u043e\u0434\u0435 Stra\u00dfe, Strasse \u0438 STRA\u1e9eE \u0441\u043e\u0432\u043f\u0430\u0434\u0430\u044e\u0442 \u0432 ordinary whole-word searches. \u0415\u0441\u043b\u0438 \u0432\u043a\u043b\u044e\u0447\u0451\u043d index_exact_words=1, exact-word queries \u0432\u0441\u0451 \u0435\u0449\u0451 \u043c\u043e\u0433\u0443\u0442 \u0440\u0430\u0437\u043b\u0438\u0447\u0430\u0442\u044c \u0444\u043e\u0440\u043c\u044b \u00df \u0438 ss.\u0423\u043b\u0443\u0447\u0448\u0435\u043d\u0438\u044f load testing \u0438 backup[manticore-load](https:\/\/mnt.cr\/go\/sdBXEJ \u0442\u0435\u043f\u0435\u0440\u044c \u043c\u043e\u0436\u0435\u0442 \u0437\u0430\u043f\u0443\u0441\u043a\u0430\u0442\u044c benchmark \u0447\u0435\u0440\u0435\u0437 HTTP JSON API \u0441 &#8212;http. \u0417\u0430\u043f\u0438\u0441\u0438 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u044e\u0442 \/bulk, \u043f\u043e\u0438\u0441\u043a\u0438 \u2014 \/search, \u0430 &#8212;table \u0432\u044b\u0431\u0438\u0440\u0430\u0435\u0442 \u0446\u0435\u043b\u0435\u0432\u0443\u044e \u0442\u0430\u0431\u043b\u0438\u0446\u0443. \u041e\u0442\u0447\u0451\u0442\u044b \u0442\u0435\u043f\u0435\u0440\u044c \u0432\u043a\u043b\u044e\u0447\u0430\u044e\u0442 RSS \u043b\u043e\u043a\u0430\u043b\u044c\u043d\u043e\u0433\u043e searchd \u0432\u043e \u0432\u0440\u0435\u043c\u044f \u0437\u0430\u043f\u0443\u0441\u043a\u0430, \u0430 \u0442\u0430\u043a\u0436\u0435 peak RSS, disk \u0438 CPU statistics \u0432 \u043a\u043e\u043d\u0446\u0435, \u0432\u043a\u043b\u044e\u0447\u0430\u044f aggregate monitoring \u0434\u043b\u044f multi-command workloads.[Manticore Backup](https:\/\/mnt.cr\/go\/2yXrq7 \u0442\u0435\u043f\u0435\u0440\u044c \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u0441 authenticated Manticore Search installations \u0447\u0435\u0440\u0435\u0437 username\/password \u0438\u043b\u0438 bearer-token credentials. SQL [BACKUP](https:\/\/mnt.cr\/go\/eqvadg \u043f\u043e\u043b\u0443\u0447\u0438\u043b \u043e\u0442\u0434\u0435\u043b\u044c\u043d\u043e\u0435 authorization action \u0438 \u043f\u0440\u043e\u0432\u0435\u0440\u044f\u0435\u0442 read access \u043a \u0432\u044b\u0431\u0440\u0430\u043d\u043d\u044b\u043c \u0442\u0430\u0431\u043b\u0438\u0446\u0430\u043c.S3 backups \u0438 restores \u0442\u0430\u043a\u0436\u0435 \u043c\u043e\u0433\u0443\u0442 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c AWS SDK credential provider chain, \u043a\u043e\u0433\u0434\u0430 static keys \u043d\u0435 \u0437\u0430\u0434\u0430\u043d\u044b. \u042d\u0442\u043e \u0432\u043a\u043b\u044e\u0447\u0430\u0435\u0442 IRSA, shared credentials, ECS task roles \u0438 EC2 instance profiles. Temporary credentials \u043c\u043e\u0433\u0443\u0442 \u0437\u0430\u0434\u0430\u0432\u0430\u0442\u044c AWS_SESSION_TOKEN.Columnar-\u0430\u0442\u0440\u0438\u0431\u0443\u0442\u044b \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u044e\u0442 mmap \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044eManticore Search \u0442\u0435\u043f\u0435\u0440\u044c \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e \u0441\u0442\u0430\u0432\u0438\u0442 [access_columnar_attrs](https:\/\/mnt.cr\/go\/6A7EpL \u0432 mmap. \u041e\u043f\u0435\u0440\u0430\u0446\u0438\u043e\u043d\u043d\u0430\u044f \u0441\u0438\u0441\u0442\u0435\u043c\u0430 \u043e\u0442\u043e\u0431\u0440\u0430\u0436\u0430\u0435\u0442 \u0438 \u043a\u044d\u0448\u0438\u0440\u0443\u0435\u0442 \u0444\u0430\u0439\u043b\u044b columnar-\u0430\u0442\u0440\u0438\u0431\u0443\u0442\u043e\u0432 *.spc \u043f\u043e \u0442\u0440\u0435\u0431\u043e\u0432\u0430\u043d\u0438\u044e, \u0431\u0435\u0437 \u043f\u0440\u0435\u0434\u0432\u0430\u0440\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0433\u043e \u0447\u0442\u0435\u043d\u0438\u044f \u0432\u0441\u0435\u0433\u043e \u0444\u0430\u0439\u043b\u0430 \u043d\u0430 \u0441\u0442\u0430\u0440\u0442\u0435. \u041f\u0440\u0435\u0436\u043d\u0438\u0439 buffered path \u043e\u0441\u0442\u0430\u0451\u0442\u0441\u044f \u0434\u043e\u0441\u0442\u0443\u043f\u0435\u043d \u0447\u0435\u0440\u0435\u0437 access_columnar_attrs=&#8217;file&#8217;.ALTER TABLE \u0442\u0430\u043a\u0436\u0435 \u043f\u0435\u0440\u0435\u043e\u0442\u043a\u0440\u044b\u0432\u0430\u0435\u0442 \u0437\u0430\u043c\u0435\u043d\u0451\u043d\u043d\u043e\u0435 columnar storage \u0441 \u043d\u0430\u0441\u0442\u0440\u043e\u0435\u043d\u043d\u044b\u043c \u0440\u0435\u0436\u0438\u043c\u043e\u043c \u0434\u043e\u0441\u0442\u0443\u043f\u0430, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 \u0438\u0437\u043c\u0435\u043d\u0451\u043d\u043d\u0430\u044f \u0442\u0430\u0431\u043b\u0438\u0446\u0430 \u0431\u043e\u043b\u044c\u0448\u0435 \u043d\u0435 \u043e\u0442\u043a\u0430\u0442\u044b\u0432\u0430\u0435\u0442\u0441\u044f \u043a \u0434\u0440\u0443\u0433\u043e\u043c\u0443 reader, \u043e\u0442\u043b\u0438\u0447\u043d\u043e\u043c\u0443 \u043e\u0442 \u0437\u0430\u043f\u0440\u043e\u0448\u0435\u043d\u043d\u043e\u0433\u043e.\u0418\u0441\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u0438\u044f vector \u0438 grouped search\u041d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0438\u0441\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u0438\u0439 \u043a\u0430\u0441\u0430\u044e\u0442\u0441\u044f \u0437\u0430\u043f\u0440\u043e\u0441\u043e\u0432, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0431\u044b\u043b\u0438 \u0432\u0430\u043b\u0438\u0434\u043d\u044b\u043c\u0438, \u043d\u043e \u043c\u043e\u0433\u043b\u0438 \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0430\u0442\u044c \u043d\u0435\u043f\u043e\u043b\u043d\u044b\u0435 \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u044b \u0438\u043b\u0438 \u043f\u0430\u0434\u0430\u0442\u044c \u043f\u0440\u0438 \u043e\u043f\u0440\u0435\u0434\u0435\u043b\u0451\u043d\u043d\u043e\u0439 \u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u0435 \u0442\u0430\u0431\u043b\u0438\u0446:Distributed \u0438 sharded KNN queries \u0441 local shard \u0431\u043e\u043b\u044c\u0448\u0435 \u043d\u0435 \u043f\u0435\u0440\u0435\u0441\u0447\u0438\u0442\u044b\u0432\u0430\u044e\u0442 merged 1-bit-quantized results \u0434\u0432\u0430\u0436\u0434\u044b, \u0447\u0442\u043e \u043c\u043e\u0433\u043b\u043e \u043f\u0440\u0438\u0432\u0435\u0441\u0442\u0438 \u043a crash coordinator \u0438\u043b\u0438 \u043d\u0435\u0432\u0435\u0440\u043d\u043e\u043c\u0443 nearest neighbor. ([Issue #4791](https:\/\/mnt.cr\/go\/iuOi6UKNN queries \u0441 \u0434\u043e\u043f\u043e\u043b\u043d\u0438\u0442\u0435\u043b\u044c\u043d\u044b\u043c\u0438 filters \u0438\u0437\u0431\u0435\u0433\u0430\u044e\u0442 \u043b\u0438\u0448\u043d\u0435\u0433\u043e knn_dist prefilter, \u043a\u043e\u0433\u0434\u0430 HNSW \u0443\u0436\u0435 \u0438\u0441\u043a\u043b\u044e\u0447\u0430\u0435\u0442 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u044b \u0431\u0435\u0437 \u0432\u0435\u043a\u0442\u043e\u0440\u043e\u0432. ([PR #4861](https:\/\/mnt.cr\/go\/UTI8PTLENGTH() \u0434\u043b\u044f float_vector_array \u0442\u0435\u043f\u0435\u0440\u044c \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0430\u0435\u0442 \u043a\u043e\u043b\u0438\u0447\u0435\u0441\u0442\u0432\u043e \u0432\u0435\u043a\u0442\u043e\u0440\u043e\u0432, \u0430 \u043d\u0435 \u0432\u043d\u0443\u0442\u0440\u0435\u043d\u043d\u0438\u0439 storage-word count. ([PR #4879](https:\/\/mnt.cr\/go\/he0eBcHybrid search \u0441 GROUP BY \u0441\u043e\u0445\u0440\u0430\u043d\u044f\u0435\u0442 \u0432\u0441\u0435 buckets, \u0432\u043a\u043b\u044e\u0447\u0430\u044f MVA groups, \u0438 \u0441\u043e\u0431\u043b\u044e\u0434\u0430\u0435\u0442 final \u0438 within-group ordering. ([Issue #4639](https:\/\/mnt.cr\/go\/W77QRMHybrid filters \u043f\u043e weight() \u0438 expressions \u0438\u043b\u0438 aliases, derived from it, \u0442\u0435\u043f\u0435\u0440\u044c \u0432\u044b\u043f\u043e\u043b\u043d\u044f\u044e\u0442\u0441\u044f \u043f\u043e\u0441\u043b\u0435 fusion \u043f\u043e \u0438\u0442\u043e\u0433\u043e\u0432\u043e\u043c\u0443 text weight, \u0430 \u043d\u0435 \u0438\u0433\u043d\u043e\u0440\u0438\u0440\u0443\u044e\u0442\u0441\u044f. Weight-dependent filters \u0432\u043d\u0443\u0442\u0440\u0438 OR trees \u043e\u0441\u0442\u0430\u044e\u0442\u0441\u044f \u043d\u0435\u043f\u043e\u0434\u0434\u0435\u0440\u0436\u0430\u043d\u043d\u044b\u043c\u0438 \u0438 \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0430\u044e\u0442 \u044f\u0432\u043d\u0443\u044e \u043e\u0448\u0438\u0431\u043a\u0443. ([Issue #4889](https:\/\/mnt.cr\/go\/VOf6QqMulti-chunk RT grouping \u0431\u043e\u043b\u044c\u0448\u0435 \u043d\u0435 \u0440\u0438\u0441\u043a\u0443\u0435\u0442 duplicate groups, \u043d\u0435\u0432\u0435\u0440\u043d\u044b\u043c\u0438 split counts \u0438\u043b\u0438 hang \u043f\u0440\u0438 ordering COUNT(DISTINCT &#8230;) results. ([Issue #4856](https:\/\/mnt.cr\/go\/fwDLRA\u0424\u0438\u043b\u044c\u0442\u0440\u044b \u043f\u043e document ID, signed representation \u043a\u043e\u0442\u043e\u0440\u044b\u0445 \u043e\u0442\u0440\u0438\u0446\u0430\u0442\u0435\u043b\u044c\u043d\u044b\u0439, \u0442\u0435\u043f\u0435\u0440\u044c \u0441\u043b\u0435\u0434\u0443\u044e\u0442 unsigned ordering lookup index. ([Issue #4774](https:\/\/mnt.cr\/go\/VPvgyV\u0422\u0430\u043a\u0436\u0435 \u0438\u0441\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u044b crash-\u0441\u0446\u0435\u043d\u0430\u0440\u0438\u0438: \u0432\u0442\u043e\u0440\u043e\u0439 hybrid-search statement \u0432 multi-statement request ([PR #4864](https:\/\/mnt.cr\/go\/i5Kymv, distributed JSON aggregation \u0441 \u0441\u043e\u0440\u0442\u0438\u0440\u043e\u0432\u043a\u043e\u0439 \u043f\u043e string attribute ([Issue #4822](https:\/\/mnt.cr\/go\/NCIurP \u0438 drop table \u0432\u043e \u0432\u0440\u0435\u043c\u044f auto-embedding precommit ([Issue #4860](https:\/\/mnt.cr\/go\/D22E3fBulk ingestion \u0441\u0442\u0430\u043b \u043f\u0440\u0435\u0434\u0441\u043a\u0430\u0437\u0443\u0435\u043c\u0435\u0435Elasticsearch-compatible \/_bulk requests \u0442\u0435\u043f\u0435\u0440\u044c \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0430\u044e\u0442 HTTP 200 \u043f\u043e\u0441\u043b\u0435 \u043e\u0431\u0440\u0430\u0431\u043e\u0442\u043a\u0438 batch, \u0430 \u043e\u0442\u0434\u0435\u043b\u044c\u043d\u044b\u0435 \u043e\u0448\u0438\u0431\u043a\u0438 \u043e\u0441\u0442\u0430\u044e\u0442\u0441\u044f \u0432\u0438\u0434\u043d\u044b \u0447\u0435\u0440\u0435\u0437 errors: true \u0438 per-item statuses. Duplicate create actions \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0430\u044e\u0442 per-item 409 version_conflict_engine_exception, \u0432\u043a\u043b\u044e\u0447\u0430\u044f \u0434\u0443\u0431\u043b\u0438\u043a\u0430\u0442\u044b \u0432\u043d\u0443\u0442\u0440\u0438 \u043e\u0434\u043d\u043e\u0433\u043e batch. \u042d\u0442\u043e \u043d\u0435 \u0434\u0430\u0451\u0442 \u043a\u043b\u0438\u0435\u043d\u0442\u0430\u043c \u0432\u0440\u043e\u0434\u0435 Fluent Bit \u043f\u043e\u0432\u0442\u043e\u0440\u044f\u0442\u044c \u0437\u0430\u043f\u0438\u0441\u0438, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0443\u0436\u0435 \u0443\u0441\u043f\u0435\u0448\u043d\u043e \u043f\u0440\u043e\u0448\u043b\u0438.Fixed-length gzip-compressed \/bulk bodies \u0442\u0435\u043f\u0435\u0440\u044c \u043a\u043e\u0440\u0440\u0435\u043a\u0442\u043d\u043e \u0434\u0435\u043a\u043e\u0434\u0438\u0440\u0443\u044e\u0442\u0441\u044f, \u0434\u0430\u0436\u0435 \u0435\u0441\u043b\u0438 \u043f\u0440\u0438\u0445\u043e\u0434\u044f\u0442 \u0447\u0435\u0440\u0435\u0437 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e socket reads. \u0410 \u0435\u0441\u043b\u0438 native bulk processing \u043f\u0430\u0434\u0430\u0435\u0442 \u0438\u0437-\u0437\u0430 \u043e\u0442\u0441\u0443\u0442\u0441\u0442\u0432\u0438\u044f \u0446\u0435\u043b\u0435\u0432\u043e\u0439 \u0442\u0430\u0431\u043b\u0438\u0446\u044b, request \u0441\u043d\u043e\u0432\u0430 \u043c\u043e\u0436\u0435\u0442 \u0434\u043e\u0439\u0442\u0438 \u0434\u043e auto-schema fallback Manticore \u0441 \u0432\u0430\u043b\u0438\u0434\u043d\u044b\u043c NDJSON \u0438 \u0441\u043e\u0445\u0440\u0430\u043d\u0438\u0442\u044c \u043e\u0436\u0438\u0434\u0430\u0435\u043c\u044b\u0439 bulk response envelope.\u0415\u0449\u0451 \u0438\u0441\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u0438\u044f \u043d\u0430\u0434\u0451\u0436\u043d\u043e\u0441\u0442\u0438\u041e\u0441\u0442\u0430\u043b\u044c\u043d\u0430\u044f \u0447\u0430\u0441\u0442\u044c \u0440\u0435\u043b\u0438\u0437\u0430 \u0437\u0430\u043a\u0440\u044b\u0432\u0430\u0435\u0442 \u0448\u0438\u0440\u043e\u043a\u0438\u0439 \u043d\u0430\u0431\u043e\u0440 operational \u0438 compatibility \u043f\u0440\u043e\u0431\u043b\u0435\u043c:searchd &#8212;stopwait \u0431\u043e\u043b\u044c\u0448\u0435 \u043d\u0435 \u0437\u0430\u0432\u0438\u0441\u0430\u0435\u0442, \u043f\u043e\u043a\u0430 sharded table rebalanced \u043f\u043e\u0441\u043b\u0435 \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0435\u043d\u0438\u044f node. ([Issue #3905](https:\/\/mnt.cr\/go\/jopxPb\u0421\u043e\u0432\u043c\u0435\u0441\u0442\u0438\u043c\u044b\u0435 \u0441\u0442\u0430\u0440\u044b\u0435 binlogs \u0431\u0435\u0437\u043e\u043f\u0430\u0441\u043d\u043e replay during upgrade, \u0430 completed RT chunks \u043f\u0443\u0431\u043b\u0438\u043a\u0443\u044e\u0442\u0441\u044f \u043f\u0435\u0440\u0435\u0434 clean shutdown. ([Issue #4808](https:\/\/mnt.cr\/go\/y6w4GH Fatal replay diagnostics \u0442\u0430\u043a\u0436\u0435 \u043d\u0430\u0437\u044b\u0432\u0430\u044e\u0442 \u043d\u0443\u0436\u043d\u044b\u0439 recovery flag. ([Issue #4811](https:\/\/mnt.cr\/go\/9w6uNoindexer \u0441\u043e\u0437\u0434\u0430\u0451\u0442 \u043e\u0442\u0441\u0443\u0442\u0441\u0442\u0432\u0443\u044e\u0449\u0438\u0435 parent directories \u0434\u043b\u044f plain-table paths, \u0435\u0441\u043b\u0438 \u0431\u043b\u0438\u0436\u0430\u0439\u0448\u0438\u0439 \u0441\u0443\u0449\u0435\u0441\u0442\u0432\u0443\u044e\u0449\u0438\u0439 parent writable. ([Issue #4793](https:\/\/mnt.cr\/go\/2AyJ8KUUID document IDs \u0431\u043e\u043b\u044c\u0448\u0435 \u043d\u0435 \u043f\u0440\u0438\u0432\u043e\u0434\u044f\u0442 \u043a \u043f\u0443\u0441\u0442\u044b\u043c stored text fields. ([Issue&#8230;<\/p>\n","protected":false},"author":1,"featured_media":0,"comment_status":"closed","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[],"tags":[],"class_list":["post-494424","post","type-post","status-publish","format-standard","hentry"],"_links":{"self":[{"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/posts\/494424","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=%2Fwp%2Fv2%2Fcomments&post=494424"}],"version-history":[{"count":0,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/posts\/494424\/revisions"}],"wp:attachment":[{"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=%2Fwp%2Fv2%2Fmedia&parent=494424"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=%2Fwp%2Fv2%2Fcategories&post=494424"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=%2Fwp%2Fv2%2Ftags&post=494424"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}