{"id":316027,"date":"2021-01-06T15:00:42","date_gmt":"2021-01-06T15:00:42","guid":{"rendered":"http:\/\/savepearlharbor.com\/?p=316027"},"modified":"-0001-11-30T00:00:00","modified_gmt":"-0001-11-29T21:00:00","slug":"","status":"publish","type":"post","link":"https:\/\/savepearlharbor.com\/?p=316027","title":{"rendered":"Apache Kafka \u0432 \u0432\u043e\u043f\u0440\u043e\u0441\u0430\u0445 \u0438 \u043e\u0442\u0432\u0435\u0442\u0430\u0445"},"content":{"rendered":"\n<div class=\"post__text post__text-html post__text_v1\" id=\"post-content-body\">\n<p>\u0427\u0442\u043e \u0442\u0430\u043a\u043e\u0435 Kafka? \u0413\u0434\u0435 \u0441\u0442\u043e\u0438\u0442, \u0430 \u0433\u0434\u0435 \u043d\u0435 \u0441\u0442\u043e\u0438\u0442 \u043f\u0440\u0438\u043c\u0435\u043d\u044f\u0442\u044c \u044d\u0442\u043e\u0442 \u0438\u043d\u0441\u0442\u0440\u0443\u043c\u0435\u043d\u0442? \u0427\u0435\u043c Kafka \u043e\u0442\u043b\u0438\u0447\u0430\u0435\u0442\u0441\u044f \u043e\u0442 RabbitMQ \u0438 \u0434\u0440\u0443\u0433\u0438\u0445 \u0431\u0440\u043e\u043a\u0435\u0440\u043e\u0432 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0439? \u041a\u0430\u043a \u0435\u0451 \u043f\u0440\u0430\u0432\u0438\u043b\u044c\u043d\u043e \u044d\u043a\u0441\u043f\u043b\u0443\u0430\u0442\u0438\u0440\u043e\u0432\u0430\u0442\u044c? \u0412\u0441\u0451 \u044d\u0442\u043e \u043e\u0431\u0441\u0443\u0434\u0438\u043b\u0438 \u043d\u0430 \u043c\u0438\u0442\u0430\u043f\u0435 \u00abApache Kafka \u0432 \u0432\u043e\u043f\u0440\u043e\u0441\u0430\u0445 \u0438 \u043e\u0442\u0432\u0435\u0442\u0430\u0445\u00bb, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0421\u043b\u0451\u0440\u043c \u043f\u0440\u043e\u0432\u0451\u043b \u0432 \u043d\u043e\u044f\u0431\u0440\u0435 2020. \u0412 \u0440\u0430\u0437\u0433\u043e\u0432\u043e\u0440\u0435 \u0443\u0447\u0430\u0441\u0442\u0432\u043e\u0432\u0430\u043b\u0438 \u0441\u043f\u0438\u043a\u0435\u0440\u044b \u0438\u0437 \u0410\u0432\u0438\u0442\u043e, Stripe, ITSumma \u0438 Confluent. \u0417\u0430\u043f\u0438\u0441\u044c \u043c\u0438\u0442\u0430\u043f\u0430 <a href=\"https:\/\/www.youtube.com\/watch?v=sQX6oUi2eQ4\">\u0434\u043e\u0441\u0442\u0443\u043f\u043d\u0430 \u043d\u0430 YouTube<\/a>, \u0430 \u0442\u0435\u043a\u0441\u0442\u043e\u0432\u0443\u044e \u0432\u0435\u0440\u0441\u0438\u044e \u0440\u0430\u0437\u0433\u043e\u0432\u043e\u0440\u0430 \u0447\u0438\u0442\u0430\u0439\u0442\u0435 \u043d\u0438\u0436\u0435.<\/p>\n<p>  <\/p>\n<p><img decoding=\"async\" src=\"https:\/\/habrastorage.org\/webt\/qa\/ec\/m1\/qaecm1cpxm58qqor5tnxaeqgkfe.jpeg\"><\/p>\n<p><a name=\"habracut\"><\/a>  <\/p>\n<h2 id=\"znakomstvo-so-spikerami\">\u0417\u043d\u0430\u043a\u043e\u043c\u0441\u0442\u0432\u043e \u0441\u043e \u0441\u043f\u0438\u043a\u0435\u0440\u0430\u043c\u0438<\/h2>\n<p>  <\/p>\n<p>\u041c\u0410\u0420\u0421\u0415\u041b\u042c \u0418\u0411\u0420\u0410\u0415\u0412: \u0421\u0435\u0433\u043e\u0434\u043d\u044f \u043c\u044b \u0433\u043e\u0432\u043e\u0440\u0438\u043c \u043e Kafka, \u043d\u043e \u043d\u0435 \u043f\u0440\u043e \u0444\u0438\u043b\u043e\u0441\u043e\u0444\u0438\u044e, \u0430 \u043f\u0440\u043e \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u0435. \u0423 \u043d\u0430\u0441 \u043e\u0447\u0435\u043d\u044c \u043a\u0440\u0443\u0442\u044b\u0435 \u0441\u043f\u0438\u043a\u0435\u0440\u044b, \u0440\u0430\u0437\u0440\u0435\u0448\u0438\u0442\u0435 \u043c\u043d\u0435 \u0438\u0445 \u043f\u0440\u0435\u0434\u0441\u0442\u0430\u0432\u0438\u0442\u044c \u0438 \u0441\u0440\u0430\u0437\u0443 \u0437\u0430\u0434\u0430\u0442\u044c \u043a\u0430\u0436\u0434\u043e\u043c\u0443 \u043f\u0440\u0438\u0432\u0435\u0442\u0441\u0442\u0432\u0435\u043d\u043d\u044b\u0439 \u0432\u043e\u043f\u0440\u043e\u0441: \u00ab\u043a\u0430\u043a\u043e\u0439 RPS \u043d\u0430 \u0432\u0430\u0448\u0435\u043c \u043f\u0440\u043e\u0435\u043a\u0442\u0435?\u00bb<\/p>\n<p>  <\/p>\n<p>\u0410\u043d\u0430\u0442\u043e\u043b\u0438\u0439 \u0421\u043e\u043b\u0434\u0430\u0442\u043e\u0432 \u2014 lead engineer \u0432 Avito, \u043c\u043d\u043e\u0433\u043e \u0440\u0430\u0431\u043e\u0442\u0430\u043b \u0441 \u0431\u0430\u0437\u0430\u043c\u0438 \u0434\u0430\u043d\u043d\u044b\u0445, Kafka, Zookeeper, ClickHouse \u0438 \u043c\u043d\u043e\u0433\u043e \u0432\u044b\u0441\u0442\u0443\u043f\u0430\u0435\u0442 \u043d\u0430 \u043c\u0438\u0442\u0430\u043f\u0430\u0445 \u0438 \u043a\u043e\u043d\u0444\u0435\u0440\u0435\u043d\u0446\u0438\u044f\u0445. \u0415\u0441\u043b\u0438 \u043d\u0435 \u0441\u0435\u043a\u0440\u0435\u0442, \u043a\u0430\u043a\u043e\u0439 RPS \u043d\u0430 \u0432\u0430\u0448\u0435\u043c \u043f\u0440\u043e\u0435\u043a\u0442\u0435?<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0423 \u043d\u0430\u0441 \u043e\u043a\u043e\u043b\u043e 600 RPS \u0438 \u043f\u043e\u0440\u044f\u0434\u043a\u0430 25 \u0413\u0431\/\u0441. \u042d\u0442\u043e \u0432 \u0441\u0443\u043c\u043c\u0435 \u0432\u0441\u0435 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0430.<\/p>\n<p>  <\/p>\n<p>\u041c\u0410\u0420\u0421\u0415\u041b\u042c \u0418\u0411\u0420\u0410\u0415\u0412: \u041e\u0433\u043e\u043d\u044c! \u0422\u0430\u043a\u0436\u0435 \u0441 \u043d\u0430\u043c\u0438 \u0410\u043b\u0435\u043a\u0441\u0430\u043d\u0434\u0440 \u041c\u0438\u0440\u043e\u043d\u043e\u0432, Infrastructure Engineer \u0438\u0437 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438 Stripe, \u0437\u0430\u043d\u0438\u043c\u0430\u0435\u0442\u0441\u044f \u0440\u0430\u0437\u0432\u0438\u0442\u0438\u0435\u043c \u0441\u0438\u0441\u0442\u0435\u043c\u044b CI, \u0440\u0430\u0431\u043e\u0442\u0430\u043b \u0432 \u0442\u0430\u043a\u0438\u0445 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u044f\u0445, \u043a\u0430\u043a \u00ab2\u0413\u0418\u0421\u00bb, Lingualeo \u0438 4 \u0433\u043e\u0434\u0430 \u0432\u043e\u0437\u0433\u043b\u0430\u0432\u043b\u044f\u043b \u0438\u043d\u0444\u0440\u0430\u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u043d\u0443\u044e \u043a\u043e\u043c\u0430\u043d\u0434\u0443 \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u043a\u0438 \u0441\u0435\u0440\u0432\u0438\u0441\u043e\u0432 \u0441\u0442\u0440\u0438\u043c\u0438\u043d\u0433\u0430 \u0434\u0430\u043d\u043d\u044b\u0445 \u0432 Booking.com. \u0418 \u044d\u0442\u043e \u043d\u0430\u043c \u043e \u0447\u0451\u043c-\u0442\u043e \u0434\u0430 \u0434\u043e\u043b\u0436\u043d\u043e \u0433\u043e\u0432\u043e\u0440\u0438\u0442\u044c: \u0441\u0442\u0440\u0438\u043c\u0438\u043d\u0433, \u0431\u043e\u043b\u044c\u0448\u0438\u0435 \u0434\u0430\u043d\u043d\u044b\u0435, \u0438 \u0432\u043e\u0442 \u044d\u0442\u043e \u0432\u043e\u0442 \u0432\u0441\u0435 \u043d\u0430\u0432\u0435\u0440\u043d\u044f\u043a\u0430 \u043a\u0430\u043a-\u0442\u043e \u0441\u0432\u044f\u0437\u0430\u043d\u043e. \u041f\u0440\u0430\u0432\u0438\u043b\u044c\u043d\u043e \u044f \u043f\u043e\u043d\u0438\u043c\u0430\u044e, \u0410\u043b\u0435\u043a\u0441\u0430\u043d\u0434\u0440? \u0418 \u043a\u0430\u043a\u043e\u0439 RPS?<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u0414\u0430, \u0442\u044b \u043f\u043e\u043d\u0438\u043c\u0430\u0435\u0448\u044c \u0432\u0441\u0435 \u0441\u043e\u0432\u0435\u0440\u0448\u0435\u043d\u043d\u043e \u043f\u0440\u0430\u0432\u0438\u043b\u044c\u043d\u043e, \u043d\u0430 \u0441\u0435\u0440\u0435\u0434\u0438\u043d\u0443 2020 \u0433\u043e\u0434\u0430 \u0432 Booking.com RPS \u043f\u043e\u043b\u0443\u0447\u0430\u043b\u043e\u0441\u044c \u043e\u043a\u043e\u043b\u043e 60 \u0413\u0431 \u0432\u0445\u043e\u0434\u044f\u0449\u0435\u0433\u043e \u0442\u0440\u0430\u0444\u0438\u043a\u0430 \u0438 \u043e\u043a\u043e\u043b\u043e 200 \u0413\u0431 \u0438\u0441\u0445\u043e\u0434\u044f\u0449\u0435\u0433\u043e, \u0432 \u043c\u0438\u043b\u043b\u0438\u043e\u043d\u0430\u0445 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0439 \u044f, \u0447\u0435\u0441\u0442\u043d\u043e \u0433\u043e\u0432\u043e\u0440\u044f, \u043d\u0435 \u043f\u043e\u043c\u043d\u044e. \u041d\u043e \u044d\u0442\u043e \u0434\u0435\u0441\u044f\u0442\u043a\u0438 \u043c\u0438\u043b\u043b\u0438\u043e\u043d\u043e\u0432 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0439 \u0432 \u0441\u0435\u043a\u0443\u043d\u0434\u0443.<\/p>\n<p>  <\/p>\n<p>\u041c\u0410\u0420\u0421\u0415\u041b\u042c \u0418\u0411\u0420\u0410\u0415\u0412: \u0421\u0443\u043f\u0435\u0440.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u041c\u044b, \u043a\u0441\u0442\u0430\u0442\u0438, \u0443 \u0440\u0435\u0431\u044f\u0442 \u0438\u0437 Booking.com \u0443\u0447\u0438\u043b\u0438\u0441\u044c. \u0423 \u043d\u0430\u0441 Kafka \u043f\u043e\u043c\u043e\u043b\u043e\u0436\u0435, \u0438 \u0421\u0430\u0448\u0430 \u043d\u0430\u043c \u043e\u0447\u0435\u043d\u044c \u0441\u0438\u043b\u044c\u043d\u043e \u043f\u043e\u043c\u043e\u0433\u0430\u043b \u0437\u0430\u0442\u0430\u0449\u0438\u0442\u044c \u0432\u0441\u0451 \u044d\u0442\u043e. \u0414\u0435\u043b\u0438\u043b\u0438\u0441\u044c \u043e\u043f\u044b\u0442\u043e\u043c.<\/p>\n<p>  <\/p>\n<p>\u041c\u0410\u0420\u0421\u0415\u041b\u042c \u0418\u0411\u0420\u0410\u0415\u0412: \u0414\u0430\u043b\u0435\u0435 \u0443 \u043d\u0430\u0441 \u0412\u0438\u043a\u0442\u043e\u0440 \u0413\u0430\u043c\u043e\u0432, Developer Advocate \u0432 Confluent. \u0421\u043f\u0435\u0446\u0438\u0430\u043b\u0438\u0437\u0438\u0440\u0443\u0435\u0442\u0441\u044f \u043d\u0430 \u043e\u0431\u0440\u0430\u0431\u043e\u0442\u043a\u0435 \u043f\u043e\u0442\u043e\u043a\u043e\u0432\u044b\u0445 \u0434\u0430\u043d\u043d\u044b\u0445 \u0441 \u043f\u043e\u043c\u043e\u0449\u044c\u044e Kafka. \u0422\u0430\u043a\u0436\u0435 \u0441\u043f\u0438\u043a\u0435\u0440 \u0440\u043e\u0441\u0441\u0438\u0439\u0441\u043a\u0438\u0445, \u043c\u0435\u0436\u0434\u0443\u043d\u0430\u0440\u043e\u0434\u043d\u044b\u0445 IT-\u043a\u043e\u043d\u0444\u0435\u0440\u0435\u043d\u0446\u0438\u0439.<\/p>\n<p>  <\/p>\n<p>\u0412\u0418\u041a\u0422\u041e\u0420 \u0413\u0410\u041c\u041e\u0412: \u0418 \u0441\u0442\u0440\u0438\u043c\u0435\u0440. \u0421\u0442\u0430\u043b \u0441\u0442\u0440\u0438\u043c\u0438\u0442\u044c, \u0432\u043e\u0442 \u0434\u043e \u0447\u0435\u0433\u043e \u0436\u0438\u0437\u043d\u044c \u0434\u043e\u0432\u0435\u043b\u0430! \u041d\u0430 \u043a\u043e\u043d\u0444\u0435\u0440\u0435\u043d\u0446\u0438\u0438 \u043d\u0435 \u043f\u0443\u0441\u043a\u0430\u044e\u0442, \u043f\u0440\u0438\u0445\u043e\u0434\u0438\u0442\u0441\u044f \u0441\u0442\u0440\u0438\u043c\u0438\u0442\u044c. \u0412\u0441\u0435\u043c \u043f\u0440\u0438\u0432\u0435\u0442! \u041a\u0430\u043a\u043e\u0439 RPS \u044f \u043d\u0435 \u0437\u043d\u0430\u044e, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e \u044f \u0431\u0435\u0437\u0434\u0435\u043b\u044c\u043d\u0438\u043a, \u043c\u0430\u0440\u043a\u0435\u0442\u043e\u043b\u043e\u0433, \u044f Kafka \u0442\u043e\u043b\u044c\u043a\u043e \u043f\u0440\u043e\u0434\u0430\u044e, \u043d\u0435 \u0437\u0430\u043c\u0435\u0440\u044f\u044e \u0435\u0451 \u0432\u0435\u0441. \u041d\u0430 \u0441\u0430\u043c\u043e\u043c \u0434\u0435\u043b\u0435, \u0443 \u043d\u0430\u0441 \u0441\u0432\u043e\u0439 Public Cloud, \u0438 \u0443 \u043d\u0430\u0441 \u0435\u0441\u0442\u044c \u0438 \u0431\u043e\u043b\u044c\u0448\u0438\u0435, \u0438 \u043c\u0430\u043b\u0435\u043d\u044c\u043a\u0438\u0435 \u043a\u043b\u0438\u0435\u043d\u0442\u044b. \u041d\u0435 \u043c\u043e\u0433\u0443 \u043a\u043e\u043d\u043a\u0440\u0435\u0442\u043d\u043e \u043e \u0446\u0438\u0444\u0440\u0430\u0445 \u0433\u043e\u0432\u043e\u0440\u0438\u0442\u044c, \u043d\u043e \u043a\u043b\u0430\u0443\u0434\u043d\u044b\u0439 \u0431\u0438\u0437\u043d\u0435\u0441 \u0440\u0430\u0441\u0442\u0435\u0442 \u0434\u043e\u0441\u0442\u0430\u0442\u043e\u0447\u043d\u043e \u0445\u043e\u0440\u043e\u0448\u043e, \u043b\u044e\u0434\u0438 \u043f\u0440\u0438\u0445\u043e\u0434\u044f\u0442 \u0437\u0430 managed-\u0440\u0435\u0448\u0435\u043d\u0438\u044f\u043c\u0438. \u0415\u0441\u0442\u044c SLA \u0434\u043e \u0442\u0440\u0435\u0445 \u0434\u0435\u0432\u044f\u0442\u043e\u043a, \u043d\u0435 \u0432\u0441\u0435\u0433\u0434\u0430 \u0434\u0435\u043b\u043e \u0432 RPS, \u0430 \u0435\u0449\u0435 \u0438\u043d\u043e\u0433\u0434\u0430 \u0438 \u0432 SLA, \u0438 \u0432 \u0434\u0440\u0443\u0433\u0438\u0445 \u0432\u0435\u0449\u0430\u0445, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0441\u0432\u044f\u0437\u0430\u043d\u044b \u0441 reliability, \u043d\u0435 \u0442\u043e\u043b\u044c\u043a\u043e \u0441\u043e \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u044c\u044e.<\/p>\n<p>  <\/p>\n<p>\u041c\u0410\u0420\u0421\u0415\u041b\u042c \u0418\u0411\u0420\u0410\u0415\u0412: \u041d\u0435 RPS \u0435\u0434\u0438\u043d\u044b\u043c.<\/p>\n<p>  <\/p>\n<p>\u0412\u0418\u041a\u0422\u041e\u0420 \u0413\u0410\u041c\u041e\u0412: \u0414\u0430.<\/p>\n<p>  <\/p>\n<p>\u041c\u0410\u0420\u0421\u0415\u041b\u042c \u0418\u0411\u0420\u0410\u0415\u0412: \u041d\u0443 \u0438 \u043d\u0430\u043a\u043e\u043d\u0435\u0446 \u0418\u0432\u0430\u043d \u0421\u0438\u0434\u043e\u0440\u043e\u0432, Chief Technology Innovation Officer \u0438\u0437 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438 ITSumma. \u0421\u0430\u043c\u043e\u0435 \u0438\u043d\u0442\u0435\u0440\u0435\u0441\u043d\u043e\u0435, \u0447\u0442\u043e \u0418\u0432\u0430\u043d \u043f\u0440\u043e\u0448\u0435\u043b \u043f\u0443\u0442\u044c \u043e\u0442 \u043f\u0440\u043e\u0441\u0442\u043e\u0433\u043e \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u0447\u0438\u043a\u0430 \u043a \u0430\u0440\u0445\u0438\u0442\u0435\u043a\u0442\u043e\u0440\u0443 \u0438 \u043e\u0431\u0440\u0430\u0442\u043d\u043e \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0440\u0430\u0437, \u0441\u043e\u0432\u043c\u0435\u0441\u0442\u0438\u0432 \u044d\u0442\u043e \u0441 \u043c\u0435\u043d\u0435\u0434\u0436\u043c\u0435\u043d\u0442\u043e\u043c. \u0411\u043e\u043b\u0435\u0435 \u0442\u043e\u0433\u043e, \u0432\u0434\u043e\u0445\u043d\u043e\u0432\u0438\u0432\u0448\u0438\u0441\u044c \u043a\u043d\u0438\u0433\u043e\u0439 \u043f\u043e Kafka, \u043e\u043d \u0438\u043d\u0438\u0446\u0438\u0438\u0440\u043e\u0432\u0430\u043b \u0441\u043e\u0437\u0434\u0430\u043d\u0438\u0435 \u0442\u0435\u0445\u043d\u0438\u0447\u0435\u0441\u043a\u043e\u0433\u043e \u0438\u0437\u0434\u0430\u0442\u0435\u043b\u044c\u0441\u0442\u0432\u0430 \u0432 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438. \u041a \u0418\u0432\u0430\u043d\u0443 \u0432\u043e\u043f\u0440\u043e\u0441 \u0442\u0430\u043a\u043e\u0439 \u0436\u0435: \u043a\u0430\u043a \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442\u0435 Kafka, \u043a\u0430\u043a\u0438\u0435 \u0435\u0441\u0442\u044c \u043c\u0430\u043a\u0441\u0438\u043c\u0430\u043b\u044c\u043d\u043e \u043d\u0430\u0433\u0440\u0443\u0436\u0435\u043d\u043d\u044b\u0435 \u043f\u0440\u043e\u0435\u043a\u0442\u044b? \u0415\u0441\u0442\u044c \u043b\u0438 \u0442\u0430\u043a\u0438\u0435 \u0434\u0430\u043d\u043d\u044b\u0435 \u0438 \u043c\u043e\u0436\u043d\u043e \u043b\u0438 \u0438\u0445 \u043e\u0437\u0432\u0443\u0447\u0438\u0442\u044c?<\/p>\n<p>  <\/p>\n<p>\u0418\u0412\u0410\u041d \u0421\u0418\u0414\u041e\u0420\u041e\u0412: \u041e\u0442\u0432\u0435\u0447\u0443 \u043d\u0435\u043c\u043d\u043e\u0433\u043e \u0443\u043a\u043b\u043e\u043d\u0447\u0438\u0432\u043e. \u041f\u043e \u0434\u043e\u043b\u0436\u043d\u043e\u0441\u0442\u0438 \u044f \u0438\u0441\u043f\u043e\u043b\u043d\u0438\u0442\u0435\u043b\u044c\u043d\u044b\u0439 \u0434\u0438\u0440\u0435\u043a\u0442\u043e\u0440 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438 \u0438 \u0437\u0430\u043d\u0438\u043c\u0430\u044e\u0441\u044c \u0432\u043d\u0435\u0434\u0440\u0435\u043d\u0438\u0435\u043c \u0440\u0430\u0437\u043b\u0438\u0447\u043d\u044b\u0445 \u0438\u043d\u043d\u043e\u0432\u0430\u0446\u0438\u0439, \u043c\u043e\u044f \u0440\u0430\u0431\u043e\u0442\u0430 \u2014 \u0443\u0437\u043d\u0430\u0432\u0430\u0442\u044c \u043f\u0440\u043e \u043d\u043e\u0432\u044b\u0435 \u0442\u0435\u0445\u043d\u043e\u043b\u043e\u0433\u0438\u0438, \u043f\u0440\u0438\u043c\u0435\u043d\u044f\u0442\u044c \u0438\u0445 \u0432 \u0441\u0432\u043e\u0435\u0439 \u0434\u0435\u044f\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u0438. \u041a\u043e\u043c\u043f\u0430\u043d\u0438\u044f \u0443 \u043d\u0430\u0441 \u0441\u0435\u0440\u0432\u0438\u0441\u043d\u0430\u044f, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 \u0441\u0432\u043e\u044f Kafka \u043d\u0430\u043c \u0435\u0441\u043b\u0438 \u0438 \u043d\u0443\u0436\u043d\u0430, \u0442\u043e \u0442\u043e\u043b\u044c\u043a\u043e \u043a\u0430\u043a\u0430\u044f-\u0442\u043e \u043a\u0430\u0440\u043c\u0430\u043d\u043d\u0430\u044f. \u041d\u043e \u043c\u044b \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u0438\u0432\u0430\u0435\u043c \u043e\u043a\u043e\u043b\u043e \u043f\u043e\u043b\u043e\u0432\u0438\u043d\u044b \u0420\u0443\u043d\u0435\u0442\u0430 \u043a\u0440\u0443\u043f\u043d\u043e\u0433\u043e \u0442\u043e\u0447\u043d\u043e, \u0438 Kafka \u043c\u044b \u0432\u0438\u0434\u0435\u043b\u0438 \u043e\u0447\u0435\u043d\u044c \u043c\u043d\u043e\u0433\u043e, \u0432 \u0440\u0430\u0437\u043d\u044b\u0445 \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044f\u0445, \u0432 \u0440\u0430\u0437\u043d\u044b\u0445 \u0432\u0430\u0440\u0438\u0430\u043d\u0442\u0430\u0445 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043d\u0438\u044f. \u0418 RPS \u0442\u0443\u0442 \u0441\u043e\u0432\u0435\u0440\u0448\u0435\u043d\u043d\u043e \u043d\u0435\u0432\u0430\u0436\u0435\u043d. \u0422\u0443\u0442 \u0432\u0430\u0436\u043d\u043e, \u043a\u0430\u043a \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442\u0441\u044f Kafka, \u0434\u043b\u044f \u0447\u0435\u0433\u043e \u043e\u043d\u0430 \u043d\u0443\u0436\u043d\u0430. \u041a\u043e\u043d\u043a\u0440\u0435\u0442\u043d\u044b\u0435 \u0446\u0438\u0444\u0440\u044b \u0441\u043a\u0430\u0437\u0430\u0442\u044c \u043d\u0435 \u043c\u043e\u0433\u0443, \u043d\u043e \u043e\u0447\u0435\u043d\u044c \u0431\u043e\u043b\u044c\u0448\u0438\u0435 \u0431\u044b\u0432\u0430\u044e\u0442 \u0442\u043e\u0436\u0435.<\/p>\n<p>  <\/p>\n<p>\u041c\u0410\u0420\u0421\u0415\u041b\u042c \u0418\u0411\u0420\u0410\u0415\u0412: \u0422\u0435\u043f\u0435\u0440\u044c, \u044f \u0434\u0443\u043c\u0430\u044e, \u043d\u0430\u0448\u0430 \u0443\u0432\u0430\u0436\u0430\u0435\u043c\u0430\u044f \u0430\u0443\u0434\u0438\u0442\u043e\u0440\u0438\u044f \u043f\u043e\u043d\u0438\u043c\u0430\u0435\u0442, \u0447\u0442\u043e \u043a\u043e\u043c\u043f\u0435\u0442\u0435\u043d\u0446\u0438\u0438 \u0443\u0447\u0430\u0441\u0442\u043d\u0438\u043a\u043e\u0432 \u0434\u043e\u0441\u0442\u0430\u0442\u043e\u0447\u043d\u043e \u0432\u044b\u0441\u043e\u043a\u0438. \u041e\u043f\u0440\u0435\u0434\u0435\u043b\u0435\u043d\u043d\u043e \u0431\u0443\u0434\u0435\u0442, \u043e \u0447\u0435\u043c \u043f\u043e\u0433\u043e\u0432\u043e\u0440\u0438\u0442\u044c.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0427\u0435\u043c \u0431\u043e\u043b\u044c\u0448\u0435 RPS, \u0442\u0435\u043c \u0432\u044b\u0448\u0435 \u043a\u043e\u043c\u043f\u0435\u0442\u0435\u043d\u0446\u0438\u044f. \u0421\u0430\u0448\u0430 \u0432\u044b\u0438\u0433\u0440\u0430\u043b \u0437\u0434\u0435\u0441\u044c, \u043c\u043d\u0435 \u043a\u0430\u0436\u0435\u0442\u0441\u044f.<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u041d\u0435, \u043d\u0443, Public Cloud \u043e\u0442 Confluent, \u044f \u0434\u0443\u043c\u0430\u044e, \u0432\u044b\u0438\u0433\u0440\u0430\u0435\u0442 \u0432 \u043b\u044e\u0431\u043e\u043c \u0441\u043b\u0443\u0447\u0430\u0435.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u041d\u0430\u0432\u0435\u0440\u043d\u043e\u0435, \u0434\u0430, \u0432\u044b\u0438\u0433\u0440\u0430\u0435\u0442.<\/p>\n<p>  <\/p>\n<p>\u041c\u0410\u0420\u0421\u0415\u041b\u042c \u0418\u0411\u0420\u0410\u0415\u0412: \u0421\u0430\u043c \u043f\u0440\u0438\u0434\u0443\u043c\u0430\u043b \u0442\u0430\u043a\u0443\u044e \u043b\u0438\u043d\u0435\u0439\u043a\u0443, \u0441\u0430\u043c \u0440\u0435\u0448\u0438\u043b.<\/p>\n<p>  <\/p>\n<p>\u0412\u0418\u041a\u0422\u041e\u0420 \u0413\u0410\u041c\u041e\u0412: \u0412\u043e\u0442 \u043c\u044b \u044d\u0442\u043e \u0438 \u0434\u0435\u043b\u0430\u0435\u043c. \u041f\u043e\u044f\u0432\u0438\u043b\u0430\u0441\u044c Kafka, \u0434\u0430\u0432\u0430\u0439\u0442\u0435 \u0438\u0437 \u043d\u0435\u0435 \u0441\u0434\u0435\u043b\u0430\u0435\u043c Kafka \u0434\u043b\u044f \u0432\u0441\u0435\u0433\u043e, \u0432\u043e\u0442. \u0423 \u043d\u0430\u0441 \u0442\u0435\u043f\u0435\u0440\u044c Kafka \u0434\u043b\u044f \u0432\u0441\u0435\u0433\u043e.<\/p>\n<p>  <\/p>\n<h2 id=\"chto-takoe-kafka\">\u0427\u0442\u043e \u0442\u0430\u043a\u043e\u0435 Kafka<\/h2>\n<p>  <\/p>\n<p>\u041c\u0410\u0420\u0421\u0415\u041b\u042c \u0418\u0411\u0420\u0410\u0415\u0412: \u041c\u043d\u043e\u0433\u043e \u0440\u0430\u0437 \u0437\u0432\u0443\u0447\u0430\u043b\u043e \u0441\u043b\u043e\u0432\u043e \u00abKafka\u00bb, \u0438 \u044f \u0431\u044b \u0445\u043e\u0442\u0435\u043b, \u0447\u0442\u043e\u0431\u044b \u043d\u0430\u0448\u0430 \u0430\u0443\u0434\u0438\u0442\u043e\u0440\u0438\u044f \u0432\u044b\u0448\u043b\u0430 \u043d\u0430 \u043e\u0434\u0438\u043d \u0443\u0440\u043e\u0432\u0435\u043d\u044c \u043f\u043e\u043d\u0438\u043c\u0430\u043d\u0438\u044f, \u0447\u0442\u043e \u0436\u0435 \u0442\u0430\u043a\u043e\u0435 Kafka \u0438 \u0447\u0435\u043c \u043e\u043d\u043e \u043d\u0435 \u044f\u0432\u043b\u044f\u0435\u0442\u0441\u044f. \u0412 \u043e\u043f\u0440\u0435\u0434\u0435\u043b\u0435\u043d\u0438\u044f\u0445 \u0447\u0430\u0441\u0442\u043e \u0432\u0441\u0442\u0440\u0435\u0447\u0430\u0435\u0442\u0441\u044f \u0442\u0430\u043a\u043e\u0435 \u0441\u043b\u043e\u0432\u043e, \u043a\u0430\u043a \u00ab\u0431\u0440\u043e\u043a\u0435\u0440 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0439\u00bb. \u0418 \u0434\u043b\u044f \u043c\u0435\u043d\u044f, \u0447\u0435\u043b\u043e\u0432\u0435\u043a\u0430 \u0440\u0435\u0444\u043b\u0435\u043a\u0441\u0438\u0440\u0443\u044e\u0449\u0435\u0433\u043e \u043f\u043e 2007 \u0433\u043e\u0434\u0443, \u044d\u0442\u043e \u0441\u043b\u043e\u0432\u043e\u0441\u043e\u0447\u0435\u0442\u0430\u043d\u0438\u0435 \u0432\u044b\u0437\u044b\u0432\u0430\u0435\u0442 \u0430\u0441\u0441\u043e\u0446\u0438\u0430\u0446\u0438\u0438 \u0441 Jabber, ICQ \u0438 \u043f\u0440\u043e\u0447\u0438\u043c. \u0412\u0441\u0435-\u0442\u0430\u043a\u0438 \u0445\u043e\u0447\u0435\u0442\u0441\u044f \u043f\u043e\u043d\u044f\u0442\u044c, \u0447\u0442\u043e \u0436\u0435 \u0442\u0430\u043a\u043e\u0435 \u043d\u0430 \u0441\u0430\u043c\u043e\u043c \u0434\u0435\u043b\u0435 Kafka \u0438 \u0434\u043b\u044f \u0447\u0435\u0433\u043e \u043e\u043d\u0430 \u043f\u0440\u0435\u0434\u043d\u0430\u0437\u043d\u0430\u0447\u0435\u043d\u0430.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0414\u0430\u0432\u0430\u0439\u0442\u0435 \u043f\u043e \u0432\u0430\u0440\u0438\u0430\u043d\u0442\u0430\u043c, \u0447\u0442\u043e\u0431\u044b \u0431\u044b\u043b\u043e \u0438\u043d\u0442\u0435\u0440\u0435\u0441\u043d\u0435\u0435. \u042d\u0442\u043e \u043b\u043e\u0433, \u044d\u0442\u043e \u0441\u0442\u0440\u0438\u043c\u0438\u043d\u0433\u043e\u0432\u0430\u044f \u043f\u043b\u0430\u0442\u0444\u043e\u0440\u043c\u0430, \u044d\u0442\u043e \u0431\u0430\u0437\u0430 \u0434\u0430\u043d\u043d\u044b\u0445, \u0441\u0432\u043e\u0439 \u0432\u0430\u0440\u0438\u0430\u043d\u0442?<\/p>\n<p>  <\/p>\n<p>\u0412\u0418\u041a\u0422\u041e\u0420 \u0413\u0410\u041c\u041e\u0412: \u0421\u0432\u043e\u0439 \u0432\u0430\u0440\u0438\u0430\u043d\u0442. \u0412 \u043a\u043d\u0438\u0436\u043a\u0435 \u043e\u0442 \u0411\u0435\u043d\u0430 \u0421\u0442\u043e\u0444\u0444\u0435\u0434\u0430 \u0435\u0441\u0442\u044c \u0437\u0430\u043c\u0435\u0447\u0430\u0442\u0435\u043b\u044c\u043d\u0430\u044f \u043c\u0435\u0442\u0430\u0444\u043e\u0440\u0430: \u0441\u043b\u0435\u043f\u044b\u0435 \u0432\u0441\u0442\u0440\u0435\u0442\u0438\u043b\u0438 \u0441\u043b\u043e\u043d\u0430 \u0438 \u043d\u0430\u0447\u0430\u043b\u0438 \u0435\u0433\u043e \u043e\u0449\u0443\u043f\u044b\u0432\u0430\u0442\u044c. \u0418 \u0432 \u0437\u0430\u0432\u0438\u0441\u0438\u043c\u043e\u0441\u0442\u0438 \u043e\u0442 \u0442\u043e\u0433\u043e, \u0447\u0442\u043e \u043e\u043d\u0438 \u0442\u0440\u043e\u0433\u0430\u043b\u0438, \u0443 \u0432\u0441\u0435\u0445 \u0441\u043a\u043b\u0430\u0434\u044b\u0432\u0430\u043b\u043e\u0441\u044c \u043e\u043f\u0440\u0435\u0434\u0435\u043b\u0435\u043d\u043d\u043e\u0435 \u0432\u043f\u0435\u0447\u0430\u0442\u043b\u0435\u043d\u0438\u0435. \u041a\u0442\u043e-\u0442\u043e \u043f\u043e\u0442\u0440\u043e\u0433\u0430\u043b \u0437\u0430 \u0445\u0432\u043e\u0441\u0442 \u0438 \u043f\u043e\u0434\u0443\u043c\u0430\u043b, \u0447\u0442\u043e \u044d\u0442\u043e \u043e\u043f\u043e\u0441\u0441\u0443\u043c. \u041a\u0442\u043e-\u0442\u043e \u043f\u043e\u0442\u0440\u043e\u0433\u0430\u043b \u0437\u0430 \u0445\u043e\u0431\u043e\u0442 \u0438 \u043f\u043e\u0434\u0443\u043c\u0430\u043b, \u0447\u0442\u043e \u044d\u0442\u043e \u0443\u0434\u0430\u0432. \u041a\u0442\u043e-\u0442\u043e \u043f\u043e\u0442\u0440\u043e\u0433\u0430\u043b \u0437\u0430 \u043a\u043e\u0436\u0443 \u0438 \u0432\u043e\u043e\u0431\u0449\u0435 \u043d\u0438\u0447\u0435\u0433\u043e \u043d\u0435 \u043f\u043e\u043d\u044f\u043b. \u0422\u0430\u043a\u0430\u044f \u0436\u0435 \u0438\u0441\u0442\u043e\u0440\u0438\u044f \u0438 \u0441 Kafka. \u0412\u0441\u0435 \u0437\u0430\u0432\u0438\u0441\u0438\u0442 \u043e\u0442 \u0442\u043e\u0433\u043e, \u043e\u0442\u043a\u0443\u0434\u0430 \u0432\u044b \u043f\u0440\u0438\u0448\u043b\u0438, \u043e\u0442 \u0432\u0430\u0448\u0435\u0433\u043e \u0438\u0437\u043d\u0430\u0447\u0430\u043b\u044c\u043d\u043e\u0433\u043e \u043e\u043f\u044b\u0442\u0430 \u0438 \u0442\u043e\u0433\u043e, \u043a\u0430\u043a \u0432\u044b \u0435\u0435 \u043d\u0430\u0447\u0430\u043b\u0438 \u0442\u0440\u043e\u0433\u0430\u0442\u044c. \u0422\u043e\u043b\u044f \u0434\u0430\u043b \u0432\u0430\u0440\u0438\u0430\u043d\u0442\u044b: \u043b\u043e\u0433, \u0441\u0442\u0440\u0438\u043c\u0438\u043d\u0433\u043e\u0432\u0430\u044f \u043f\u043b\u0430\u0442\u0444\u043e\u0440\u043c\u0430, \u0431\u0430\u0437\u0430 \u0434\u0430\u043d\u043d\u044b\u0445? \u042f \u0441\u043a\u0430\u0436\u0443 \u0442\u0430\u043a \u2014 \u044d\u0442\u043e \u0432\u0441\u0451. \u041f\u043e\u043f\u0440\u043e\u0431\u0443\u0439\u0442\u0435 \u043f\u0435\u0440\u0435\u0443\u0431\u0435\u0434\u0438\u0442\u044c \u043c\u0435\u043d\u044f.<\/p>\n<p>  <\/p>\n<p>\u0421 Kafka \u0438\u043d\u0442\u0435\u0440\u0435\u0441\u043d\u0430\u044f \u0438\u0441\u0442\u043e\u0440\u0438\u044f. \u041c\u043e\u0436\u043d\u043e \u0441\u043a\u0430\u0437\u0430\u0442\u044c, \u0447\u0442\u043e \u043f\u0440\u0438\u0448\u043b\u0438 \u043c\u0430\u0440\u043a\u0435\u0442\u043e\u043b\u043e\u0433\u0438 \u0438 \u0437\u0430\u0441\u0442\u0430\u0432\u0438\u043b\u0438 \u043d\u0430\u0441 \u0434\u0443\u043c\u0430\u0442\u044c, \u0447\u0442\u043e Kafka \u2014 \u044d\u0442\u043e \u0442\u0430\u043a\u0430\u044f \u043f\u0430\u043d\u0430\u0446\u0435\u044f \u043e\u0442 \u0432\u0441\u0435\u0433\u043e. \u041d\u0430 \u0441\u0430\u043c\u043e\u043c \u0434\u0435\u043b\u0435, Kafka \u043f\u043e\u044f\u0432\u0438\u043b\u0430\u0441\u044c \u0438\u0437 \u043e\u0434\u043d\u043e\u0439 \u043f\u0440\u043e\u0441\u0442\u043e\u0439 \u0438\u0434\u0435\u0438. \u042d\u0442\u0430 \u0438\u0434\u0435\u044f \u043d\u0435 \u043d\u043e\u0432\u0430, \u043d\u043e \u0435\u0451 \u0440\u0435\u0448\u0438\u043b\u0438 \u0432\u044b\u043a\u0430\u0442\u0438\u0442\u044c \u0432 \u043f\u0435\u0440\u0432\u044b\u0439 \u0440\u044f\u0434. \u042d\u0442\u043e \u0438\u0434\u0435\u044f \u043b\u043e\u0433\u0430, \u0438 \u043e\u043d\u0430 \u0432\u0441\u0435\u0433\u0434\u0430 \u043f\u0440\u0438\u0441\u0443\u0442\u0441\u0442\u0432\u043e\u0432\u0430\u043b\u0430 \u0432 \u043b\u044e\u0431\u043e\u0439 \u0441\u0438\u0441\u0442\u0435\u043c\u0435, \u0433\u0434\u0435 \u0435\u0441\u0442\u044c \u043f\u0435\u0440\u0441\u0438\u0441\u0442\u0435\u043d\u0442\u043d\u043e\u0441\u0442\u044c, \u0431\u0443\u0434\u044c \u0442\u043e \u0431\u0430\u0437\u0430 \u0434\u0430\u043d\u043d\u044b\u0445 \u0438\u043b\u0438 \u0441\u0438\u0441\u0442\u0435\u043c\u0430 \u043e\u0431\u043c\u0435\u043d\u0430 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u044f\u043c\u0438. \u041b\u043e\u0433 \u2014 \u044d\u0442\u043e \u043f\u0440\u043e\u0441\u0442\u0430\u044f \u0438\u0434\u0435\u044f: \u0443 \u0442\u0435\u0431\u044f \u0435\u0441\u0442\u044c \u0444\u0430\u0439\u043b\u0438\u043a, \u0442\u044b \u0432 \u043d\u0435\u0433\u043e \u043f\u0438\u0448\u0435\u0448\u044c \u043f\u0440\u043e\u0441\u0442\u043e \u0432 \u043a\u043e\u043d\u0435\u0446 \u0438 \u0447\u0438\u0442\u0430\u0435\u0448\u044c \u0441 \u043d\u0430\u0447\u0430\u043b\u0430. \u042d\u0442\u0443 \u0438\u0434\u0435\u044e \u0438\u043c\u043f\u043b\u0435\u043c\u0435\u043d\u0442\u0438\u0440\u043e\u0432\u0430\u043b\u0438 \u0441\u0430\u043c\u0438 \u043d\u0435 \u0440\u0430\u0437 \u0440\u0443\u043a\u0430\u043c\u0438. \u041f\u043e\u044d\u0442\u043e\u043c\u0443, \u043a\u043e\u0433\u0434\u0430 \u043f\u0440\u0438\u0445\u043e\u0434\u0438\u0442 \u0441\u043b\u0435\u043f\u043e\u0439 (\u0438\u0437 \u0442\u043e\u0439 \u043c\u0435\u0442\u0430\u0444\u043e\u0440\u044b), \u044d\u043a\u0441\u043f\u0435\u0440\u0442 \u0438\u0437 \u043c\u0438\u0440\u0430 \u043e\u0447\u0435\u0440\u0435\u0434\u0435\u0439, \u043e\u043d \u0441\u043c\u043e\u0442\u0440\u0438\u0442: \u043d\u0443, \u044d\u0442\u043e \u0436\u0435 \u043e\u0447\u0435\u0440\u0435\u0434\u044c! \u041c\u044b \u0436\u0435 \u043f\u0438\u0448\u0435\u043c \u0432 \u043a\u043e\u043d\u0435\u0446 \u0438 \u0447\u0438\u0442\u0430\u0435\u043c \u0438\u0437 \u043d\u0430\u0447\u0430\u043b\u0430. \u042d\u0442\u043e \u0436\u0435 \u043e\u0447\u0435\u0440\u0435\u0434\u044c. \u0417\u043d\u0430\u0447\u0438\u0442, \u043c\u0435\u0441\u0441\u0435\u0434\u0436\u0438\u043d\u0433, \u043f\u0440\u0430\u0432\u0438\u043b\u044c\u043d\u043e? \u041f\u0440\u0430\u0432\u0438\u043b\u044c\u043d\u043e.<\/p>\n<p>  <\/p>\n<p>\u0414\u0430\u043b\u044c\u0448\u0435 \u043f\u0440\u0438\u0445\u043e\u0434\u0438\u0442 \u0447\u0435\u043b\u043e\u0432\u0435\u043a \u0438\u0437 \u043c\u0438\u0440\u0430 \u0431\u0430\u0437 \u0434\u0430\u043d\u043d\u044b\u0445 \u0438 \u0433\u043e\u0432\u043e\u0440\u0438\u0442: \u043f\u043e\u0433\u043e\u0434\u0438\u0442\u0435, \u043d\u043e \u043c\u044b \u0436\u0435 \u0432 Kafka \u0434\u0430\u043d\u043d\u044b\u0435 \u0440\u0430\u0437\u043c\u0430\u0437\u044b\u0432\u0430\u0435\u043c \u043f\u043e \u0431\u0440\u043e\u043a\u0435\u0440\u0430\u043c. \u0422\u0430\u043c \u0435\u0441\u0442\u044c \u043f\u0430\u0440\u0442\u0438\u0446\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u0435, \u0442\u0430\u043c \u0435\u0441\u0442\u044c consistent hashing, \u043a\u043e\u0433\u0434\u0430 \u043c\u044b \u043f\u043e \u043a\u0430\u043a\u043e\u043c\u0443-\u0442\u043e \u043a\u043b\u044e\u0447\u0443 \u0432\u044b\u043d\u0438\u043c\u0430\u0435\u043c, \u043f\u043e \u0437\u043d\u0430\u0447\u0435\u043d\u0438\u044e \u0437\u043d\u0430\u0435\u043c, \u043a\u0443\u0434\u0430 \u043a\u043b\u0430\u0441\u0442\u044c. \u041a\u043e\u0433\u0434\u0430 \u043a\u043b\u0438\u0435\u043d\u0442\u0443 \u043d\u0435 \u043d\u0430\u0434\u043e \u0438\u043c\u0435\u0442\u044c \u043a\u0430\u043a\u043e\u0433\u043e-\u0442\u043e \u0432\u043d\u0435\u0448\u043d\u0435\u0433\u043e load balancer, \u0447\u0442\u043e\u0431\u044b \u0434\u043e\u0433\u043e\u0432\u043e\u0440\u0438\u0442\u044c\u0441\u044f. \u042d\u0442\u043e \u0436\u0435 \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0435\u043b\u0435\u043d\u043d\u0430\u044f \u0431\u0430\u0437\u0430 \u0434\u0430\u043d\u043d\u044b\u0445, \u044d\u0442\u043e \u0436\u0435 NoSQL \u0432\u043e \u0432\u0441\u0435 \u043f\u043e\u043b\u044f. \u041f\u043b\u044e\u0441, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e \u0442\u0430\u043c \u0435\u0441\u0442\u044c persistence, \u044d\u0442\u043e \u0442\u043e\u0447\u043d\u043e \u0431\u0430\u0437\u0430 \u0434\u0430\u043d\u043d\u044b\u0445.<\/p>\n<p>  <\/p>\n<p>\u041f\u043e\u0442\u043e\u043c \u043f\u0440\u0438\u0445\u043e\u0434\u044f\u0442 \u043b\u044e\u0434\u0438 \u0438\u0437 \u043c\u0438\u0440\u0430 ESB (enterprise service bus) \u0438 \u0433\u043e\u0432\u043e\u0440\u044f\u0442: \u043d\u0443, \u0442\u0430\u043c \u0436\u0435 \u0435\u0441\u0442\u044c \u043a\u043e\u043d\u043d\u0435\u043a\u0442\u043e\u0440\u044b, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u044e\u0442 \u043d\u0430\u043c \u043f\u0435\u0440\u0435\u0442\u0430\u0441\u043a\u0438\u0432\u0430\u0442\u044c \u0434\u0430\u043d\u043d\u044b\u0435 \u043e\u0442\u0441\u044e\u0434\u0430 \u0441\u044e\u0434\u0430. \u042d\u0442\u043e \u0436 ESB! \u0415\u0441\u0442\u044c \u043d\u0435\u0431\u043e\u043b\u044c\u0448\u043e\u0439 \u043a\u043e\u043d\u043d\u0435\u043a\u0442\u043e\u0440, \u043d\u0430 \u043a\u043e\u043d\u043d\u0435\u043a\u0442\u043e\u0440\u0435 \u0435\u0441\u0442\u044c \u043a\u0430\u043a\u0438\u0435-\u0442\u043e \u043e\u043f\u0440\u0435\u0434\u0435\u043b\u0435\u043d\u043d\u044b\u0435 SMT (single message transforms), \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u044e\u0442 \u0440\u0430\u0443\u0442\u0438\u0442\u044c \u0432 \u043c\u0438\u043d\u0438\u043c\u0430\u043b\u044c\u043d\u043e\u043c \u043e\u0431\u044a\u0435\u043c\u0435. \u0422\u043e\u0447\u043d\u043e ESB!<\/p>\n<p>  <\/p>\n<p>\u041f\u043e\u043b\u0443\u0447\u0430\u0435\u0442\u0441\u044f \u043d\u0435\u0440\u0430\u0437\u0431\u0435\u0440\u0438\u0445\u0430. \u041f\u043e\u044d\u0442\u043e\u043c\u0443 \u0440\u0435\u0448\u0438\u043b\u0438 \u043e\u0441\u0442\u0430\u043d\u043e\u0432\u0438\u0442\u044c\u0441\u044f \u043d\u0430 \u0442\u0430\u043a\u043e\u043c \u043e\u043f\u0440\u0435\u0434\u0435\u043b\u0435\u043d\u0438\u0438, \u043a\u0430\u043a <strong>Event Streaming Platform \u2014 \u043f\u043b\u0430\u0442\u0444\u043e\u0440\u043c\u0430 \u0434\u043b\u044f \u0437\u0430\u0445\u0432\u0430\u0442\u0430 \u0438 \u043e\u0431\u0440\u0430\u0431\u043e\u0442\u043a\u0438 \u0441\u0442\u0440\u0438\u043c\u043e\u0432, \u043f\u043e\u0442\u043e\u043a\u043e\u0432 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0439, \u043f\u043e\u0442\u043e\u043a\u043e\u0432 \u0441\u043e\u0431\u044b\u0442\u0438\u0439.<\/strong> \u0421\u043e\u0431\u044b\u0442\u0438\u0435 \u2014 \u044d\u0442\u043e \u043a\u0430\u043a\u0430\u044f-\u0442\u043e \u0438\u043c\u043c\u0443\u0442\u0430\u0431\u0435\u043b\u044c\u043d\u0430\u044f \u0437\u0430\u043f\u0438\u0441\u044c, \u043a\u043e\u0442\u043e\u0440\u0430\u044f \u043d\u0435 \u043c\u0435\u043d\u044f\u0435\u0442\u0441\u044f, \u0438 \u0432 \u0438\u0434\u0435\u0430\u043b\u0435 \u043f\u043e\u0441\u0442\u043e\u044f\u043d\u043d\u043e \u043b\u0435\u0436\u0438\u0442 \u0432 Kafka.<\/p>\n<p>  <\/p>\n<p>\u0418\u0412\u0410\u041d \u0421\u0418\u0414\u041e\u0420\u041e\u0412: \u0414\u043e\u043f\u043e\u043b\u043d\u044e. \u0422\u044b \u043f\u0435\u0440\u0435\u0447\u0438\u0441\u043b\u0438\u043b \u043c\u043d\u043e\u0433\u043e \u043f\u0440\u0438\u043c\u0435\u043d\u0435\u043d\u0438\u0439, \u0430 \u0435\u0441\u043b\u0438 \u0443 \u043d\u0430\u0441 \u0437\u0430\u043c\u0435\u0448\u0430\u043d\u044b \u0434\u0430\u0442\u0447\u0438\u043a\u0438, \u0442\u043e \u044d\u0442\u043e \u0443\u0436\u0435 IoT \u2014 \u0438\u043d\u0442\u0435\u0440\u043d\u0435\u0442 \u0432\u0435\u0449\u0435\u0439. Kafka \u0442\u043e\u0436\u0435 \u0442\u0430\u043c! \u0410 \u0432\u043e\u043e\u0431\u0449\u0435, \u044d\u0442\u043e \u0442\u0430\u043a\u0430\u044f \u0436\u0435 \u043a\u0430\u0442\u0435\u0433\u043e\u0440\u0438\u044f, \u043a\u0430\u043a \u043e\u043f\u0435\u0440\u0430\u0446\u0438\u043e\u043d\u043d\u0430\u044f \u0441\u0438\u0441\u0442\u0435\u043c\u0430. \u0427\u0442\u043e \u0434\u0435\u043b\u0430\u0435\u0442 \u043e\u043f\u0435\u0440\u0430\u0446\u0438\u043e\u043d\u043d\u0430\u044f \u0441\u0438\u0441\u0442\u0435\u043c\u0430? \u0412\u0441\u0435 \u0447\u0442\u043e \u0443\u0433\u043e\u0434\u043d\u043e. Kafka \u2014 \u044d\u0442\u043e \u0441\u0438\u0441\u0442\u0435\u043c\u0430 \u0434\u043b\u044f \u0440\u0430\u0431\u043e\u0442\u044b \u0441 \u0434\u0430\u043d\u043d\u044b\u043c\u0438. \u0421\u043e\u043e\u0442\u0432\u0435\u0442\u0441\u0442\u0432\u0435\u043d\u043d\u043e, \u0432 \u043a\u0430\u043a\u043e\u043c \u043a\u043e\u043d\u0442\u0435\u043a\u0441\u0442\u0435 \u0435\u0451 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u044e\u0442, \u0442\u0430\u043a\u0438\u0435 \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e\u0441\u0442\u0438 \u043e\u043d\u0430 \u0438 \u043f\u0440\u0435\u0434\u043e\u0441\u0442\u0430\u0432\u043b\u044f\u0435\u0442.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0414\u0430, \u0435\u0449\u0435 \u0437\u0430\u0431\u044b\u043b \u0432\u0430\u0440\u0438\u0430\u043d\u0442 \u00ab\u0442\u0440\u0443\u0431\u0430\u00bb. \u0418 \u0435\u0449\u0451 \u0432\u043e\u043f\u0440\u043e\u0441: \u0432\u0441\u0442\u0440\u0435\u0447\u0430\u043b\u0438 \u043b\u0438 \u0432\u044b \u0441\u0435\u0442\u0430\u043f\u044b, \u0433\u0434\u0435 Kafka \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442\u0441\u044f \u043a\u0430\u043a \u0431\u0430\u0437\u0430 \u0434\u0430\u043d\u043d\u044b\u0445 \u0441\u0430\u043c\u043e\u0441\u0442\u043e\u044f\u0442\u0435\u043b\u044c\u043d\u043e? \u0411\u0435\u0437 \u0432\u0441\u044f\u043a\u0438\u0445 PostgreSQL, MongoDB \u0438 \u0442\u0430\u043a \u0434\u0430\u043b\u0435\u0435. \u0412\u043e\u0442 \u0435\u0441\u0442\u044c \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u0435, \u0435\u0441\u0442\u044c Kafka, \u0438 \u0431\u043e\u043b\u044c\u0448\u0435 \u043d\u0438\u0447\u0435\u0433\u043e \u043d\u0435\u0442.<\/p>\n<p>  <\/p>\n<p>\u0418\u0412\u0410\u041d \u0421\u0418\u0414\u041e\u0420\u041e\u0412: \u041c\u044b \u2014 \u0434\u0430.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0422\u043e \u0435\u0441\u0442\u044c, \u0442\u0430\u043a\u0438\u0435 \u043a\u0435\u0439\u0441\u044b \u0432\u043f\u043e\u043b\u043d\u0435 \u0441\u0435\u0431\u0435 \u0435\u0441\u0442\u044c?<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u0414\u0430, \u0432\u0441\u0442\u0440\u0435\u0447\u0430\u043b\u0438.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0410 \u0441 ksqlDB \u0447\u0442\u043e-\u0442\u043e \u0442\u0430\u043a\u043e\u0435 \u0443\u0436\u0435 \u043f\u0440\u043e\u0431\u043e\u0432\u0430\u043b\u0438, \u0447\u0442\u043e\u0431\u044b \u044d\u0442\u043e \u0431\u044b\u043b\u0430 \u043f\u043e\u043b\u043d\u043e\u0446\u0435\u043d\u043d\u0430\u044f \u0437\u0430\u043c\u0435\u043d\u0430 \u0440\u0435\u0430\u043b\u044c\u043d\u043e\u0439 \u0431\u0430\u0437\u0435 \u0434\u0430\u043d\u043d\u044b\u0445: \u0441 \u0438\u043d\u0434\u0435\u043a\u0441\u0430\u043c\u0438, \u0441 \u0441\u0435\u043b\u0435\u043a\u0442\u0438\u0432\u043d\u044b\u043c\u0438 \u0437\u0430\u043f\u0440\u043e\u0441\u0430\u043c\u0438, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u043c\u043e\u0433\u0443\u0442 \u0445\u043e\u0434\u0438\u0442\u044c \u0432 \u043f\u0440\u043e\u0448\u043b\u043e\u0435?<\/p>\n<p>  <\/p>\n<p>\u0418\u0412\u0410\u041d \u0421\u0418\u0414\u041e\u0420\u041e\u0412: \u041a\u0435\u0439\u0441\u044b, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0432\u0438\u0434\u0435\u043b\u0438 \u043c\u044b, \u0431\u044b\u043b\u0438 \u0447\u0435\u043c-\u0442\u043e \u0432\u0440\u043e\u0434\u0435 \u0445\u0440\u0430\u043d\u0438\u043b\u0438\u0449\u0430 \u043b\u043e\u0433\u043e\u0432. \u0421\u043b\u043e\u0436\u043d\u044b\u0435 \u0437\u0430\u043f\u0440\u043e\u0441\u044b \u043d\u0435 \u043d\u0443\u0436\u043d\u044b \u0431\u044b\u043b\u0438.<\/p>\n<p>  <\/p>\n<p>\u0412\u0418\u041a\u0422\u041e\u0420 \u0413\u0410\u041c\u041e\u0412: \u0412 \u0447\u0430\u0442\u0435 \u043f\u0438\u0448\u0443\u0442, \u0447\u0442\u043e \u044f \u0435\u0449\u0435 \u0437\u0430\u0431\u044b\u043b \u0441\u0430\u043c\u044b\u0439 \u043f\u0440\u0430\u0432\u0438\u043b\u044c\u043d\u044b\u0439 \u044e\u0437\u043a\u0435\u0439\u0441, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 Kafka \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442 \u2014 RPS \u0441\u0442\u0440\u043e\u0438\u0442\u044c \u043f\u043e\u0432\u0435\u0440\u0445 \u043d\u0435\u0435.<\/p>\n<p>  <\/p>\n<p>\u0418\u0412\u0410\u041d \u0421\u0418\u0414\u041e\u0420\u041e\u0412: \u0410 \u0447\u0435\u043c \u043e\u043d \u043e\u0442\u043b\u0438\u0447\u0430\u0435\u0442\u0441\u044f \u043e\u0442 ESB, \u043d\u0430\u043f\u0440\u0438\u043c\u0435\u0440?<\/p>\n<p>  <\/p>\n<p>\u041c\u0410\u0420\u0421\u0415\u041b\u042c \u0418\u0411\u0420\u0410\u0415\u0412: \u0412\u0441\u0435 \u0437\u0430\u0432\u0438\u0441\u043b\u0438 \u043d\u0430\u0434 \u0442\u0432\u043e\u0438\u043c \u0432\u043e\u043f\u0440\u043e\u0441\u043e\u043c.<\/p>\n<p>  <\/p>\n<p>\u0412\u0418\u041a\u0422\u041e\u0420 \u0413\u0410\u041c\u041e\u0412: \u041d\u0430\u043a\u0440\u0443\u0447\u0438\u0432\u0430\u0435\u0448\u044c, \u043d\u0430\u043a\u0440\u0443\u0447\u0438\u0432\u0430\u0435\u0448\u044c, \u0438 \u043f\u043e\u043b\u0443\u0447\u0430\u0435\u0442\u0441\u044f \u0441\u0431\u043e\u0440\u043a\u0430 \u0442\u043e\u0433\u043e, \u0447\u0442\u043e \u0442\u0435\u0431\u0435 \u043d\u0443\u0436\u043d\u043e. \u0413\u043e\u0434\u0430 \u0442\u0440\u0438 \u043d\u0430\u0437\u0430\u0434 \u0431\u044b\u043b\u0430 <a href=\"https:\/\/open.nytimes.com\/publishing-with-apache-kafka-at-the-new-york-times-7f0e3b7d2077\">\u0441\u0442\u0430\u0442\u044c\u044f \u043e\u0442 The New York Times<\/a> \u043e \u0442\u043e\u043c, \u043a\u0430\u043a \u043e\u043d\u0438 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u044e\u0442 Kafka \u0432 \u043a\u0430\u0447\u0435\u0441\u0442\u0432\u0435 \u0445\u0440\u0430\u043d\u0438\u043b\u0438\u0449\u0430. \u041d\u043e \u0443 \u043d\u0438\u0445 \u0442\u0430\u043a\u043e\u0435, \u043a\u0430\u043d\u043e\u043d\u0438\u0447\u0435\u0441\u043a\u043e\u0435 \u0445\u0440\u0430\u043d\u0438\u043b\u0438\u0449\u0435 \u2014 \u0438\u0441\u0442\u043e\u0447\u043d\u0438\u043a \u0438\u043d\u0444\u043e\u0440\u043c\u0430\u0446\u0438\u0438, \u0438\u0437 \u043a\u043e\u0442\u043e\u0440\u043e\u0433\u043e \u0432\u0441\u0435 \u0437\u0430\u0431\u0438\u0440\u0430\u044e\u0442 \u0438 \u043f\u043e\u0442\u043e\u043c \u043a\u0430\u043a\u0438\u043c-\u0442\u043e \u043e\u0431\u0440\u0430\u0437\u043e\u043c \u043c\u043e\u0434\u0438\u0444\u0438\u0446\u0438\u0440\u0443\u044e\u0442. \u0422\u0443\u0442 \u043d\u0443\u0436\u043d\u0430 \u0421MS, \u043e\u043d\u0430 \u0432\u0441\u0435 \u044d\u0442\u043e \u0432\u044b\u0447\u0438\u0442\u0430\u0435\u0442 \u0438 \u0432 \u043a\u0430\u043a\u0438\u0435-\u0442\u043e \u0444\u043e\u0440\u043c\u0430\u0442\u044b \u043e\u0431\u0435\u0440\u043d\u0451\u0442, \u0447\u0442\u043e\u0431\u044b \u043e\u0442\u0440\u0438\u0441\u043e\u0432\u0430\u0442\u044c \u044d\u0442\u043e \u0432\u0441\u0451 \u043d\u0430 \u044d\u043a\u0440\u0430\u043d\u0435. \u0415\u0441\u043b\u0438 \u044d\u0442\u043e \u0441\u0438\u0441\u0442\u0435\u043c\u0430 \u043a\u0430\u0442\u0430\u043b\u043e\u0433\u0438\u0437\u0430\u0446\u0438\u0438, \u043e\u043d\u0430 Kafka \u0431\u0435\u0440\u0451\u0442 \u043a\u0430\u043a \u0438\u0441\u0445\u043e\u0434\u043d\u0438\u043a, \u0430 \u043f\u043e\u0432\u0435\u0440\u0445 \u0441\u0442\u0440\u043e\u0438\u0442 \u043a\u0430\u043a\u043e\u0439-\u0442\u043e \u0438\u043d\u0434\u0435\u043a\u0441.<\/p>\n<p>  <\/p>\n<p>\u0412 \u0447\u0430\u0442\u0435 \u043f\u0438\u0448\u0443\u0442, \u0447\u0442\u043e Kafka \u2014 \u044d\u0442\u043e \u0432\u0438\u043d\u0435\u0433\u0440\u0435\u0442. Kafka \u044d\u0442\u043e Kafka.<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u0422\u0430\u043a\u043e\u0435 \u043a\u043e\u043b\u0438\u0447\u0435\u0441\u0442\u0432\u043e \u0441\u043f\u043e\u0441\u043e\u0431\u043e\u0432 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043d\u0438\u044f \u0441\u0438\u0441\u0442\u0435\u043c\u044b, \u0432 \u043e\u0447\u0435\u0440\u0435\u0434\u043d\u043e\u0439 \u0440\u0430\u0437 \u043f\u043e\u0434\u0447\u0435\u0440\u043a\u0438\u0432\u0430\u0435\u0442, \u0447\u0442\u043e \u043f\u0435\u0440\u0435\u0434 \u0442\u0435\u043c \u043a\u0430\u043a \u043d\u0430\u0447\u0438\u043d\u0430\u0442\u044c \u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c\u0441\u044f Kafka, \u0432\u0430\u043c \u043d\u0443\u0436\u043d\u043e \u0447\u0451\u0442\u043a\u043e \u043f\u043e\u043d\u0438\u043c\u0430\u0442\u044c, \u0447\u0442\u043e \u0438\u043c\u0435\u043d\u043d\u043e \u0432\u044b \u043e\u0442 \u043d\u0435\u0451 \u043e\u0436\u0438\u0434\u0430\u0435\u0442\u0435, \u043a\u0430\u043a\u0443\u044e \u043f\u043e\u043b\u044c\u0437\u0443 \u0434\u043b\u044f \u0431\u0438\u0437\u043d\u0435\u0441\u0430 \u0432\u044b \u043f\u043b\u0430\u043d\u0438\u0440\u0443\u0435\u0442\u0435 \u0438\u0437\u0432\u043b\u0435\u0447\u044c. \u0411\u0443\u0434\u044c \u0442\u043e open source Kafka \u0438\u043b\u0438 managed-\u0440\u0435\u0448\u0435\u043d\u0438\u044f \u0432\u0440\u043e\u0434\u0435 Confluent, \u0438 \u0442\u0430\u043a \u0434\u0430\u043b\u0435\u0435.<\/p>\n<p>  <\/p>\n<p>\u041c\u043e\u0436\u0435\u0442 \u0431\u044b\u0442\u044c, \u0432\u044b \u0445\u043e\u0442\u0438\u0442\u0435 \u043e\u0431\u0440\u0430\u0431\u0430\u0442\u044b\u0432\u0430\u0442\u044c \u0434\u0430\u043d\u043d\u044b\u0435 \u0438 \u043f\u043e\u043b\u0443\u0447\u0430\u0442\u044c \u0440\u0435\u043f\u043e\u0440\u0442\u044b \u0434\u043b\u044f \u0432\u0430\u0448\u0438\u0445 \u0430\u043d\u0430\u043b\u0438\u0442\u0438\u043a\u043e\u0432 \u0432 \u0440\u0435\u0430\u043b\u044c\u043d\u043e\u043c \u0432\u0440\u0435\u043c\u0435\u043d\u0438, \u0430 \u043d\u0435 \u0447\u0435\u0440\u0435\u0437 \u0441\u0443\u0442\u043a\u0438 \u2014 \u044d\u0442\u043e \u043e\u0434\u0438\u043d \u0441\u043f\u043e\u0441\u043e\u0431 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043d\u0438\u044f. \u0418\u043b\u0438, \u043c\u043e\u0436\u0435\u0442 \u0431\u044b\u0442\u044c, \u043a\u0430\u043a \u0432 Times, \u0432\u044b \u0445\u043e\u0442\u0438\u0442\u0435 \u0441\u043e\u0445\u0440\u0430\u043d\u0438\u0442\u044c \u0432\u0441\u044e \u0438\u0441\u0442\u043e\u0440\u0438\u044e \u0438\u0437\u043c\u0435\u043d\u0435\u043d\u0438\u0439 \u0432\u0430\u0448\u0435\u0439 \u0431\u0430\u0437\u044b \u0434\u0430\u043d\u043d\u044b\u0445. \u0412\u043e\u0437\u043c\u043e\u0436\u043d\u043e \u043b\u0438 \u044d\u0442\u043e \u0434\u043b\u044f \u0432\u0430\u0448\u0435\u0433\u043e \u044e\u0437\u043a\u0435\u0439\u0441, \u0440\u0430\u0437\u0443\u043c\u0435\u0435\u0442\u0441\u044f, \u043d\u0435\u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e \u0437\u0430\u0440\u0430\u043d\u0435\u0435 \u043e\u0442\u0432\u0435\u0442\u0438\u0442\u044c, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e \u0443 Times, \u0432\u0441\u0435 \u0442\u043e\u043f\u0438\u043a\u0438 \u0437\u0430\u043d\u0438\u043c\u0430\u043b\u0438 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0442\u0435\u0440\u0430\u0431\u0430\u0439\u0442, \u043f\u043e-\u043c\u043e\u0435\u043c\u0443, \u0430 \u0435\u0441\u043b\u0438 \u0443 \u0432\u0430\u0441 \u043f\u0435\u0442\u0430\u0431\u0430\u0439\u0442\u044b \u0434\u0430\u043d\u043d\u044b\u0445, \u0432\u0430\u043c \u043d\u0430\u0432\u0435\u0440\u043d\u044f\u043a\u0430 \u0431\u0443\u0434\u0435\u0442 \u043d\u0430\u043c\u043d\u043e\u0433\u043e \u0441\u043b\u043e\u0436\u043d\u0435\u0435 \u044d\u0442\u043e \u0441\u0434\u0435\u043b\u0430\u0442\u044c.<\/p>\n<p>  <\/p>\n<p>\u0412\u0418\u041a\u0422\u041e\u0420 \u0413\u0410\u041c\u041e\u0412: \u041d\u043e \u0432\u0441\u0435 \u0435\u0449\u0451 \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e, \u0435\u0441\u0442\u044c \u0441\u043f\u043e\u0441\u043e\u0431\u044b.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0412\u043e\u0437\u043c\u043e\u0436\u043d\u043e-\u0442\u043e \u0432\u0441\u0451, \u0432\u043e\u043f\u0440\u043e\u0441 \u0437\u0434\u0440\u0430\u0432\u043e\u0433\u043e \u0441\u043c\u044b\u0441\u043b\u0430.<\/p>\n<p>  <\/p>\n<p>\u0412\u0418\u041a\u0422\u041e\u0420 \u0413\u0410\u041c\u041e\u0412: \u042d\u0442\u043e \u0441\u0430\u043c\u043e\u0435 \u0433\u043b\u0430\u0432\u043d\u043e\u0435. \u0421\u043f\u0430\u0441\u0438\u0431\u043e, \u0447\u0442\u043e \u0435\u0441\u0442\u044c \u0422\u043e\u043b\u0438\u043a, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u043f\u0440\u0438\u0445\u043e\u0434\u0438\u0442 \u0438 \u0433\u043e\u0432\u043e\u0440\u0438\u0442 \u043f\u0440\u0430\u0432\u0438\u043b\u044c\u043d\u044b\u0435 \u043c\u044b\u0441\u043b\u0438. \u0412\u043e\u043f\u0440\u043e\u0441 \u043d\u0435 \u0432 RPS, \u0430 \u0432 \u0437\u0434\u0440\u0430\u0432\u043e\u043c \u0441\u043c\u044b\u0441\u043b\u0435.<\/p>\n<p>  <\/p>\n<p>\u041c\u0410\u0420\u0421\u0415\u041b\u042c \u0418\u0411\u0420\u0410\u0415\u0412: \u041f\u043e\u043b\u0443\u0447\u0430\u0435\u0442\u0441\u044f, Kafka \u2014 \u044d\u0442\u043e \u0434\u0435\u0439\u0441\u0442\u0432\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u043a\u043e\u043c\u0431\u0430\u0439\u043d, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0441\u043e\u0447\u0435\u0442\u0430\u0435\u0442 \u0432 \u0441\u0435\u0431\u0435 \u0440\u0430\u0437\u043b\u0438\u0447\u043d\u0443\u044e \u0444\u0443\u043d\u043a\u0446\u0438\u043e\u043d\u0430\u043b\u044c\u043d\u043e\u0441\u0442\u044c. \u042d\u0442\u043e \u043c\u043e\u0436\u0435\u0442 \u0431\u044b\u0442\u044c \u043e\u0431\u0440\u0430\u0431\u043e\u0442\u0447\u0438\u043a \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0439 (\u0431\u0440\u043e\u043a\u0435\u0440), \u0431\u0430\u0437\u0430 \u0434\u0430\u043d\u043d\u044b\u0445\u2026<\/p>\n<p>  <\/p>\n<h2 id=\"gde-stoit-a-gde-ne-stoit-primenyat\">\u0413\u0434\u0435 \u0441\u0442\u043e\u0438\u0442, \u0430 \u0433\u0434\u0435 \u043d\u0435 \u0441\u0442\u043e\u0438\u0442 \u043f\u0440\u0438\u043c\u0435\u043d\u044f\u0442\u044c<\/h2>\n<p>  <\/p>\n<p>\u041c\u0410\u0420\u0421\u0415\u041b\u042c \u0418\u0411\u0420\u0410\u0415\u0412: \u0412 \u043a\u0430\u043a\u0438\u0445 \u043e\u0431\u043b\u0430\u0441\u0442\u044f\u0445 Kafka \u043c\u043e\u0436\u043d\u043e \u043f\u0440\u0438\u043c\u0435\u043d\u0438\u0442\u044c? \u042f \u0442\u0430\u043a \u043f\u043e\u043d\u0438\u043c\u0430\u044e, \u044d\u0442\u043e \u0430\u043d\u0430\u043b\u0438\u0437 \u0434\u0430\u043d\u043d\u044b\u0445. \u0415\u0449\u0451 \u044f \u0441\u0442\u0430\u043b\u043a\u0438\u0432\u0430\u043b\u0441\u044f \u0441 \u0441\u0438\u0441\u0442\u0435\u043c\u043e\u0439 \u043b\u043e\u0433\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f \u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433\u0430. \u0413\u0434\u0435 \u043f\u043e\u043c\u0438\u043c\u043e \u044d\u0442\u0438\u0445 \u0441\u0444\u0435\u0440 \u043c\u043e\u0436\u043d\u043e \u043f\u0440\u0438\u043c\u0435\u043d\u044f\u0442\u044c Kafka?<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0412 \u0447\u0430\u0442\u0438\u043a\u0435 \u0431\u044b\u043b\u043e \u0434\u043e\u043f\u043e\u043b\u043d\u0435\u043d\u0438\u0435, \u0447\u0442\u043e Kafka \u0445\u043e\u0440\u043e\u0448\u043e \u043f\u043e\u0434\u0445\u043e\u0434\u0438\u0442 \u0434\u043b\u044f \u043e\u0431\u043c\u0435\u043d\u0430 \u0441\u0435\u0440\u0432\u0438\u0441\u043e\u0432, \u0442\u043e \u0435\u0441\u0442\u044c notification \u0442\u0443\u0434\u0430 \u043e\u0442\u043b\u0438\u0447\u043d\u043e \u043b\u043e\u0436\u0430\u0442\u0441\u044f.<\/p>\n<p>  <\/p>\n<p>\u0414\u0430\u0432\u0430\u0439 \u044f \u043f\u0435\u0440\u0435\u0447\u0438\u0441\u043b\u044e, \u0434\u043b\u044f \u0447\u0435\u0433\u043e Kafka \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442\u0441\u044f \u0432 Avito, \u0430 \u0442\u043e \u0444\u0430\u043d\u0442\u0430\u0437\u0438\u0440\u043e\u0432\u0430\u0442\u044c \u043c\u043d\u043e\u0433\u043e \u043c\u043e\u0436\u043d\u043e. \u0414\u043b\u044f \u0430\u043d\u0430\u043b\u0438\u0442\u0438\u043a\u0438, \u0434\u043b\u044f \u0432\u0441\u044f\u043a\u0438\u0445 \u043a\u043b\u0438\u043a\u0441\u0442\u0440\u0438\u043c\u043e\u0432, \u0434\u043b\u044f \u0441\u0442\u0440\u0438\u043c\u0438\u043d\u0433\u0430, \u0434\u043b\u044f message broker, \u0434\u043b\u044f \u0442\u043e\u0433\u043e, \u0447\u0442\u043e\u0431\u044b \u0432\u0441\u0442\u0430\u0432\u043b\u044f\u0442\u044c \u0440\u0430\u0437\u043b\u0438\u0447\u043d\u044b\u0435 \u0431\u0443\u0444\u0435\u0440\u044b \u043f\u0435\u0440\u0435\u0434 \u0441\u0438\u0441\u0442\u0435\u043c\u0430\u043c\u0438 \u0442\u0438\u043f\u0430 Elastic \u0438\u043b\u0438 ClickHouse. \u0423 \u043d\u0430\u0441 \u044d\u0442\u043e \u0445\u043e\u0440\u043e\u0448\u043e \u0437\u0430\u0434\u0440\u0443\u0436\u0438\u043b\u043e\u0441\u044c \u0441 \u0442\u0440\u0435\u0439\u0441\u0438\u043d\u0433\u043e\u043c, \u043d\u0430\u043f\u0440\u0438\u043c\u0435\u0440. \u0422\u0430\u043a\u0438\u0435 \u0432 \u043e\u0441\u043d\u043e\u0432\u043d\u043e\u043c \u043f\u0430\u0442\u0442\u0435\u0440\u043d\u044b: \u0430\u043d\u0430\u043b\u0438\u0442\u0438\u043a\u0430, message broker, \u0431\u0443\u0444\u0435\u0440, \u0431\u0430\u0437\u0430 \u0434\u0430\u043d\u043d\u044b\u0445.<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: Fanout \u0435\u0449\u0435, \u0442\u0430\u043a\u043e\u0439 \u043a\u043b\u0430\u0441\u0441\u0438\u0447\u0435\u0441\u043a\u0438\u0439 \u043a\u0435\u0439c.<\/p>\n<p>  <\/p>\n<p>\u0418\u0412\u0410\u041d \u0421\u0418\u0414\u041e\u0420\u041e\u0412: \u0410\u043d\u0430\u043b\u0438\u0442\u0438\u043a\u0430 \u0432 \u043a\u0430\u043a\u043e\u043c \u043f\u043b\u0430\u043d\u0435?<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0421\u0430\u043c\u044b\u0439 \u043f\u0440\u043e\u0441\u0442\u043e\u0439 \u043a\u0435\u0439\u0441 \u2014 \u044d\u0442\u043e \u043a\u043e\u0433\u0434\u0430 \u043d\u0430 \u043f\u043b\u0430\u0442\u0444\u043e\u0440\u043c\u0443 \u0432\u0445\u043e\u0434\u0438\u0442 \u0432\u0435\u0441\u044c \u0432\u0445\u043e\u0434\u044f\u0449\u0438\u0439 \u0442\u0440\u0430\u0444\u0438\u043a \u043a\u043b\u0438\u043a\u0441\u0442\u0440\u0438\u043c\u043e\u0432\u044b\u0439, \u0430 \u043d\u0430\u0448\u0438\u043c \u0430\u043d\u0430\u043b\u0438\u0442\u0438\u043a\u0430\u043c \u0432\u0435\u0441\u044c \u0442\u0440\u0430\u0444\u0438\u043a \u043d\u0435 \u043d\u0443\u0436\u0435\u043d, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e \u0442\u0430\u043c \u043e\u0447\u0435\u043d\u044c \u043c\u043d\u043e\u0433\u043e \u0431\u043e\u0442\u043e\u0432. \u0418 \u043c\u044b \u043f\u0440\u044f\u043c\u043e \u0432 Kafka \u0431\u0435\u0440\u0451\u043c \u0438 \u0444\u0438\u043b\u044c\u0442\u0440\u0443\u0435\u043c \u0432\u0441\u0451 \u044d\u0442\u043e. \u0423 \u043d\u0430\u0441 \u043f\u043e\u044f\u0432\u043b\u044f\u0435\u0442\u0441\u044f \u043e\u0442\u0444\u0438\u043b\u044c\u0442\u0440\u043e\u0432\u0430\u043d\u043d\u044b\u0439 \u0442\u043e\u043f\u0438\u043a, \u0432 \u043a\u043e\u0442\u043e\u0440\u043e\u043c \u0441\u043e\u0434\u0435\u0440\u0436\u0438\u0442\u0441\u044f \u0442\u043e\u043b\u044c\u043a\u043e \u0447\u0438\u0441\u0442\u044b\u0439 \u0442\u0440\u0430\u0444\u0438\u043a, \u0438 \u043e\u043d \u0438\u0434\u0451\u0442, \u043d\u0430\u043f\u0440\u0438\u043c\u0435\u0440, \u0434\u0430\u043b\u044c\u0448\u0435 \u0432 ClickHouse.<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u0415\u0449\u0435 \u043e\u0434\u0438\u043d \u043a\u043b\u0430\u0441\u0441\u0438\u0447\u0435\u0441\u043a\u0438\u0439 \u043a\u0435\u0439\u0441 \u2014 \u044d\u0442\u043e security-\u0430\u043d\u0430\u043b\u0438\u0437, \u0430\u043d\u0430\u043b\u0438\u0437 \u0444\u0438\u0448\u0438\u043d\u0433\u0430. \u041f\u043e\u0442\u043e\u043c\u0443 \u043c\u043d\u043e\u0433\u0438\u0435 \u0444\u0440\u0435\u0439\u043c\u0432\u043e\u0440\u043a\u0438 \u0434\u043b\u044f \u0440\u0435\u0430\u043b-\u0442\u0430\u0439\u043c \u0430\u043d\u0430\u043b\u0438\u0437\u0430 \u0438\u0437 \u043a\u043e\u0440\u043e\u0431\u043a\u0438 \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u044e\u0442 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c sliding window \u043f\u044f\u0442\u0438\u043c\u0438\u043d\u0443\u0442\u043d\u043e\u0435, \u043a\u043e\u0442\u043e\u0440\u043e\u0435 \u0430\u0432\u0442\u043e\u043c\u0430\u0442\u0438\u0447\u0435\u0441\u043a\u0438 \u0437\u0430 \u0432\u0430\u0441 \u0431\u0443\u0434\u0435\u0442 \u043f\u0435\u0440\u0435\u0441\u0447\u0438\u0442\u044b\u0432\u0430\u0442\u044c \u0441\u0447\u0435\u0442\u0447\u0438\u043a\u0438. \u042d\u0442\u043e \u043e\u0447\u0435\u043d\u044c \u0443\u0434\u043e\u0431\u043d\u043e.<\/p>\n<p>  <\/p>\n<p>\u041c\u0410\u0420\u0421\u0415\u041b\u042c \u0418\u0411\u0420\u0410\u0415\u0412: \u041e\u0433\u043e\u043d\u044c! \u0423 \u043a\u0430\u0436\u0434\u043e\u0433\u043e \u0438\u043d\u0441\u0442\u0440\u0443\u043c\u0435\u043d\u0442\u0430 \u0435\u0441\u0442\u044c \u043b\u0443\u0447\u0448\u0438\u0435\/\u0445\u0443\u0434\u0448\u0438\u0435 \u043f\u0440\u0430\u043a\u0442\u0438\u043a\u0438: \u043c\u043e\u043b\u043e\u0442\u043e\u043a \u0445\u043e\u0440\u043e\u0448\u043e \u0437\u0430\u0431\u0438\u0432\u0430\u0435\u0442 \u0433\u0432\u043e\u0437\u0434\u0438, \u043d\u043e \u0437\u0430\u043c\u0435\u0448\u0438\u0432\u0430\u0442\u044c \u0438\u043c \u0442\u0435\u0441\u0442\u043e \u043d\u0435 \u043e\u0447\u0435\u043d\u044c \u0443\u0434\u043e\u0431\u043d\u043e, \u0445\u043e\u0442\u044f \u0438 \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e. \u0415\u0441\u0442\u044c \u043b\u0438 \u043e\u0431\u043b\u0430\u0441\u0442\u0438, \u0433\u0434\u0435 Kafka \u043d\u0435 \u043b\u043e\u0436\u0438\u0442\u0441\u044f \u043d\u0438\u043a\u0430\u043a?<\/p>\n<p>  <\/p>\n<p>\u0412\u0418\u041a\u0422\u041e\u0420 \u0413\u0410\u041c\u041e\u0412: High-Frequency-Trading (HFT). \u0417\u0434\u0435\u0441\u044c Kafka \u043d\u0438 \u043e \u0447\u0451\u043c, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e, \u0433\u0434\u0435 \u0434\u0438\u0441\u043a \u043f\u0440\u0438\u0432\u044f\u0437\u0430\u043d, \u0442\u0430\u043c \u043d\u0430\u0447\u0438\u043d\u0430\u044e\u0442\u0441\u044f \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u044b. \u041f\u043b\u044e\u0441, \u044d\u0442\u043e \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0435\u043b\u0451\u043d\u043d\u044b\u0435 \u0441\u0438\u0441\u0442\u0435\u043c\u044b. \u0422\u0430\u043c, \u0433\u0434\u0435 \u043d\u0430\u0447\u0438\u043d\u0430\u044e\u0442\u0441\u044f \u0432\u0441\u044f\u043a\u0438\u0435 \u0441\u0435\u0442\u0435\u0432\u044b\u0435 \u0432\u043e\u043f\u0440\u043e\u0441\u044b, \u0441\u043a\u043e\u0440\u0435\u0435 \u0432\u0441\u0435\u0433\u043e, Kafka \u043d\u0435 \u043f\u043e\u0434\u043e\u0439\u0434\u0435\u0442. \u0415\u0441\u043b\u0438 \u043d\u0443\u0436\u0435\u043d \u043f\u0440\u043e\u0441\u0442\u043e\u0439 \u043c\u0435\u0441\u0441\u0435\u0434\u0436\u0438\u043d\u0433 \u0441 \u043f\u0440\u043e\u0441\u0442\u044b\u043c \u0440\u0430\u0443\u0442\u0438\u043d\u0433\u043e\u043c (\u0431\u0435\u0437 \u0432\u043d\u0435\u0434\u0440\u0435\u043d\u0438\u044f \u0442\u0435\u0445 \u0432\u0435\u0449\u0435\u0439, \u043e \u043a\u043e\u0442\u043e\u0440\u044b\u0445 \u043c\u044b \u0443\u0436\u0435 \u043f\u043e\u0433\u043e\u0432\u043e\u0440\u0438\u043b\u0438 \u0432\u043a\u0440\u0430\u0442\u0446\u0435, KSQL, Kafka-streams, \u0444\u043b\u0438\u043f\u0438\u043d\u0433 \u0438 \u0442.\u0434), \u0437\u0434\u0435\u0441\u044c Kafka \u0442\u043e\u0436\u0435 \u043d\u0435 \u043f\u043e\u0434\u0445\u043e\u0434\u0438\u0442. \u041f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e \u043d\u0443\u0436\u0435\u043d \u043f\u0440\u043e\u0441\u0442\u043e message broker. \u041c\u043e\u0436\u043d\u043e, \u043a\u043e\u043d\u0435\u0447\u043d\u043e, \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c Kafka. \u041d\u043e \u043f\u043e\u0442\u043e\u043c \u043b\u044e\u0434\u0438 \u043f\u0440\u0438\u0445\u043e\u0434\u044f\u0442 \u0438 \u0433\u043e\u0432\u043e\u0440\u044f\u0442: \u00ab\u0432\u043e\u0442, Kafka \u0434\u043b\u044f \u043d\u0430\u0448\u0435\u0433\u043e HFT \u043d\u0435 \u043f\u043e\u0434\u0445\u043e\u0434\u0438\u0442\u00bb. \u041d\u0443, \u0435\u0441\u0442\u0435\u0441\u0442\u0432\u0435\u043d\u043d\u043e \u043d\u0435 \u043f\u043e\u0434\u0445\u043e\u0434\u0438\u0442. \u0414\u043b\u044f \u044d\u0442\u043e\u0433\u043e \u0435\u0441\u0442\u044c \u043a\u0430\u043a\u043e\u0439-\u043d\u0438\u0431\u0443\u0434\u044c Aeron \u0438\u043b\u0438 ZeroMQ, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0431\u044b\u043b\u0438 \u0441\u043e\u0437\u0434\u0430\u043d \u0434\u043b\u044f \u0442\u043e\u0433\u043e, \u0447\u0442\u043e\u0431\u044b \u043d\u0435 \u0431\u0435\u0436\u0430\u0442\u044c \u043f\u043e \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0435\u043b\u0451\u043d\u043a\u0435, \u0430<br \/>  \u043b\u043e\u043a\u0430\u043b\u044c\u043d\u043e.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0422\u0443\u0442 \u0432 \u0446\u0435\u043b\u043e\u043c, \u0435\u0441\u043b\u0438 \u0442\u0435\u0431\u0435 \u043d\u0443\u0436\u043d\u044b \u0438 \u043e\u0447\u0435\u0440\u0435\u0434\u0438, \u0438 \u0441\u0443\u043f\u0435\u0440 low latency, \u0438 100% \u0433\u0430\u0440\u0430\u043d\u0442\u0438\u044f \u0434\u043e\u0441\u0442\u0430\u0432\u043a\u0438, \u0438 \u0443 \u0442\u0435\u0431\u044f \u043f\u043e\u0442\u043e\u043a \u0434\u0430\u043d\u043d\u044b\u0445 \u043d\u0435\u0431\u043e\u043b\u044c\u0448\u043e\u0439, \u0442\u043e \u043b\u0443\u0447\u0448\u0435 \u043d\u0435 \u0438\u0441\u043a\u0430\u0442\u044c \u043e\u0433\u0440\u043e\u043c\u043d\u044b\u0445 \u0438\u043d\u0441\u0442\u0440\u0443\u043c\u0435\u043d\u0442\u043e\u0432 \u0442\u0438\u043f\u0430 Kafka&#8230;<\/p>\n<p>  <\/p>\n<p>\u0418\u0412\u0410\u041d \u0421\u0418\u0414\u041e\u0420\u041e\u0412: \u2026 \u0430 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c \u0445\u0430\u0440\u0434\u0432\u0430\u0440\u043d\u044b\u0435 \u0440\u0435\u0448\u0435\u043d\u0438\u044f.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u041d\u0443, \u044f \u043f\u043e\u0434\u0432\u043e\u0434\u0438\u043b \u043a RabbitMQ, \u043a\u043e\u043d\u0435\u0447\u043d\u043e, \u043d\u043e \u043c\u043e\u0436\u043d\u043e \u0438 \u0442\u0430\u043a.<\/p>\n<p>  <\/p>\n<p>\u0418\u0412\u0410\u041d \u0421\u0418\u0414\u041e\u0420\u041e\u0412: \u041d\u0435\u0442, \u044d\u0442\u043e \u0434\u043e\u043b\u0433\u043e.<\/p>\n<p>  <\/p>\n<p>\u0412\u0418\u041a\u0422\u041e\u0420 \u0413\u0410\u041c\u041e\u0412: \u041f\u0440\u0430\u0432\u0438\u043b\u044c\u043d\u043e\u0435, \u043d\u0430 \u0441\u0430\u043c\u043e\u043c \u0434\u0435\u043b\u0435, \u0443\u0442\u043e\u0447\u043d\u0435\u043d\u0438\u0435 \u043f\u043e \u043f\u043e\u0432\u043e\u0434\u0443 \u0445\u0430\u0440\u0434\u0432\u0430\u0440\u043d\u044b\u0445 \u0440\u0435\u0448\u0435\u043d\u0438\u0439. \u042f \u0440\u0430\u043d\u044c\u0448\u0435 \u0442\u0440\u0443\u0434\u0438\u043b\u0441\u044f \u0432 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438, \u043a\u043e\u0442\u043e\u0440\u0430\u044f \u0434\u0435\u043b\u0430\u043b\u0430 \u043d\u0435\u0431\u043e\u043b\u044c\u0448\u043e\u0439 \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0435\u043b\u0435\u043d\u043d\u044b\u0439 \u043a\u044d\u0448, \u043d\u0430\u0437\u044b\u0432\u0430\u043b\u0441\u044f Hazelcast. \u0418 \u043c\u044b \u0434\u0435\u043b\u0430\u043b\u0438 \u0442\u0430\u043a\u0443\u044e \u0438\u043d\u0442\u0435\u0433\u0440\u0430\u0446\u0438\u044e \u0438\u043d\u0442\u0435\u0440\u043f\u0440\u0430\u0439\u0437\u043d\u0443\u044e \u0441\u043e \u0432\u0441\u044f\u043a\u0438\u043c\u0438 \u0431\u0430\u043b\u0430\u043b\u0430\u0439\u043a\u0430\u043c\u0438, \u0447\u0442\u043e\u0431\u044b \u0434\u0435\u043b\u0430\u0442\u044c \u043a\u0440\u043e\u0441\u0441-\u0434\u0430\u0442\u0430\u0446\u0435\u043d\u0442\u0435\u0440\u043d\u0443\u044e (\u043a\u0430\u043a \u0432\u044b \u043f\u043e-\u0440\u0443\u0441\u0441\u043a\u0438 \u0433\u043e\u0432\u043e\u0440\u0438\u0442\u0435?) \u2014 Multi-Datacenter Replication.<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u041e\u0447\u0435\u043d\u044c \u043f\u043e-\u0440\u0443\u0441\u0441\u043a\u0438 \u0441\u043a\u0430\u0437\u0430\u043b.<\/p>\n<p>  <\/p>\n<p>\u0412\u0418\u041a\u0422\u041e\u0420 \u0413\u0410\u041c\u041e\u0412: \u0418 \u043c\u044b \u043a\u0430\u043a \u0440\u0430\u0437 \u043f\u0435\u0440\u0435\u0434 \u0442\u0435\u043c, \u043a\u0430\u043a \u0437\u0430\u043f\u0438\u043b\u0438\u0442\u044c \u0430\u0434\u0430\u043f\u0442\u0435\u0440 \u0434\u043b\u044f Kafka, \u043c\u044b \u0437\u0430\u043f\u0438\u043b\u0438\u043b\u0438 \u0430\u0434\u0430\u043f\u0442\u0435\u0440 \u0434\u043b\u044f Solace, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0434\u0430\u0432\u0430\u043b \u0445\u0430\u0440\u0434\u0432\u0430\u0440\u043d\u043e\u0435 \u0440\u0435\u0448\u0435\u043d\u0438\u0435. \u041b\u044e\u0434\u0438 \u0441 \u0431\u043e\u043b\u044c\u0448\u0438\u043c\u0438 \u0434\u0435\u043d\u044c\u0433\u0430\u043c\u0438 \u043f\u043e\u043a\u0443\u043f\u0430\u043b\u0438 \u043f\u043b\u0430\u0442\u044b, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0434\u0430\u0432\u0430\u043b\u0438 \u0441\u0443\u043f\u0435\u0440\u0431\u044b\u0441\u0442\u0440\u044b\u0439 latency. \u0422\u0430\u043c \u0432\u043e\u043f\u0440\u043e\u0441 \u0431\u044b\u043b \u0438\u043c\u0435\u043d\u043d\u043e \u043f\u0435\u0440\u0435\u0434\u0430\u0447\u0438 \u0438\u043d\u0444\u043e\u0440\u043c\u0430\u0446\u0438\u0438 \u043c\u0435\u0436\u0434\u0443 \u043e\u043a\u0435\u0430\u043d\u043e\u043c, \u043c\u0435\u0436\u0434\u0443 \u0427\u0438\u043a\u0430\u0433\u0441\u043a\u043e\u0439 \u0431\u0438\u0440\u0436\u0435\u0439 \u0438 \u041b\u043e\u043d\u0434\u043e\u043d\u0441\u043a\u043e\u0439, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 Solace \u0434\u0430\u0432\u0430\u043b \u043a\u0430\u043a\u0438\u0435-\u0442\u043e \u0434\u0438\u043a\u0438\u0435 \u0446\u0438\u0444\u0440\u044b, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e \u043b\u0435\u0436\u0430\u043b \u043f\u043e\u0432\u0435\u0440\u0445 \u043a\u0430\u0441\u0442\u043e\u043c\u043d\u043e\u0439 \u0441\u0435\u0442\u0438 \u0438 \u043a\u0430\u0441\u0442\u043e\u043c\u043d\u043e\u0433\u043e \u0436\u0435\u043b\u0435\u0437\u0430. \u041f\u043e\u044d\u0442\u043e\u043c\u0443 \u0448\u0443\u0442\u043a\u0438 \u0448\u0443\u0442\u043a\u0430\u043c\u0438, \u043d\u043e \u0435\u0441\u043b\u0438 \u0445\u043e\u0447\u0435\u0442\u0441\u044f \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u0438, \u0432\u0441\u0435\u0433\u0434\u0430 \u043c\u043e\u0436\u043d\u043e \u043e\u043f\u0443\u0441\u0442\u0438\u0442\u044c\u0441\u044f, \u043a\u0430\u043a \u0412\u0430\u043d\u044f \u0441\u043a\u0430\u0437\u0430\u043b, \u043d\u0430 \u0443\u0440\u043e\u0432\u0435\u043d\u044c \u0436\u0435\u043b\u0435\u0437\u043a\u0438.<\/p>\n<p>  <\/p>\n<p>\u0418\u0412\u0410\u041d \u0421\u0418\u0414\u041e\u0420\u041e\u0412: \u0415\u0441\u043b\u0438 \u0442\u044b \u0432 HFT, \u0443 \u0442\u0435\u0431\u044f \u0443\u0436\u0435 \u0435\u0441\u0442\u044c \u0434\u0435\u043d\u044c\u0433\u0438 \u0434\u043b\u044f \u0442\u043e\u0433\u043e, \u0447\u0442\u043e\u0431\u044b \u0441\u0434\u0435\u043b\u0430\u0442\u044c \u043a\u0430\u0441\u0442\u043e\u043c\u043d\u0443\u044e \u0436\u0435\u043b\u0435\u0437\u043a\u0443.<\/p>\n<p>  <\/p>\n<p>\u0412\u0418\u041a\u0422\u041e\u0420 \u0413\u0410\u041c\u041e\u0412: \u0418\u043b\u0438 \u0434\u0435\u043d\u044c\u0433\u0438 \u0438\u043d\u0432\u0435\u0441\u0442\u043e\u0440\u043e\u0432.<\/p>\n<p>  <\/p>\n<p>\u0418\u0412\u0410\u041d \u0421\u0418\u0414\u041e\u0420\u041e\u0412: \u0414\u0430, \u0430 \u0435\u0441\u043b\u0438 \u043d\u0435\u0442, \u0442\u043e HFT \u043d\u0435 \u0431\u0443\u0434\u0435\u0442.<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u041d\u0443, \u0438 \u0435\u0449\u0435 \u043e\u0434\u043d\u0430 \u0445\u043e\u043b\u0438\u0432\u0430\u0440\u043d\u0430\u044f \u0442\u0435\u043c\u0430 \u2014 \u044d\u0442\u043e \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043d\u0438\u0435 Kafka \u0432 \u043a\u0430\u0447\u0435\u0441\u0442\u0432\u0435 \u0431\u0430\u0437\u044b \u0434\u0430\u043d\u043d\u044b\u0445. \u0422\u0435\u043e\u0440\u0435\u0442\u0438\u0447\u0435\u0441\u043a\u0438 \u044d\u0442\u043e \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e \u0438 \u0434\u0430\u0436\u0435 \u043f\u0440\u0430\u043a\u0442\u0438\u0447\u0435\u0441\u043a\u0438 \u043c\u044b \u0432\u0438\u0434\u0438\u043c \u043a\u0430\u043a\u0438\u0435-\u0442\u043e \u043a\u0435\u0439\u0441\u044b, \u043d\u043e \u0447\u0442\u043e\u0431\u044b \u0441\u0434\u0435\u043b\u0430\u0442\u044c \u044d\u0442\u043e \u043f\u0440\u0430\u0432\u0438\u043b\u044c\u043d\u043e, \u043f\u043e\u0442\u0440\u0435\u0431\u0443\u0435\u0442\u0441\u044f \u0437\u043d\u0430\u0447\u0438\u0442\u0435\u043b\u044c\u043d\u043e\u0435 \u043a\u043e\u043b\u0438\u0447\u0435\u0441\u0442\u0432\u043e \u0432\u0440\u0435\u043c\u0435\u043d\u0438, \u0438 \u0432\u043e \u043c\u043d\u043e\u0433\u0438\u0445 \u0441\u043b\u0443\u0447\u0430\u044f\u0445, \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e, \u0438\u043c\u0435\u0435\u0442 \u0441\u043c\u044b\u0441\u043b \u043f\u0440\u043e\u0434\u043e\u043b\u0436\u0438\u0442\u044c \u0441\u043f\u043e\u043a\u043e\u0439\u043d\u043e \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c PostgreSQL \u0438\u043b\u0438 \u0447\u0442\u043e-\u0442\u043e \u0435\u0449\u0435, \u0447\u0442\u043e \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u0435\u0442 \u0434\u0435\u043b\u0430\u0442\u044c \u043f\u0440\u043e\u0441\u0442\u044b\u0435 \u0437\u0430\u043f\u0440\u043e\u0441\u044b \u043f\u043e \u043b\u044e\u0431\u044b\u043c \u043a\u043b\u044e\u0447\u0430\u043c. \u041f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e Kafka \u0432\u0441\u0435-\u0442\u0430\u043a\u0438 \u0434\u0430, \u0438\u043c\u0435\u0435\u0442 \u0432\u044b\u0431\u043e\u0440\u043a\u0443 \u043f\u043e \u043e\u0444\u0441\u0435\u0442\u0443 ID, \u043d\u043e \u0434\u0430\u0436\u0435 \u044d\u0442\u0430 \u043e\u043f\u0435\u0440\u0430\u0446\u0438\u044f \u0437\u043d\u0430\u0447\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u043c\u0435\u0434\u043b\u0435\u043d\u043d\u0435\u0435&#8230;<\/p>\n<p>  <\/p>\n<p>\u0412\u0418\u041a\u0422\u041e\u0420 \u0413\u0410\u041c\u041e\u0412: \u0412\u043e\u0442 \u0442\u044b \u043f\u0440\u0430\u0432\u0438\u043b\u044c\u043d\u043e \u0433\u043e\u0432\u043e\u0440\u0438\u0448\u044c, \u043d\u043e \u0434\u043b\u044f \u0441\u043b\u0443\u0448\u0430\u0442\u0435\u043b\u0435\u0439 \u043d\u0430\u0434\u043e \u043d\u0435\u043c\u043d\u043e\u0433\u043e \u043f\u043e\u044f\u0441\u043d\u0438\u0442\u044c. \u041f\u043e\u0447\u0435\u043c\u0443 Kafka \u0430\u0441\u0441\u043e\u0446\u0438\u0438\u0440\u0443\u0435\u0442\u0441\u044f \u0441 \u0438\u0437\u0432\u0435\u0441\u0442\u043d\u044b\u043c \u0434\u043e\u043a\u043b\u0430\u0434\u043e\u043c \u041c\u0430\u0440\u0442\u0438\u043d\u0430 \u041a\u043b\u0435\u043f\u043f\u043c\u0430\u043d\u0430 (Martin Kleppmann) \u00ab<a href=\"https:\/\/www.youtube.com\/watch?v=fU9hR3kiOK0\">Turning the database inside-out<\/a>\u00bb (\u0435\u0441\u043b\u0438 \u0432\u044b \u043d\u0435 \u0432\u0438\u0434\u0435\u043b\u0438, \u0441\u0445\u043e\u0434\u0438\u0442\u0435 \u043f\u043e\u0441\u043c\u043e\u0442\u0440\u0438\u0442\u0435). \u041e\u0442\u043b\u0438\u0447\u0438\u0435 Kafka \u043e\u0442 \u0431\u0430\u0437\u044b \u0434\u0430\u043d\u043d\u044b\u0445 \u0432 \u0442\u043e\u043c, \u0447\u0442\u043e\u2026 \u0438 \u0442\u0430\u043c, \u0438 \u0442\u0430\u043c \u0435\u0441\u0442\u044c \u043b\u043e\u0433 \u0438 durable-\u0445\u0440\u0430\u043d\u0438\u043b\u0438\u0449\u0435, \u043a\u043e\u0442\u043e\u0440\u043e\u0435 \u043e\u0431\u0435\u0441\u043f\u0435\u0447\u0438\u0432\u0430\u0435\u0442 \u0445\u0440\u0430\u043d\u0435\u043d\u0438\u0435 \u0434\u0430\u043d\u043d\u044b\u0445 \u043d\u0430 \u0434\u043e\u043b\u0433\u0438\u0439 \u0441\u0440\u043e\u043a, \u043d\u043e \u0432 \u043e\u0431\u044b\u0447\u043d\u043e\u0439 \u0431\u0430\u0437\u0435 \u0434\u0430\u043d\u043d\u044b\u0445 \u0434\u043b\u044f \u0432\u0430\u0441 \u0432 API \u0435\u0441\u0442\u044c Query Engine, \u0441 \u043a\u043e\u0442\u043e\u0440\u044b\u043c \u0432\u044b \u0432\u0437\u0430\u0438\u043c\u043e\u0434\u0435\u0439\u0441\u0442\u0432\u0443\u0435\u0442\u0435 \u043f\u043e\u0441\u0440\u0435\u0434\u0441\u0442\u0432\u043e\u043c \u043a\u0430\u043a\u043e\u0433\u043e-\u0442\u043e DSL: SQL, \u0432 \u0434\u0430\u043d\u043d\u043e\u043c \u0441\u043b\u0443\u0447\u0430\u0435, \u0435\u0441\u043b\u0438 noSQL, \u0442\u0430\u043c \u0442\u043e\u0436\u0435 \u043a\u0430\u043a\u043e\u0439-\u0442\u043e \u0441\u0432\u043e\u0439, JSON, \u043d\u0435 \u0437\u043d\u0430\u044e, \u0447\u0442\u043e-\u043d\u0438\u0431\u0443\u0434\u044c \u0432 MongoDB. \u0412 Kafka \u0432\u0441\u0451 \u043d\u0435\u043c\u043d\u043e\u0433\u043e \u0438\u043d\u0430\u0447\u0435. \u0422\u0430\u043c storage, \u0441\u043e\u0431\u0441\u0442\u0432\u0435\u043d\u043d\u043e, \u0432\u043e\u0442 \u044d\u0442\u043e\u0442 \u043b\u043e\u0433, \u0438 \u0432\u0430\u0448 Query language \u0440\u0430\u0437\u043d\u0435\u0441\u0435\u043d\u044b. \u041f\u043e\u044d\u0442\u043e\u043c\u0443 \u0430\u0431\u0441\u043e\u043b\u044e\u0442\u043d\u043e \u043d\u0435\u043f\u0440\u0430\u043a\u0442\u0438\u0447\u043d\u043e \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c \u043a\u0430\u043a\u043e\u0439-\u0442\u043e \u0441\u0442\u0430\u043d\u0434\u0430\u0440\u0442\u043d\u044b\u0439 low level \u043a\u0430\u0444\u043a\u043e\u0432\u0441\u043a\u0438\u0439 API \u0434\u043b\u044f \u0442\u043e\u0433\u043e, \u0447\u0442\u043e\u0431\u044b \u0431\u0435\u0433\u0430\u0442\u044c \u043f\u043e \u0430\u043f\u0441\u0435\u0442\u0443. \u042d\u0442\u043e \u043d\u0435 \u043d\u0443\u0436\u043d\u043e, \u043d\u0435\u043f\u0440\u0430\u0432\u0438\u043b\u044c\u043d\u043e \u0438 \u0432\u043e\u043e\u0431\u0449\u0435 \u0432\u0440\u0435\u0434\u043d\u043e.<\/p>\n<p>  <\/p>\n<p>\u041e\u0431\u044b\u0447\u043d\u043e \u0441\u043c\u044b\u0441\u043b Kafka \u0432 \u0442\u043e\u043c, \u0447\u0442\u043e \u0432\u044b \u043c\u043e\u0436\u0435\u0442\u0435 \u043d\u0430\u0441\u0430\u0434\u0438\u0442\u044c \u0442\u0443\u0434\u0430 \u043b\u044e\u0431\u043e\u0435 \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u0435, \u0438 \u043e\u043d\u043e \u0441\u0442\u0430\u043d\u043e\u0432\u0438\u0442\u0441\u044f \u0432\u043e\u0442 \u044d\u0442\u0438\u043c Query Agent, \u0438 \u0432\u044b \u0434\u0430\u043b\u044c\u0448\u0435 \u043d\u0430\u043a\u0440\u0443\u0447\u0438\u0432\u0430\u0435\u0442\u0435. \u0412\u044b \u0445\u043e\u0442\u0438\u0442\u0435 \u0438\u043c\u0435\u0442\u044c \u043a\u0430\u043a\u043e\u0439-\u0442\u043e \u0445\u0438\u0442\u0440\u044b\u0439 \u044f\u0437\u044b\u043a \u0437\u0430\u043f\u0440\u043e\u0441\u0430? \u0412\u044b \u043c\u043e\u0436\u0435\u0442\u0435 \u044d\u0442\u043e \u0441\u0434\u0435\u043b\u0430\u0442\u044c. \u0420\u0435\u0447\u044c \u0438\u0434\u0435\u0442 \u043e \u0442\u043e\u043c, \u0447\u0442\u043e \u0441\u0442\u0430\u043d\u0434\u0430\u0440\u0442\u0430 \u043d\u0435\u0442 \u0442\u0430\u043a\u043e\u0433\u043e, \u0447\u0442\u043e\u0431\u044b \u0432\u043e\u0442 \u0432\u0437\u044f\u0442\u044c \u0438 \u0441\u0434\u0435\u043b\u0430\u0442\u044c \u0438\u0437 Kafka k-value \u043a\u0430\u043a\u043e\u0439-\u0442\u043e Storage. \u0412\u0430\u043c \u043d\u0443\u0436\u043d\u043e \u0432\u0441\u0435 \u0440\u0430\u0432\u043d\u043e \u0447\u0442\u043e-\u0442\u043e \u043b\u0438\u0431\u043e \u043d\u0430\u043f\u0438\u0441\u0430\u0442\u044c, \u043d\u0430\u043f\u0440\u0438\u043c\u0435\u0440, \u0432\u0437\u044f\u0442\u044c Kafka Streams, \u043d\u0430\u043f\u0438\u0441\u0430\u0442\u044c \u0442\u0430\u043c \u0434\u0432\u0435 \u0441\u0442\u0440\u043e\u0447\u043a\u0438, \u0438 \u0443 \u0432\u0430\u0441 \u043f\u043e\u043b\u0443\u0447\u0430\u0435\u0442\u0441\u044f \u0438\u0437 \u0442\u043e\u043f\u0438\u043a\u0430 \u0441\u0434\u0435\u043b\u0430\u0442\u044c \u043c\u0430\u0442\u0435\u0440\u0438\u0430\u043b\u0438\u0437\u043e\u0432\u0430\u043d\u043d\u044b\u0439 View \u0438 \u043e\u0442\u0434\u0430\u0442\u044c \u0435\u0433\u043e \u0447\u0435\u0440\u0435\u0437 REST. \u042d\u0442\u043e \u0434\u043e\u0441\u0442\u0430\u0442\u043e\u0447\u043d\u043e \u043f\u0440\u043e\u0441\u0442\u043e \u0441\u0434\u0435\u043b\u0430\u0442\u044c. \u0422\u0430\u043a\u043e\u0439 \u0436\u0435 \u043f\u0440\u043e\u0446\u0435\u0441\u0441 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442 skim-registry. \u0412\u043e\u0442 \u043c\u044b \u0441\u0434\u0435\u043b\u0430\u043b\u0438 \u0431\u0430\u043b\u0430\u043b\u0430\u0435\u0447\u043a\u0443, \u043a\u043e\u0442\u043e\u0440\u0430\u044f \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u0435\u0442 \u0445\u0440\u0430\u043d\u0438\u0442\u044c \u0441\u0445\u0435\u043c\u044b, \u0434\u0430\u043d\u043d\u044b\u0435. Skim-registry \u043d\u0435 \u043d\u0443\u0436\u043d\u043e \u043d\u0438\u0447\u0435\u0433\u043e, \u043a\u0440\u043e\u043c\u0435 Kafka. \u041e\u043d\u0430 \u0432\u043d\u0443\u0442\u0440\u0438 Kafka \u0445\u0440\u0430\u043d\u0438\u0442 \u0432\u0441\u0435 \u0432\u0430\u0448\u0438 \u0441\u0445\u0435\u043c\u044b. \u041e\u043d\u0430 \u043d\u0430\u0440\u0443\u0436\u0443 \u043e\u0442\u0434\u0430\u0451\u0442 REST-\u0438\u043d\u0442\u0435\u0440\u0444\u0435\u0439\u0441. \u0415\u0441\u043b\u0438 \u0432\u044b \u043f\u0440\u0438\u0448\u043b\u0438 \u0438 \u0441\u043a\u0430\u0437\u0430\u043b\u0438: \u0432\u043e\u0442 \u0443 \u043c\u0435\u043d\u044f \u0435\u0441\u0442\u044c \u0442\u0430\u043a\u043e\u0439 \u0442\u0438\u043f \u0441\u0445\u0435\u043c\u044b, \u0432\u043e\u0442 \u043c\u043e\u0439 \u043d\u043e\u043c\u0435\u0440 ID, \u043e\u0442\u0434\u0430\u0439 \u043c\u043d\u0435 \u0432\u0441\u044e \u0441\u0445\u0435\u043c\u0443, \u2014 \u0432\u0441\u0451 \u044d\u0442\u043e \u0440\u0435\u0430\u043b\u0438\u0437\u043e\u0432\u0430\u043d\u043e \u0432\u043d\u0443\u0442\u0440\u0438 Kafka. Kafka \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442\u0441\u044f \u043a\u0430\u043a \u0445\u0440\u0430\u043d\u0438\u043b\u0438\u0449\u0435.<\/p>\n<p>  <\/p>\n<p>Kafka \u0421onnect \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442 Kafka \u043a\u0430\u043a \u0431\u0430\u0437\u0443 \u0434\u0430\u043d\u043d\u044b\u0445. \u0422\u0430\u043c \u0442\u044b\u0449\u0430 \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u043e\u0432 \u0432\u0441\u044f\u043a\u0438\u0445, \u043d\u0430\u0441\u0442\u0440\u043e\u0435\u043a \u043b\u0435\u0436\u0438\u0442 \u0432\u043d\u0443\u0442\u0440\u0438 Kafka. \u041a\u043e\u0433\u0434\u0430 \u0432\u044b \u0441\u0442\u0430\u0440\u0442\u0443\u0435\u0442, \u0421onnect \u0433\u043e\u043b\u044b\u0439, \u043e\u043d \u0432\u0441\u0435 \u043d\u0430\u0441\u0442\u0440\u043e\u0439\u043a\u0438 \u0445\u0440\u0430\u043d\u0438\u0442 \u0432\u043d\u0443\u0442\u0440\u0438 Kafka. \u0422\u043e \u0435\u0441\u0442\u044c, \u0437\u0434\u0435\u0441\u044c \u043d\u0438\u0447\u0435\u0433\u043e \u043d\u0435 \u043d\u0430\u0434\u043e. \u042d\u0442\u043e \u043a \u0432\u043e\u043f\u0440\u043e\u0441\u0443 \u043e \u0442\u043e\u043c, \u0447\u0442\u043e \u041c\u0430\u0440\u0441\u0435\u043b\u044c \u0441\u043a\u0430\u0437\u0430\u043b \u043f\u0440\u043e \u043c\u043e\u043b\u043e\u0442\u043e\u043a. \u041c\u043e\u0436\u043d\u043e \u043c\u043e\u043b\u043e\u0442\u043a\u043e\u043c \u043f\u043e\u043c\u0435\u0448\u0430\u0442\u044c \u0442\u0435\u0441\u0442\u043e? \u041c\u043e\u0436\u043d\u043e. \u041c\u043e\u0436\u043d\u043e \u043b\u0438 \u043d\u0430 Kafka \u0441\u0434\u0435\u043b\u0430\u0442\u044c \u0431\u0430\u0437\u0443 \u0434\u0430\u043d\u043d\u044b\u0445? \u041c\u043e\u0436\u043d\u043e. \u041c\u043e\u0436\u043d\u043e \u043b\u0438 \u043d\u0430 \u043d\u0435\u0439 \u0441\u0434\u0435\u043b\u0430\u0442\u044c \u0441\u0435\u0440\u044c\u0435\u0437\u043d\u0443\u044e \u0431\u0430\u0437\u0443 \u0434\u0430\u043d\u043d\u044b\u0445? \u041c\u043e\u0436\u043d\u043e. \u0412\u043e\u043f\u0440\u043e\u0441 \u0432 \u0443\u0440\u043e\u0432\u043d\u0435 \u0443\u043f\u043e\u0440\u043e\u0442\u043e\u0441\u0442\u0438. \u041d\u0430\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0433\u043b\u0443\u0431\u043e\u043a\u043e \u0432\u044b \u0433\u043e\u0442\u043e\u0432\u044b \u043f\u043e\u0439\u0442\u0438.<\/p>\n<p>  <\/p>\n<p>\u0418\u0412\u0410\u041d \u0421\u0418\u0414\u041e\u0420\u041e\u0412: Kafka \u0438 \u0431\u0430\u0437\u0430 \u0434\u0430\u043d\u043d\u044b\u0445 \u2014 \u044d\u0442\u043e \u0437\u0432\u0443\u0447\u0438\u0442 \u0434\u0438\u043a\u043e \u0438\u0437-\u0437\u0430 \u0442\u043e\u0433\u043e, \u0447\u0442\u043e \u043d\u0435 \u0441\u0445\u043e\u0434\u0438\u0442\u0441\u044f \u0441 \u043f\u0430\u0440\u0430\u0434\u0438\u0433\u043c\u043e\u0439 \u043e\u0431\u044b\u0447\u043d\u043e\u0439 \u0431\u0430\u0437\u044b \u0434\u0430\u043d\u043d\u044b\u0445, \u0433\u0434\u0435 \u044f\u0437\u044b\u043a \u0437\u0430\u043f\u0440\u043e\u0441\u043e\u0432 \u0438 \u0431\u0430\u0437\u0430 \u0434\u0430\u043d\u043d\u044b\u0445 \u043d\u0435\u043e\u0442\u0434\u0435\u043b\u0438\u043c\u044b \u0434\u0440\u0443\u0433 \u043e\u0442 \u0434\u0440\u0443\u0433\u0430. \u041d\u043e \u044d\u0442\u043e \u0434\u043e\u0441\u0442\u0430\u0442\u043e\u0447\u043d\u043e \u043f\u0440\u043e\u0441\u0442\u043e \u043f\u043e\u043a\u0430\u0437\u044b\u0432\u0430\u0435\u0442\u0441\u044f \u043d\u0430 \u043f\u0440\u0438\u043c\u0435\u0440\u0435 \u0442\u043e\u0433\u043e \u0436\u0435 \u0441\u0430\u043c\u043e\u0433\u043e Hadoop, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0441\u0442\u0430\u043b \u0443\u0436\u0435 \u0434\u043e\u0441\u0442\u0430\u0442\u043e\u0447\u043d\u043e \u0440\u0430\u0441\u0445\u043e\u0436\u0435\u0439 \u0442\u0435\u0445\u043d\u043e\u043b\u043e\u0433\u0438\u0435\u0439. \u0427\u0442\u043e \u0442\u0430\u043a\u043e\u0435 Hadoop? \u041e\u0431\u044b\u0447\u043d\u043e, \u043a\u043e\u0433\u0434\u0430 \u0433\u043e\u0432\u043e\u0440\u044f\u0442 Hadoop, \u0433\u043e\u0432\u043e\u0440\u044f\u0442 HDFS. \u042d\u0442\u043e \u043f\u0440\u043e\u0441\u0442\u043e \u0444\u0430\u0439\u043b\u043e\u0432\u0430\u044f \u0441\u0438\u0441\u0442\u0435\u043c\u0430, \u0430 \u043f\u043e\u0432\u0435\u0440\u0445 \u043d\u0435\u0435 \u043c\u043e\u0436\u043d\u043e \u043d\u0430\u043a\u0440\u0443\u0447\u0438\u0432\u0430\u0442\u044c \u0441\u0445\u0435\u043c\u044b, \u0440\u0430\u0437\u043d\u044b\u0435 \u0434\u0432\u0438\u0436\u043a\u0438 \u0437\u0430\u043f\u0440\u043e\u0441\u043e\u0432, Hive, HBase, \u0432\u0441\u0435 \u0447\u0442\u043e \u0443\u0433\u043e\u0434\u043d\u043e. \u0418 \u0432 Kafka, \u043a\u0430\u043a \u044f \u043f\u043e\u043d\u0438\u043c\u0430\u044e, \u043f\u0440\u043e\u0441\u0442\u043e \u043f\u043e\u043a\u0430 \u0432\u043e\u0442 \u044d\u0442\u0438\u0445 Query Engine \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0431\u044b \u0443\u0436\u0435 \u0437\u0430\u043a\u0440\u0435\u043f\u0438\u043b\u0438\u0441\u044c \u0432 \u0438\u043d\u0434\u0443\u0441\u0442\u0440\u0438\u0438, \u043f\u043e\u043a\u0430 \u043d\u0435\u0442. \u0418 \u043f\u043e\u044d\u0442\u043e\u043c\u0443 Kafka \u0434\u043b\u044f \u0431\u0430\u0437\u044b \u0434\u0430\u043d\u043d\u044b\u0445<br \/>  \u0432\u043e\u0441\u043f\u0440\u0438\u043d\u0438\u043c\u0430\u0435\u0442\u0441\u044f \u0442\u0430\u043a.<\/p>\n<p>  <\/p>\n<p>\u0418 \u0435\u0441\u043b\u0438 \u0432\u043e\u043f\u0440\u043e\u0441 \u043e \u0442\u043e\u043c, \u0433\u0434\u0435 Kafka \u043f\u0440\u0438\u043c\u0435\u043d\u044f\u0435\u0442\u0441\u044f \u043d\u0435\u043f\u0440\u0430\u0432\u0438\u043b\u044c\u043d\u043e, \u0447\u0443\u0442\u044c \u043f\u0435\u0440\u0435\u0438\u043d\u0430\u0447\u0438\u0442\u044c \u0438 \u0441\u043f\u0440\u043e\u0441\u0438\u0442\u044c: \u0430 \u0433\u0434\u0435 \u043d\u0435\u0440\u0430\u0446\u0438\u043e\u043d\u0430\u043b\u044c\u043d\u043e \u0438\u043b\u0438 \u0441\u043b\u0438\u0448\u043a\u043e\u043c \u0434\u043e\u0440\u043e\u0433\u043e \u043f\u0440\u0438\u043c\u0435\u043d\u044f\u0442\u044c Kafka \u2014 \u044d\u0442\u043e \u043b\u043e\u0433\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u0435. \u041c\u043e\u0436\u043d\u043e \u0434\u0435\u043b\u0430\u0442\u044c \u043b\u043e\u0433\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u0435 \u043d\u0430 Kafka \u0438 \u043f\u0438\u0441\u0430\u0442\u044c \u0432\u043e\u043a\u0440\u0443\u0433 \u0447\u0442\u043e-\u0442\u043e \u0438\u043b\u0438 \u043c\u043e\u0436\u043d\u043e \u0432\u0437\u044f\u0442\u044c \u0433\u043e\u0442\u043e\u0432\u044b\u0439 ELK, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0442\u044b \u00ab\u043a\u043b\u0438\u043a\u00bb \u2014 \u0438 \u0443\u0441\u0442\u0430\u043d\u043e\u0432\u0438\u043b. \u0417\u0430\u0447\u0435\u043c \u0442\u0443\u0442 Kafka? \u041d\u0435\u0440\u0430\u0446\u0438\u043e\u043d\u0430\u043b\u044c\u043d\u043e. \u041d\u043e \u0435\u0441\u043b\u0438 \u043d\u0443\u0436\u043d\u0430 \u0441\u0438\u0441\u0442\u0435\u043c\u0430 \u043b\u043e\u0433\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f, \u043a\u043e\u0442\u043e\u0440\u0430\u044f \u043f\u043e\u0442\u043e\u043c \u043e\u0431\u0440\u0430\u0431\u0430\u0442\u044b\u0432\u0430\u0435\u0442 \u043a\u0443\u0447\u0443 \u043c\u0438\u043a\u0440\u043e\u0441\u0435\u0440\u0432\u0438\u0441\u043e\u0432, \u043e\u0442\u043f\u0440\u0430\u0432\u043b\u044f\u0435\u0442\u0441\u044f \u0447\u0435\u0440\u0435\u0437 \u0421onnect \u0432 \u043a\u0430\u043a\u043e\u0439 \u0442\u043e-\u0442\u043e data warehouse \u0438 \u0442\u0430\u043a \u0434\u0430\u043b\u0435\u0435, \u0442\u043e \u0442\u0443\u0442 \u0443\u0436\u0435 \u043d\u0430\u0434\u043e \u043f\u043e\u0434\u0443\u043c\u0430\u0442\u044c, \u0447\u0442\u043e ELK \u043d\u0435 \u043f\u0440\u0438\u043d\u0435\u0441\u0451\u0442 \u043f\u043e\u043b\u044c\u0437\u044b, \u0430 \u043f\u0440\u0438\u043d\u0435\u0441\u0435\u0442<br \/>  \u0431\u043e\u043b\u044c\u0448\u0435 \u0432\u0440\u0435\u0434\u0430, \u043f\u043e\u043a\u0430 \u0431\u0443\u0434\u0435\u0448\u044c \u043a\u043e\u0432\u044b\u0440\u044f\u0442\u044c\u0441\u044f \u0432\u043d\u0443\u0442\u0440\u0438 Elastic.<\/p>\n<p>  <\/p>\n<p>\u041c\u0410\u0420\u0421\u0415\u041b\u042c \u0418\u0411\u0420\u0410\u0415\u0412: \u0421\u0443\u043f\u0435\u0440, \u0441 \u044d\u0442\u0438\u043c \u0432\u043e\u043f\u0440\u043e\u0441\u043e\u043c \u0440\u0430\u0437\u043e\u0431\u0440\u0430\u043b\u0438\u0441\u044c. \u0422\u0435\u043f\u0435\u0440\u044c \u043f\u043e\u043d\u044f\u0442\u043d\u043e, \u0447\u0442\u043e \u0437\u0430 \u0438\u043d\u0441\u0442\u0440\u0443\u043c\u0435\u043d\u0442 \u0442\u0430\u043a\u043e\u0439 Kafka. \u041f\u043e\u0439\u0434\u0435\u043c \u0434\u0430\u043b\u044c\u0448\u0435.<\/p>\n<p>  <\/p>\n<h2 id=\"kafka-vs-rabbitmq\">Kafka vs RabbitMQ<\/h2>\n<p>  <\/p>\n<p>\u041c\u0410\u0420\u0421\u0415\u041b\u042c \u0418\u0411\u0420\u0410\u0415\u0412: \u041d\u0430 \u043a\u0440\u0443\u0433\u043b\u044b\u0439 \u0441\u0442\u043e\u043b \u0437\u0430\u0440\u0435\u0433\u0438\u0441\u0442\u0440\u0438\u0440\u043e\u0432\u0430\u043b\u0438\u0441\u044c \u043e\u043a\u043e\u043b\u043e \u043f\u043e\u043b\u0443\u0442\u043e\u0440\u0430 \u0442\u044b\u0441\u044f\u0447 \u0447\u0435\u043b\u043e\u0432\u0435\u043a, \u043e\u043d\u0438 \u0437\u0430\u0434\u0430\u043b\u0438 \u043f\u043e\u0440\u044f\u0434\u043a\u0430 200 \u0432\u043e\u043f\u0440\u043e\u0441\u043e\u0432, 90-95% \u043a\u043e\u0442\u043e\u0440\u044b\u0445 \u0431\u044b\u043b\u0438 \u043f\u0440\u043e RabbitMQ.<\/p>\n<p>  <\/p>\n<p>\u0418 \u043f\u0435\u0440\u0432\u044b\u0439 \u0432\u043e\u043f\u0440\u043e\u0441: \u0432 \u0447\u0435\u043c \u043e\u0442\u043b\u0438\u0447\u0438\u0435? \u041a\u0430\u043a \u044f \u043f\u043e\u043d\u044f\u043b, Kafka \u2014 \u044d\u0442\u043e \u043c\u043d\u043e\u0433\u043e\u0444\u0443\u043d\u043a\u0446\u0438\u043e\u043d\u0430\u043b\u044c\u043d\u044b\u0439 \u0438\u043d\u0441\u0442\u0440\u0443\u043c\u0435\u043d\u0442. RabbitMQ \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u0441 \u043e\u0447\u0435\u0440\u0435\u0434\u044f\u043c\u0438 \u0438 \u0434\u043b\u044f \u044d\u0442\u043e\u0433\u043e \u043f\u0440\u0435\u0434\u043d\u0430\u0437\u043d\u0430\u0447\u0435\u043d. \u0422\u0430\u043a \u043b\u0438 \u044d\u0442\u043e?<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u041f\u043e \u0431\u043e\u043b\u044c\u0448\u043e\u043c\u0443 \u0441\u0447\u0435\u0442\u0443, \u043d\u0430\u0432\u0435\u0440\u043d\u043e\u0435, \u0434\u0430. RabbitMQ \u043f\u043b\u0430\u043d\u0438\u0440\u043e\u0432\u0430\u043b\u0441\u044f \u0432 \u043f\u0435\u0440\u0432\u0443\u044e \u043e\u0447\u0435\u0440\u0435\u0434\u044c \u0434\u043b\u044f \u043e\u0447\u0435\u0440\u0435\u0434\u0435\u0439, \u0438 \u043f\u043e-\u0434\u0440\u0443\u0433\u043e\u043c\u0443 \u043c\u044b \u0435\u0433\u043e \u043d\u0435 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043b\u0438. Kafka \u0434\u0438\u0437\u0430\u0439\u043d\u0438\u043b\u0430\u0441\u044c \u043a\u0430\u043a \u0431\u044b \u0441 \u0434\u0440\u0443\u0433\u043e\u0439 \u043f\u0430\u0440\u0430\u0434\u0438\u0433\u043c\u044b, \u0447\u0442\u043e \u043b\u0438. \u0412\u043e\u2013\u043f\u0435\u0440\u0432\u044b\u0445, \u0442\u0430\u043c \u043e\u0447\u0435\u0440\u0435\u0434\u0438 \u0438 \u0442\u043e\u043f\u0438\u043a\u0438 \u2014 \u044d\u0442\u043e \u0440\u0430\u0437\u043d\u0430\u044f \u0441\u0435\u043c\u0430\u043d\u0442\u0438\u043a\u0430, \u043e\u043d\u0438 \u043d\u0435 \u043f\u043e\u0432\u0442\u043e\u0440\u044f\u044e\u0442 \u0441\u0432\u043e\u0438 \u0441\u0432\u043e\u0439\u0441\u0442\u0432\u0430. \u0412\u043e-\u0432\u0442\u043e\u0440\u044b\u0445, \u0443 Kafka \u0431\u044b\u043b\u0430 \u0438\u0437\u043d\u0430\u0447\u0430\u043b\u044c\u043d\u043e \u0446\u0435\u043b\u044c \u2014 \u0432\u044b\u0441\u043e\u043a\u0430\u044f \u043f\u0440\u043e\u043f\u0443\u0441\u043a\u043d\u0430\u044f \u0441\u043f\u043e\u0441\u043e\u0431\u043d\u043e\u0441\u0442\u044c, \u0440\u0435\u0430\u043b\u044c\u043d\u043e \u0432\u044b\u0441\u043e\u043a\u0430\u044f. RabbitMQ, \u044f \u0438 \u043d\u0430 \u0441\u0432\u043e\u0435\u043c \u043f\u0440\u0438\u043c\u0435\u0440\u0435 \u0437\u043d\u0430\u044e, \u0438 \u043e\u0442 \u0440\u0430\u0437\u043d\u044b\u0445 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0439 \u0441\u043b\u044b\u0448\u0430\u043b, \u0447\u0442\u043e 20-30 K RPS \u0434\u043b\u044f RabbitMQ \u2014 \u044d\u0442\u043e \u043f\u0440\u0435\u0434\u0435\u043b. \u041a\u0430\u043a \u043e\u0447\u0435\u0440\u0435\u0434\u044c \u043e\u043d \u0432 \u043f\u0440\u0438\u043d\u0446\u0438\u043f\u0435 \u0438 \u043d\u0435 \u0434\u043e\u043b\u0436\u0435\u043d \u0432\u044b\u0434\u0435\u0440\u0436\u0438\u0432\u0430\u0442\u044c \u0431\u043e\u043b\u044c\u0448\u0435. \u041d\u0430\u0432\u0435\u0440\u043d\u044f\u043a\u0430, \u0435\u0441\u0442\u044c \u043a\u0430\u043a\u043e\u0439-\u043d\u0438\u0431\u0443\u0434\u044c \u043c\u0430\u0441\u0442\u0435\u0440 RabbitMQ, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0435\u0433\u043e \u0442\u0430\u043a \u0441\u043e\u0431\u0435\u0440\u0451\u0442, \u0447\u0442\u043e \u044d\u0442\u043e \u0431\u0443\u0434\u0435\u0442 \u0441\u0443\u043f\u0435\u0440\u0441\u043a\u043e\u0440\u043e\u0441\u0442\u043d\u043e\u0439 \u0440\u0435\u0430\u043a\u0442\u0438\u0432\u043d\u044b\u0439 RabbitMQ, \u043d\u043e \u044d\u0442\u043e \u0442\u043e\u0436\u0435 \u0432\u043e\u043f\u0440\u043e\u0441: \u0430 \u0437\u0430\u0447\u0435\u043c \u043e\u043d \u0442\u0430\u043a\u043e\u0439, \u0435\u0441\u043b\u0438 \u0435\u0441\u0442\u044c \u0442\u0435\u0445\u043d\u043e\u043b\u043e\u0433\u0438\u0438 \u043f\u043e\u0434 \u044d\u0442\u043e\u0442 \u043a\u0435\u0439\u0441? \u0410 \u0434\u043b\u044f Kafka \u043f\u0435\u0440\u0435\u043c\u0430\u043b\u044b\u0432\u0430\u0442\u044c \u0441\u043e\u0442\u043d\u0438, \u043c\u0438\u043b\u043b\u0438\u043e\u043d\u044b RPS \u2014 \u044d\u0442\u043e \u043d\u043e\u0440\u043c\u0430\u043b\u044c\u043d\u043e. \u041e\u043d\u0430 \u0434\u0438\u0437\u0430\u0439\u043d\u0438\u043b\u0430\u0441\u044c \u0438\u043c\u0435\u043d\u043d\u043e \u0434\u043b\u044f \u044d\u0442\u0438\u0445 \u0446\u0435\u043b\u0435\u0439. \u041d\u043e, \u0441 \u0434\u0440\u0443\u0433\u043e\u0439 \u0441\u0442\u043e\u0440\u043e\u043d\u044b, \u0435\u0441\u043b\u0438 \u043d\u0443\u0436\u0435\u043d low latency \u0438 \u0432\u0430\u043c \u0432\u0430\u0436\u043d\u043e, \u0447\u0442\u043e\u0431\u044b \u043e\u0434\u043d\u043e \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0435 \u0431\u044b\u0441\u0442\u0440\u0435\u043d\u044c\u043a\u043e \u0434\u043e\u043b\u0435\u0442\u0435\u043b\u043e \u0434\u043e \u043a\u043e\u043d\u0441\u044e\u043c\u0435\u0440\u0430, \u043d\u0438\u0433\u0434\u0435 \u043d\u0435 \u043f\u043e\u0442\u0435\u0440\u044f\u043b\u043e\u0441\u044c, \u0442\u043e \u0437\u0434\u0435\u0441\u044c RabbitMQ \u043c\u043e\u0436\u0435\u0442 \u0438 \u043b\u0443\u0447\u0448\u0435 \u043f\u043e\u0434\u043e\u0439\u0442\u0438.<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u0422\u0443\u0442 \u043d\u0443\u0436\u043d\u043e \u0443\u0442\u043e\u0447\u043d\u0438\u0442\u044c, \u0447\u0442\u043e Kafka \u0432\u0441\u0451 \u0440\u0430\u0432\u043d\u043e \u043c\u043e\u0436\u043d\u043e \u0437\u0430\u0442\u044e\u043d\u0438\u0442\u044c \u043f\u043e\u0434 low latency, \u0447\u0442\u043e\u0431\u044b \u0443 \u0432\u0430\u0441 \u0431\u044b\u043b\u0438 \u043c\u0438\u043b\u043b\u0438\u0441\u0435\u043a\u0443\u043d\u0434\u043d\u044b\u0435 \u0437\u0430\u0434\u0435\u0440\u0436\u043a\u0438. \u041d\u043e \u0434\u043b\u044f \u044d\u0442\u043e\u0433\u043e \u043d\u0443\u0436\u043d\u043e \u043f\u043e\u0441\u0442\u0430\u0440\u0430\u0442\u044c\u0441\u044f.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u041d\u0430\u0434\u043e \u043f\u043e\u0442\u0440\u0443\u0434\u0438\u0442\u044c\u0441\u044f, \u0434\u0430. \u0418 \u044d\u0442\u043e \u0431\u0443\u0434\u0435\u0442, \u0441\u043a\u043e\u0440\u0435\u0435 \u0432\u0441\u0435\u0433\u043e, \u0432\u044b\u0434\u0435\u043b\u0435\u043d\u043d\u044b\u0439 \u043a\u043b\u0430\u0441\u0442\u0435\u0440. \u041d\u0435 \u043f\u043e\u043b\u0443\u0447\u0438\u0442\u0441\u044f \u0441\u0434\u0435\u043b\u0430\u0442\u044c \u043e\u0434\u0438\u043d \u043a\u043b\u0430\u0441\u0442\u0435\u0440 \u0438 \u043f\u043e\u0434 high-throughput \u0438 \u043f\u043e\u0434 low latency.<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u0421\u0430\u043c\u043e\u0435 \u0433\u043b\u0430\u0432\u043d\u043e\u0435, \u0434\u0435\u0439\u0441\u0442\u0432\u0438\u0442\u0435\u043b\u044c\u043d\u043e, \u0432 \u0440\u0430\u0437\u043d\u043e\u0439 \u0441\u0435\u043c\u0430\u043d\u0442\u0438\u043a\u0435 \u0442\u043e\u043f\u0438\u043a\u043e\u0432 \u0438 \u043e\u0447\u0435\u0440\u0435\u0434\u0435\u0439. \u0412\u0438\u043a\u0442\u043e\u0440 \u0443\u0436\u0435 \u043d\u0430\u0437\u0432\u0430\u043b \u0434\u0435\u0441\u044f\u0442\u043e\u043a \u0442\u0435\u0445\u043d\u043e\u043b\u043e\u0433\u0438\u0439 \u043f\u043e\u0434\u043e\u0431\u043d\u044b\u0445 \u043e\u0447\u0435\u0440\u0435\u0434\u0435\u0439. \u0412 \u043a\u043e\u043d\u0446\u0435\u043f\u0446\u0438\u0438 \u043e\u0447\u0435\u0440\u0435\u0434\u0438 \u0443 \u0432\u0430\u0441 \u0435\u0441\u0442\u044c \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e\u0441\u0442\u044c \u0443\u0434\u0430\u043b\u0438\u0442\u044c \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0435 \u0438\u043b\u0438 \u043f\u043e\u043c\u0435\u0442\u0438\u0442\u044c \u0435\u0433\u043e \u043a\u0430\u043a \u043f\u0440\u043e\u0447\u0438\u0442\u0430\u043d\u043d\u043e\u0435. \u0412\u044b \u043c\u043e\u0436\u0435\u0442\u0435 \u044d\u0442\u043e \u0441\u0434\u0435\u043b\u0430\u0442\u044c \u0432 \u043b\u044e\u0431\u043e\u043c \u043f\u043e\u0440\u044f\u0434\u043a\u0435. Kafka \u2014 \u044d\u0442\u043e \u043b\u043e\u0433, \u043a\u043e\u0442\u043e\u0440\u043e\u043c\u0443 \u0432\u0441\u0435\u0433\u0434\u0430 \u0430\u043f\u043f\u0435\u043d\u0434\u044f\u0442\u0441\u044f \u0437\u0430\u043f\u0438\u0441\u0438. \u0418\u0437 \u043d\u0435\u0433\u043e \u043d\u0438\u0447\u0435\u0433\u043e \u0443\u0434\u0430\u043b\u0438\u0442\u044c \u043d\u0435\u043b\u044c\u0437\u044f. \u0421\u043e\u043e\u0442\u0432\u0435\u0442\u0441\u0442\u0432\u0435\u043d\u043d\u043e, \u0435\u0434\u0438\u043d\u0441\u0442\u0432\u0435\u043d\u043d\u0430\u044f \u043c\u0435\u0442\u043a\u0430 \u0442\u043e\u0433\u043e, \u0433\u0434\u0435 \u0441\u0435\u0439\u0447\u0430\u0441 \u043d\u0430\u0445\u043e\u0434\u0438\u0442\u0441\u044f \u0432\u0430\u0448 \u043a\u043e\u043d\u0441\u044e\u043c\u0435\u0440 \u2014 \u044d\u0442\u043e \u0442\u0435\u043a\u0443\u0449\u0438\u0439 upset, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0432\u0441\u0435\u0433\u0434\u0430 \u043c\u043e\u043d\u043e\u0442\u043e\u043d\u043d\u043e \u0432\u043e\u0437\u0440\u0430\u0441\u0442\u0430\u0435\u0442 (monotonic increasing). \u0421\u043e\u043e\u0442\u0432\u0435\u0442\u0441\u0442\u0432\u0435\u043d\u043d\u043e, \u0432\u044b \u043d\u0435 \u043c\u043e\u0436\u0435\u0442\u0435 \u043f\u0440\u043e\u0441\u0442\u043e \u0432\u0437\u044f\u0442\u044c \u0438 \u0431\u0435\u0437 \u0434\u043e\u043f\u043e\u043b\u043d\u0438\u0442\u0435\u043b\u044c\u043d\u044b\u0445 \u0438\u043d\u0441\u0442\u0440\u0443\u043c\u0435\u043d\u0442\u043e\u0432 \u043f\u0440\u043e\u043f\u0443\u0441\u0442\u0438\u0442\u044c \u043a\u0430\u043a\u043e\u0435-\u0442\u043e \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0435, \u0447\u0442\u043e\u0431\u044b \u043f\u043e\u0442\u043e\u043c \u043a \u043d\u0435\u043c\u0443 \u0432\u0435\u0440\u043d\u0443\u0442\u044c\u0441\u044f \u0438 \u043f\u0440\u043e\u0447\u0438\u0442\u0430\u0442\u044c. \u0412\u0430\u043c \u043f\u0440\u0438\u0448\u043b\u043e 10 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0439, \u0432\u044b \u0434\u043e\u043b\u0436\u043d\u044b \u0434\u0430\u0442\u044c Kafka \u043e\u0442\u0432\u0435\u0442: \u0432\u044b \u0438\u0445 \u0432\u0441\u0435 \u043e\u0431\u0440\u0430\u0431\u043e\u0442\u0430\u043b\u0438 \u0438\u043b\u0438 \u043d\u0435\u0442.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u041d\u0435 \u043c\u043e\u0433\u0443 \u0443\u0434\u0435\u0440\u0436\u0430\u0442\u044c\u0441\u044f \u0438 \u043d\u0435 \u0441\u043a\u0430\u0437\u0430\u0442\u044c, \u0447\u0442\u043e \u0442\u0430\u043a \u0442\u043e\u0436\u0435 \u043c\u043e\u0436\u043d\u043e\u2026<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u041c\u043e\u0436\u043d\u043e, \u0434\u0430. \u0423 Uber \u0435\u0441\u0442\u044c \u0431\u043e\u043b\u044c\u0448\u0430\u044f \u0441\u0442\u0430\u0442\u044c\u044f: <a href=\"https:\/\/eng.uber.com\/reliable-reprocessing\/\">Dead Letter Queues with Apache Kafka<\/a>. \u041f\u0440\u043e \u0442\u043e, \u043a\u0430\u043a \u043e\u043d\u0438 \u0441\u0434\u0435\u043b\u0430\u043b\u0438 Dead letter queue.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u041a\u0441\u0442\u0430\u0442\u0438, \u0432 \u0447\u0435\u043c \u043e\u0442\u043b\u0438\u0447\u0438\u0435 \u0442\u043e\u0433\u043e \u0436\u0435 Dead letter queue \u2014 \u0432 RabbitMQ \u043e\u043d\u043e \u0432\u0441\u0442\u0440\u043e\u0435\u043d\u043e \u0432 \u0431\u0440\u043e\u043a\u0435\u0440, \u0430 \u0432 Kafka \u043a\u043b\u0438\u0435\u043d\u0442\u044b \u0438\u043b\u0438 \u0447\u0442\u043e-\u0442\u043e \u0442\u0430\u043c \u043d\u0430\u0434 \u0431\u0440\u043e\u043a\u0435\u0440\u0430\u043c\u0438 \u0440\u0435\u0430\u043b\u0438\u0437\u0443\u0435\u0442 \u044d\u0442\u0443 \u0432\u0441\u044e \u043b\u043e\u0433\u0438\u043a\u0443.<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u0412\u0430\u043c \u043f\u043e\u043d\u0430\u0434\u043e\u0431\u0438\u0442\u0441\u044f \u0435\u0449\u0451 \u0434\u043e\u043f\u043e\u043b\u043d\u0438\u0442\u0435\u043b\u044c\u043d\u044b\u0439 \u0444\u0443\u043d\u043a\u0446\u0438\u043e\u043d\u0430\u043b, \u0447\u0442\u043e\u0431\u044b \u044d\u0442\u043e \u0441\u0434\u0435\u043b\u0430\u0442\u044c. \u0418 \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e, \u043c\u043e\u0436\u043d\u043e \u0432\u0437\u044f\u0442\u044c \u043f\u0440\u043e\u0441\u0442\u043e out of the box \u0438\u043d\u0441\u0442\u0440\u0443\u043c\u0435\u043d\u0442\u044b, \u0430 \u0443\u0436 \u0442\u0435\u043c \u0431\u043e\u043b\u0435\u0435, \u0435\u0441\u043b\u0438 \u0432\u044b \u043d\u0430\u0445\u043e\u0434\u0438\u0442\u0435\u0441\u044c \u0433\u0434\u0435-\u0442\u043e \u0432 Public Cloud, \u0432 Amazon \u0438\u043b\u0438 \u0432 Google, \u0443 \u0432\u0430\u0441 \u0443\u0436\u0435 \u0435\u0441\u0442\u044c \u043e\u0447\u0435\u0440\u0435\u0434\u0438, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0434\u043e\u0441\u0442\u0443\u043f\u043d\u044b \u0438\u0437 \u043a\u043e\u0440\u043e\u0431\u043a\u0438.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u041e\u043f\u044f\u0442\u044c \u0436\u0435, \u0440\u0430\u0437\u043b\u0438\u0447\u0438\u044f \u0435\u0441\u0442\u044c. \u041e\u043d\u0438 \u0442\u043e\u0436\u0435 \u0438\u0437 \u0442\u043e\u043f\u0438\u043a\u043e\u0432 \u0432\u044b\u0442\u0435\u043a\u0430\u044e\u0442, \u043a\u0430\u043a \u0421\u0430\u0448\u0430 \u0441\u043a\u0430\u0437\u0430\u043b, \u0447\u0442\u043e \u0435\u0441\u0442\u044c offset consumer-groups, \u0432 RabbitMQ \u0442\u044b \u043d\u0435 \u043e\u0441\u043e\u0431\u043e \u043f\u043e\u0447\u0438\u0442\u0430\u0435\u0448\u044c \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u0438\u043c\u0438 \u043a\u043e\u043d\u0441\u044e\u043c\u0435\u0440\u0430\u043c\u0438 \u0438\u0437 \u043e\u0434\u043d\u043e\u0439 \u043e\u0447\u0435\u0440\u0435\u0434\u0438. \u042d\u0442\u043e \u043c\u043e\u0436\u043d\u043e \u0441\u0434\u0435\u043b\u0430\u0442\u044c, \u0440\u0430\u0437\u043c\u043d\u043e\u0436\u0438\u0432 \u043e\u0447\u0435\u0440\u0435\u0434\u044c. \u0410 \u0432 Kafka \u0442\u044b \u0447\u0438\u0442\u0430\u0435\u0448\u044c \u043e\u0434\u0438\u043d \u0438 \u0442\u043e\u0442 \u0436\u0435 \u043b\u043e\u0433, \u0438 \u0443 \u0442\u0435\u0431\u044f \u0430\u043f\u0441\u0435\u0442\u044b \u0442\u0440\u0435\u043a\u0430\u044e\u0442\u0441\u044f \u043d\u0435\u0437\u0430\u0432\u0438\u0441\u0438\u043c\u043e \u0434\u043b\u044f \u0440\u0430\u0437\u043d\u044b\u0445 consumer-groups. \u042d\u0442\u043e \u0432\u043f\u043e\u043b\u043d\u0435 \u0441\u0435\u0431\u0435 \u043b\u0435\u0433\u043a\u043e \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442.<\/p>\n<p>  <\/p>\n<p>\u0412\u0418\u041a\u0422\u041e\u0420 \u0413\u0410\u041c\u041e\u0412: \u0412\u043e\u0442 \u044d\u0442\u043e, \u043a\u0441\u0442\u0430\u0442\u0438, \u0442\u0430\u043a\u043e\u0439 \u043e\u0447\u0435\u043d\u044c \u0438\u043d\u0442\u0435\u0440\u0435\u0441\u043d\u044b\u0439 \u043c\u043e\u043c\u0435\u043d\u0442, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u043d\u0435 \u0432\u0441\u0435\u0433\u0434\u0430 \u0432\u0441\u0435 \u0434\u043e \u043a\u043e\u043d\u0446\u0430 \u043f\u043e\u043d\u0438\u043c\u0430\u044e\u0442. \u041b\u044e\u0434\u0438 \u0441\u043f\u0440\u0430\u0448\u0438\u0432\u0430\u044e\u0442: \u043a\u0430\u043a \u043c\u043d\u0435 \u0441\u0434\u0435\u043b\u0430\u0442\u044c \u0442\u0430\u043a, \u0447\u0442\u043e\u0431\u044b \u043a\u0442\u043e-\u0442\u043e \u0434\u0440\u0443\u0433\u043e\u0439 \u043d\u0435 \u043f\u0440\u043e\u0447\u0438\u0442\u0430\u043b \u043c\u043e\u0435 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0435? \u0418\u043b\u0438 \u043d\u0430\u043e\u0431\u043e\u0440\u043e\u0442, \u0447\u0442\u043e\u0431\u044b \u0441\u043c\u043e\u0433. \u042f \u0434\u0443\u043c\u0430\u044e, \u044d\u0442\u043e \u043e\u043f\u044f\u0442\u044c \u0432\u0441\u0435 \u0441\u0432\u044f\u0437\u0430\u043d\u043e \u0441 \u0442\u0435\u043c, \u0447\u0442\u043e Kafka \u043d\u0435 \u043f\u043e\u044f\u0432\u0438\u043b\u0430\u0441\u044c \u0438\u0437 \u043d\u0430\u0443\u0447\u043d\u043e\u0433\u043e \u0438\u043d\u0441\u0442\u0438\u0442\u0443\u0442\u0430, \u0433\u0434\u0435 \u0432\u0441\u0435 \u0431\u044b\u043b\u043e \u0441\u0440\u0430\u0437\u0443 \u043f\u0440\u043e\u0434\u0443\u043c\u0430\u043d\u043e, \u043e\u043d\u0430 \u043f\u043e\u044f\u0432\u0438\u043b\u0430\u0441\u044c \u043e\u0442 \u0441\u043e\u0445\u0438: \u043b\u044e\u0434\u0438 \u0440\u0435\u0448\u0430\u043b\u0438 \u0441\u043e\u0431\u0441\u0442\u0432\u0435\u043d\u043d\u0443\u044e \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u0443. \u0412\u043e\u0442 \u044d\u0442\u0430 \u043a\u0430\u0442\u0435\u0433\u043e\u0440\u0438\u044f \u0438\u043c\u0435\u043d, \u043a\u043e\u0442\u043e\u0440\u0430\u044f \u043f\u0440\u0438\u0448\u043b\u0430 \u0438\u0437 \u043c\u0435\u0441\u0441\u0435\u0434\u0436\u0438\u043d\u0433\u0430, \u0438 \u0432\u044b\u0437\u044b\u0432\u0430\u0435\u0442 \u043e\u043f\u0440\u0435\u0434\u0435\u043b\u0435\u043d\u043d\u044b\u0435 \u0432\u043e\u043f\u0440\u043e\u0441\u044b. \u0422\u043e\u043f\u0438\u043a, \u0431\u0440\u043e\u043a\u0435\u0440 \u2014 \u044d\u0442\u043e \u0436\u0435 \u0432\u0441\u0435 \u043c\u0435\u0441\u0441\u0435\u0434\u0436\u0438\u043d\u0433. \u0418 \u043b\u044e\u0434\u0438 \u043d\u0430\u043a\u043b\u0430\u0434\u044b\u0432\u0430\u044e\u0442 \u043f\u043e\u0432\u0435\u0440\u0445 \u044d\u0442\u043e\u0433\u043e \u043a\u0430\u043a\u043e\u0439-\u0442\u043e \u0441\u0432\u043e\u0439 \u043f\u0440\u0435\u0434\u044b\u0434\u0443\u0449\u0438\u0439 \u0431\u044d\u043a\u0433\u0440\u0430\u0443\u043d\u0434.<\/p>\n<p>  <\/p>\n<p>\u0421\u043e\u043e\u0442\u0432\u0435\u0442\u0441\u0442\u0432\u0435\u043d\u043d\u043e, \u043a\u043e\u0433\u0434\u0430 \u0443 \u0442\u0435\u0431\u044f \u0435\u0441\u0442\u044c \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e\u0441\u0442\u044c \u0440\u0435\u043f\u0440\u043e\u0446\u0435\u0441\u0441\u0438\u0442\u044c \u043b\u043e\u0433 \u0438 \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0430\u0442\u044c\u0441\u044f \u043a \u043a\u0430\u043a\u0438\u043c-\u0442\u043e \u0432\u0435\u0449\u0430\u043c, \u043d\u0430\u043f\u0440\u0438\u043c\u0435\u0440, \u0442\u044b \u043f\u043e\u043b\u0443\u0447\u0438\u043b \u0434\u0430\u043d\u043d\u044b\u0435 \u0438 \u0437\u043d\u0430\u0435\u0448\u044c, \u0447\u0442\u043e \u0443 \u0442\u0432\u043e\u0435\u0433\u043e \u043f\u043e\u0441\u0442\u0430\u0432\u0449\u0438\u043a\u0430 \u0434\u0430\u043d\u043d\u044b\u0445 \u043d\u0435\u0442 \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e\u0441\u0442\u0438 \u0438\u0445 \u043f\u0435\u0440\u0435\u0447\u0438\u0442\u0430\u0442\u044c. \u041e\u043d\u0438 \u0443 \u0442\u0435\u0431\u044f \u0443\u0436\u0435 \u043b\u0435\u0436\u0430\u0442 \u0432 \u0441\u0438\u0441\u0442\u0435\u043c\u0435, \u0438 \u0442\u044b \u0438\u0445 \u043c\u043e\u0436\u0435\u0448\u044c \u043f\u0440\u043e\u0441\u0442\u043e \u043f\u0440\u0435\u043f\u0440\u043e\u0446\u0435\u0441\u0441\u0438\u0442\u044c, \u043c\u043e\u0436\u0435\u0442 \u0431\u044b\u0442\u044c, \u043f\u0440\u0438\u043c\u0435\u043d\u0438\u0442\u044c \u0430\u043b\u0433\u043e\u0440\u0438\u0442\u043c. \u0418\u043b\u0438 \u0442\u044b \u043f\u0440\u043e\u0441\u0442\u043e \u043f\u044b\u0442\u0430\u0435\u0448\u044c\u0441\u044f \u0447\u0442\u043e-\u0442\u043e \u043d\u043e\u0432\u043e\u0435 \u0438\u0437 \u044d\u0442\u0438\u0445 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u043e\u0432 \u043f\u043e\u043b\u0443\u0447\u0438\u0442\u044c. \u041a\u0430\u043a\u0443\u044e-\u0442\u043e \u0438\u043d\u0444\u043e\u0440\u043c\u0430\u0446\u0438\u044e. \u042d\u0442\u043e \u0443\u043d\u0438\u043a\u0430\u043b\u044c\u043d\u0430\u044f \u0432\u0435\u0449\u044c, \u043a\u043e\u0442\u043e\u0440\u0430\u044f \u0435\u0441\u0442\u044c \u0432 Kafka, \u0438 \u0437\u0430\u0447\u0430\u0441\u0442\u0443\u044e \u043e \u043d\u0435\u0439 \u0437\u0430\u0431\u044b\u0432\u0430\u044e\u0442. <\/p>\n<p>  <\/p>\n<p>\u041d\u043e, \u043a\u0430\u043a \u0442\u043e\u043b\u044c\u043a\u043e \u043c\u044b \u043d\u0430\u0447\u0438\u043d\u0430\u0435\u043c \u0433\u043e\u0432\u043e\u0440\u0438\u0442\u044c \u043f\u0440\u043e \u0432\u0435\u0449\u0438, \u043a\u0430\u043a Event Sourcing, QSRs, \u0432\u043e\u0442 \u044d\u0442\u0438 \u0432\u0441\u0435 \u043c\u0438\u043a\u0440\u043e\u0441\u0435\u0440\u0432\u0438\u0441\u044b \u043e\u0431\u043c\u0435\u043d\u0430 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u044f\u043c\u0438, \u0432\u043e\u0442 \u0442\u0443\u0442 \u043b\u044e\u0434\u0438 \u043d\u0430\u0447\u0438\u043d\u0430\u044e\u0442 \u0432\u0438\u0434\u0435\u0442\u044c \u0431\u0435\u043d\u0435\u0444\u0438\u0442\u044b. \u0415\u0441\u043b\u0438 \u043e\u043d\u0438 \u043f\u0440\u0438\u0445\u043e\u0434\u044f\u0442 \u0432 Kafka \u0438\u0437 \u043c\u0438\u0440\u0430 \u043e\u0431\u043c\u0435\u043d\u0430 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u044f\u043c\u0438, \u043a\u0430\u043a\u043e\u0433\u043e-\u0442\u043e \u0442\u0430\u043c \u0438\u0432\u0435\u043d\u0442\u0441\u043e\u0440\u0441\u0438\u043d\u0433\u0430 (\u0445\u043e\u0442\u044f \u044d\u0442\u043e \u0442\u043e\u0436\u0435 \u043d\u0435 \u0447\u0438\u0441\u0442\u0430\u044f Event Sourcing \u0441\u0438\u0441\u0442\u0435\u043c\u0430, \u043c\u043e\u0436\u043d\u043e \u043d\u0430\u043a\u0440\u0443\u0442\u0438\u0442\u044c \u0438 \u0434\u043e\u0431\u0430\u0432\u0438\u0442\u044c, \u0435\u0441\u0442\u044c \u0442\u0430\u043c \u043e\u043f\u0440\u0435\u0434\u0435\u043b\u0435\u043d\u043d\u044b\u0435 \u0440\u0435\u0448\u0435\u043d\u0438\u044f, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u044d\u0442\u043e \u0432\u0441\u0435 \u0440\u0435\u0430\u043b\u0438\u0437\u0443\u044e\u0442), \u043b\u044e\u0434\u0438 \u0432\u0438\u0434\u044f\u0442 \u0431\u0435\u043d\u0435\u0444\u0438\u0442. \u0418 \u043e\u043f\u044f\u0442\u044c \u0436\u0435, \u043f\u0440\u0438 \u0434\u043e\u0431\u0430\u0432\u043b\u0435\u043d\u0438\u0438 \u043a\u0430\u043a\u0438\u0445-\u0442\u043e \u043a\u043b\u0435\u0432\u044b\u0445 \u0448\u0442\u0443\u043a, \u043d\u0430\u043f\u0440\u0438\u043c\u0435\u0440, \u0445\u0440\u0430\u043d\u0438\u043b\u0438\u0449\u0430, \u043a\u043e\u0442\u043e\u0440\u043e\u0435 \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u0435\u0442 \u0445\u0440\u0430\u043d\u0438\u0442\u044c \u0432\u0441\u044e \u0438\u0441\u0442\u043e\u0440\u0438\u044e \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0439 \u0432 \u0441\u0438\u0441\u0442\u0435\u043c\u0435, \u043a\u043e\u0442\u043e\u0440\u043e\u0435 \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u0435\u0442 \u0432 \u043b\u044e\u0431\u043e\u0439 \u043c\u043e\u043c\u0435\u043d\u0442 \u0432 \u043b\u044e\u0431\u043e\u0439 \u043d\u043e\u0432\u043e\u0439 \u0441\u0438\u0441\u0442\u0435\u043c\u0435 \u043f\u0435\u0440\u0435\u0447\u0438\u0442\u0430\u0442\u044c \u044d\u0442\u0438 \u0434\u0430\u043d\u043d\u044b\u0435 \u043f\u043e \u043d\u043e\u0432\u043e\u0439 \u0438 \u043f\u043e\u043b\u0443\u0447\u0438\u0442\u044c \u0440\u0435\u043f\u043e\u0440\u0442.<\/p>\n<p>  <\/p>\n<p>\u041d\u0430\u043f\u0440\u0438\u043c\u0435\u0440, \u0443 \u043d\u0430\u0441 \u0435\u0441\u0442\u044c \u0441\u0438\u0441\u0442\u0435\u043c\u0430, \u043a\u043e\u0442\u043e\u0440\u0430\u044f \u0437\u0430\u0445\u0432\u0430\u0442\u044b\u0432\u0430\u0435\u0442 \u0432\u0441\u0435 \u0437\u0430\u043a\u0430\u0437\u044b, \u0438 \u043d\u0430\u043c \u0432 \u043a\u043e\u043d\u0446\u0435 \u0433\u043e\u0434\u0430 \u043d\u0443\u0436\u043d\u043e \u043f\u043e\u0434\u0432\u0435\u0441\u0442\u0438 \u0438\u0442\u043e\u0433\u0438 \u2014 \u0437\u0430\u043f\u0443\u0441\u0442\u0438\u0442\u044c \u0431\u043e\u043b\u044c\u0448\u0443\u044e \u0434\u0436\u043e\u0431\u0443 (\u043e\u0442 \u0430\u043d\u0433\u043b. job), \u043a\u043e\u0442\u043e\u0440\u0430\u044f \u0432\u044b\u0434\u0430\u0441\u0442 \u0440\u0435\u043f\u043e\u0440\u0442. \u042d\u0442\u0430 \u0434\u0436\u043e\u0431\u0430 \u0437\u0430\u043f\u0443\u0441\u043a\u0430\u0435\u0442\u0441\u044f \u043e\u0434\u0438\u043d \u0440\u0430\u0437 \u0432 \u0433\u043e\u0434, \u043d\u043e \u0434\u0430\u043d\u043d\u044b\u0435 \u043d\u0443\u0436\u043d\u043e \u043e\u0442\u043a\u0443\u0434\u0430-\u0442\u043e \u0431\u0440\u0430\u0442\u044c. \u0427\u0442\u043e\u0431\u044b \u043d\u0435 \u043f\u0435\u0440\u0435\u043b\u0438\u0432\u0430\u0442\u044c \u0438\u0437 \u043e\u0434\u043d\u043e\u0433\u043e \u043c\u0435\u0441\u0442\u0430 \u0432 \u0434\u0440\u0443\u0433\u043e\u0435, \u043e\u043d\u0430 \u0432\u044b\u0447\u0438\u0442\u044b\u0432\u0430\u0435\u0442 \u0434\u0430\u043d\u043d\u044b\u0435 \u0438\u0437 Kafka \u043e\u0434\u0438\u043d \u0440\u0430\u0437 \u0438 \u043f\u043e\u043b\u0443\u0447\u0430\u0435\u0442 \u043e\u0442\u0447\u0451\u0442.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0418\u043d\u043e\u0433\u0434\u0430 \u0431\u044b\u0432\u0430\u044e\u0442 \u0432\u043e\u043f\u0440\u043e\u0441\u044b: \u0443 \u043c\u0435\u043d\u044f \u0432 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438 RabbitMQ, \u043c\u044b \u0441\u043b\u0443\u0448\u0430\u043b\u0438, \u0447\u0442\u043e Kafka \u043a\u0440\u0443\u0442\u0430\u044f \u0438 \u043c\u043e\u0434\u043d\u0430\u044f, \u0434\u0430\u0432\u0430\u0439\u0442\u0435 \u043c\u044b \u0435\u0435 \u043f\u043e\u0441\u0442\u0430\u0432\u0438\u043c \u043d\u0430 \u0437\u0430\u043c\u0435\u043d\u0443, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e \u043e\u043d\u0430 \u043b\u0443\u0447\u0448\u0435. \u0425\u043e\u0442\u044f RabbitMQ \u043d\u0435 \u0445\u0443\u0436\u0435 \u0432 \u043a\u0430\u043a\u0438\u0445-\u0442\u043e \u0441\u0432\u043e\u0438\u0445 \u043a\u0435\u0439\u0441\u0430\u0445, \u0438 \u0432\u043e\u043e\u0431\u0449\u0435 \u043e\u0442\u043b\u0438\u0447\u043d\u0430\u044f \u0448\u0442\u0443\u043a\u0430 \u0434\u043b\u044f \u043e\u0447\u0435\u0440\u0435\u0434\u0435\u0439.<\/p>\n<p>  <\/p>\n<p>\u0412\u0418\u041a\u0422\u041e\u0420 \u0413\u0410\u041c\u041e\u0412: \u0421\u0430\u043c\u043e\u0435 \u043b\u0443\u0447\u0448\u0435\u0435 \u043f\u0440\u043e\u0433\u0440\u0430\u043c\u043c\u043d\u043e\u0435 \u043e\u0431\u0435\u0441\u043f\u0435\u0447\u0435\u043d\u0438\u0435 \u2014 \u044d\u0442\u043e \u0442\u043e, \u043a\u043e\u0442\u043e\u0440\u044b\u043c \u0432\u044b \u0443\u043c\u0435\u0435\u0442\u0435 \u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c\u0441\u044f. \u0415\u0441\u043b\u0438 \u0432\u044b \u0443\u043c\u0435\u0435\u0442\u0435 \u0445\u043e\u0440\u043e\u0448\u043e \u0432\u0430\u0440\u0438\u0442\u044c RabbitMQ, \u0438 \u043e\u043d \u0443 \u0432\u0430\u0441 \u043d\u0435 \u043f\u0430\u0434\u0430\u0435\u0442, \u043f\u043e \u043d\u043e\u0447\u0430\u043c \u0432\u0430\u043c \u043d\u0435 \u0437\u0432\u043e\u043d\u044f\u0442 \u0430\u0434\u043c\u0438\u043d\u044b, \u0430 \u0435\u0441\u043b\u0438 \u0432\u044b \u0430\u0434\u043c\u0438\u043d, \u0442\u043e \u043d\u0435 \u0437\u0432\u043e\u043d\u044f\u0442 \u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u0435\u043b\u0438-\u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u0447\u0438\u043a\u0438, \u0442\u043e \u0432\u043e\u043e\u0431\u0449\u0435 \u043d\u0435\u0442 \u043f\u0440\u043e\u0431\u043b\u0435\u043c. <\/p>\n<p>  <\/p>\n<p>\u0418\u0412\u0410\u041d \u0421\u0418\u0414\u041e\u0420\u041e\u0412: \u042f \u0432\u043e\u0442 \u0432\u0441\u0435 \u0436\u0434\u0430\u043b, \u043a\u043e\u0433\u0434\u0430 \u0443\u0440\u043e\u0432\u0435\u043d\u044c \u0430\u0431\u0441\u0442\u0440\u0430\u043a\u0446\u0438\u0438 \u043f\u043e\u0434\u043d\u0438\u043c\u0435\u0442\u0441\u044f, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e, \u0432\u043e\u0442 \u043a\u0430\u043a \u044f \u043d\u0430\u043f\u0438\u0441\u0430\u043b \u043f\u0440\u043e \u0441\u0432\u043e\u044e \u0434\u043e\u043b\u0436\u043d\u043e\u0441\u0442\u044c, \u043e\u0442 \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u0447\u0438\u043a\u0430 \u043a \u0430\u0440\u0445\u0438\u0442\u0435\u043a\u0442\u043e\u0440\u0443 \u0438 \u043e\u0431\u0440\u0430\u0442\u043d\u043e\u2026<\/p>\n<p>  <\/p>\n<p>\u0412: \u0422\u044b \u043a\u0430\u043a \u0425\u043e\u0431\u0431\u0438\u0442 \u2014 \u0442\u0443\u0434\u0430 \u0438 \u043e\u0431\u0440\u0430\u0442\u043d\u043e. <\/p>\n<p>  <\/p>\n<p>\u0418\u0412\u0410\u041d \u0421\u0418\u0414\u041e\u0420\u041e\u0412: \u0414\u0430, \u0438 \u043a\u0430\u0436\u0434\u044b\u0439 \u0440\u0430\u0437 \u0441 \u043f\u0440\u0438\u043a\u043b\u044e\u0447\u0435\u043d\u0438\u044f\u043c\u0438. \u0412\u043e\u043e\u0431\u0449\u0435, \u0440\u0430\u0437\u043d\u0438\u0446\u0430 \u043c\u0435\u0436\u0434\u0443 RabbitMQ \u0438 Kafka \u2014 \u044d\u0442\u043e \u0442\u043e, \u0447\u0442\u043e \u043e\u0434\u043d\u0430 \u043c\u0430\u0448\u0438\u043d\u0430 \u043a\u0440\u0430\u0441\u043d\u0430\u044f, \u0434\u0440\u0443\u0433\u0430\u044f \u0441\u0438\u043d\u044f\u044f. \u0415\u0441\u043b\u0438 \u0432 \u043e\u0431\u0449\u0435\u043c \u0433\u043e\u0432\u043e\u0440\u0438\u0442\u044c. \u0412 \u0430\u0440\u0445\u0438\u0442\u0435\u043a\u0442\u0443\u0440\u043d\u043e\u043c \u043f\u043b\u0430\u043d\u0435. \u0423 \u043c\u0435\u043d\u044f \u0435\u0441\u0442\u044c \u0442\u0435\u043e\u0440\u0438\u044f, \u043e\u0442\u043a\u0443\u0434\u0430 \u043d\u0430\u0447\u0430\u043b\u0438\u0441\u044c \u044d\u0442\u0438 \u0445\u043e\u043b\u0438\u0432\u0430\u0440\u044b, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0434\u043e\u0441\u0442\u0430\u0442\u043e\u0447\u043d\u043e \u0436\u0435\u0441\u0442\u043a\u043e \u0446\u0435\u043f\u043b\u044f\u044e\u0442\u0441\u044f \u0437\u0430 \u043d\u0435\u0437\u043d\u0430\u0447\u0438\u0442\u0435\u043b\u044c\u043d\u044b\u0435 \u043d\u044e\u0430\u043d\u0441\u044b. Kafka \u0438 RabbitMQ \u0441\u0442\u0430\u0440\u0442\u043e\u0432\u0430\u043b\u0438 \u043f\u0440\u0438\u043c\u0435\u0440\u043d\u043e \u0432 \u043e\u0434\u043d\u043e \u0432\u0440\u0435\u043c\u044f. RabbitMQ \u0431\u044b\u043b \u043d\u0430\u043f\u0438\u0441\u0430\u043b \u043d\u0430 Erlang. \u0422\u043e\u0433\u0434\u0430 \u0431\u044b\u043b \u0444\u0435\u0442\u0438\u0448, \u0432\u0441\u0435 \u0432\u0435\u0440\u0438\u043b\u0438, \u0447\u0442\u043e Erlang \u2014 \u044d\u0442\u043e \u043f\u043e\u0442\u0440\u044f\u0441\u0430\u044e\u0449\u0430\u044f \u0441\u0438\u0441\u0442\u0435\u043c\u0430, \u043a\u043e\u0442\u043e\u0440\u0430\u044f \u0441\u043f\u0430\u0441\u0451\u0442 \u043c\u0438\u0440 \u0442\u0435\u0445\u043d\u043e\u043b\u043e\u0433\u0438\u0439 \u0438 \u0443\u0441\u043a\u043e\u0440\u0438\u0442 \u0432\u0441\u0451, \u0430 Java \u2014 \u044d\u0442\u043e \u043a\u0440\u043e\u0432\u0430\u0432\u044b\u0439 \u0438\u043d\u0442\u0435\u0440\u043f\u0440\u0430\u0439\u0437, \u043c\u043e\u043b, \u0447\u0442\u043e\u0431\u044b \u043c\u043d\u0435 \u0437\u0430\u043f\u0443\u0441\u0442\u0438\u0442\u044c \u043d\u0430 \u043c\u043e\u0435\u0439 VPS-\u043a\u0435 \u0441 16-\u044e \u043c\u0435\u0433\u0430\u0431\u0430\u0439\u0442\u0430\u043c\u0438 \u043f\u0430\u043c\u044f\u0442\u0438 Java, \u043f\u0440\u0438\u0434\u0435\u0442\u0441\u044f \u043a\u0443\u043f\u0438\u0442\u044c \u0435\u0449\u0435 10 \u0442\u0430\u043a\u0438\u0445 VPS. <\/p>\n<p>  <\/p>\n<p>\u0414\u0430\u043b\u044c\u0448\u0435 \u0437\u0430\u043a\u043e\u043d \u041c\u0443\u0440\u0430 \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442, \u0432\u044b\u0447\u0438\u0441\u043b\u0438\u0442\u0435\u043b\u044c\u043d\u0430\u044f \u043c\u043e\u0449\u043d\u043e\u0441\u0442\u044c \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u0435\u0442 \u043d\u0435 \u0434\u0443\u043c\u0430\u0442\u044c \u043e \u0442\u043e\u043c, \u0447\u0442\u043e \u0432\u043d\u0443\u0442\u0440\u0438 (\u0435\u0441\u043b\u0438 \u043d\u0435 HFT, \u0430 \u0442\u0430\u043c \u0432\u044b\u0447\u0438\u0441\u043b\u0438\u0442\u0435\u043b\u044c\u043d\u044b\u0435 \u043c\u043e\u0449\u043d\u043e\u0441\u0442\u0438 \u043a\u0438\u0442\u0430\u0439\u0441\u043a\u0438\u0445 \u043f\u043e\u043b\u0443\u043f\u0440\u043e\u0432\u043e\u0434\u043d\u0438\u043a\u043e\u0432\u044b\u0445 \u0437\u0430\u0432\u043e\u0434\u043e\u0432 \u0441\u043f\u0440\u0430\u0432\u043b\u044f\u044e\u0442\u0441\u044f). \u0421\u0435\u0439\u0447\u0430\u0441 \u044d\u0442\u043e \u0430\u0431\u0441\u043e\u043b\u044e\u0442\u043d\u043e \u043e\u0434\u0438\u043d\u0430\u043a\u043e\u0432\u044b\u0435 \u0442\u0435\u0445\u043d\u043e\u043b\u043e\u0433\u0438\u0438, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0440\u0430\u0437\u043e\u0448\u043b\u0438\u0441\u044c \u0443\u0436\u0435 \u0441 \u0442\u043e\u0447\u043a\u0438 \u0437\u0440\u0435\u043d\u0438\u044f \u0431\u0438\u0437\u043d\u0435\u0441\u0430.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0422\u044b \u0432\u043e\u0442 \u043f\u043e\u0434\u0432\u043e\u0434\u0438\u0448\u044c, \u0447\u0442\u043e Kafka \u0438 RabbitMQ \u2014 \u044d\u0442\u043e \u043e\u0434\u043d\u043e \u0438 \u0442\u043e \u0436\u0435, \u043d\u043e \u043d\u0435\u0442. \u041d\u0430\u043f\u043e\u043c\u043d\u044e, \u043d\u0430 \u0432\u0441\u044f\u043a\u0438\u0439 \u0441\u043b\u0443\u0447\u0430\u0439.<\/p>\n<p>  <\/p>\n<p>\u0418\u0412\u0410\u041d \u0421\u0418\u0414\u041e\u0420\u041e\u0412: \u042f \u0433\u043e\u0432\u043e\u0440\u0438\u043b \u0441 \u0442\u043e\u0447\u043a\u0438 \u0437\u0440\u0435\u043d\u0438\u044f \u0430\u0440\u0445\u0438\u0442\u0435\u043a\u0442\u0443\u0440\u044b.<\/p>\n<p>  <\/p>\n<p>\u041c\u0410\u0420\u0421\u0415\u041b\u042c \u0418\u0411\u0420\u0410\u0415\u0412: \u0418\u0442\u0430\u043a, \u043c\u044b \u043e\u0431\u0441\u0443\u0434\u0438\u043b\u0438, \u0447\u0442\u043e \u0440\u0430\u0437\u043d\u0438\u0446\u0430 \u0443 Kafka \u0438 RabbitMQ \u0435\u0441\u0442\u044c. \u0418 \u0432\u0441\u0435\u0433\u0434\u0430 \u043d\u0443\u0436\u043d\u043e \u0438\u0434\u0442\u0438 \u043e\u0442 \u043f\u0440\u043e\u0434\u0443\u043a\u0442\u0430, \u043e\u0442 \u0437\u0430\u0434\u0430\u0447\u0438 \u0438 \u043e\u0442 \u0443\u043c\u0435\u043d\u0438\u044f \u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c\u0441\u044f \u0438\u043d\u0441\u0442\u0440\u0443\u043c\u0435\u043d\u0442\u043e\u043c. \u041d\u0435 \u0441\u0442\u043e\u0438\u0442 \u0441\u043b\u0435\u043f\u043e \u0432\u0435\u0440\u0438\u0442\u044c \u0441\u0442\u0430\u0442\u044c\u044f\u043c, \u0433\u0434\u0435 \u043d\u0430\u043f\u0438\u0441\u0430\u043d\u043e, \u0447\u0442\u043e Kafka \u2014 \u044d\u0442\u043e \u043a\u0440\u0443\u0442\u043e, \u0438 \u0443 \u0432\u0430\u0441 \u0441\u0430\u0439\u0442\u0438\u043a \u043d\u0430 WordPress \u0432\u0437\u043b\u0435\u0442\u0438\u0442 \u043f\u043e\u0441\u043b\u0435 \u0435\u0451 \u0443\u0441\u0442\u0430\u043d\u043e\u0432\u043a\u0438.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u042f \u0434\u043e\u0431\u0430\u0432\u043b\u044e \u0435\u0449\u0451 \u043f\u0440\u043e RabbitMQ. \u0411\u044b\u0432\u0430\u0435\u0442 \u0435\u0449\u0451, \u0447\u0442\u043e \u0442\u044b \u043f\u0440\u043e\u0441\u0442\u043e \u0443\u043f\u0438\u0440\u0430\u0435\u0448\u044c\u0441\u044f \u0432 \u0442\u0435\u0445\u043d\u043e\u043b\u043e\u0433\u0438\u044e. \u0423 \u043d\u0430\u0441 \u0431\u044b\u043b\u0438 \u0441\u043b\u0443\u0447\u0430\u0438, \u043a\u043e\u0433\u0434\u0430 RabbitMQ \u043f\u0440\u0438\u0445\u043e\u0434\u0438\u043b\u043e\u0441\u044c \u043e\u0442\u043a\u043b\u044e\u0447\u0430\u0442\u044c \u0440\u0435\u043f\u043b\u0438\u043a\u0443, \u0447\u0442\u043e\u0431\u044b \u043e\u043d \u0443\u0441\u043f\u0435\u0432\u0430\u043b. \u0418 \u044d\u0442\u043e \u0443\u0436\u0435 \u0437\u0432\u043e\u043d\u043e\u0447\u0435\u043a, \u0447\u0442\u043e \u043d\u0430\u0434\u043e \u0447\u0442\u043e-\u0442\u043e \u0434\u0440\u0443\u0433\u043e\u0435. \u041f\u043b\u044e\u0441 \u0432\u0441\u044f\u043a\u0438\u0435 \u0438\u0441\u0442\u043e\u0440\u0438\u0438 \u0441 \u043d\u0435\u0441\u0442\u0430\u0431\u0438\u043b\u044c\u043d\u044b\u043c\u0438 \u0441\u0435\u0442\u044f\u043c\u0438. \u0422\u0430\u043c \u0442\u043e\u0436\u0435 RabbitMQ \u0440\u0430\u0437\u0432\u0430\u043b\u0438\u0432\u0430\u0435\u0442\u0441\u044f \u0445\u043e\u0440\u043e\u0448\u043e, \u0438 \u0441\u0442\u043e\u0438\u0442 \u0441\u0440\u0430\u0437\u0443 \u0441\u043c\u043e\u0442\u0440\u0435\u0442\u044c \u0434\u0440\u0443\u0433\u0438\u0435 \u0442\u0435\u0445\u043d\u043e\u043b\u043e\u0433\u0438\u0438. \u0414\u0430\u0436\u0435 \u0435\u0441\u043b\u0438 \u0432\u044b \u0441\u0435\u0439\u0447\u0430\u0441 \u0443\u043c\u0435\u0435\u0442\u0435 \u0441 \u043d\u0438\u043c \u0440\u0430\u0431\u043e\u0442\u0430\u0442\u044c, \u0442\u043e Multi-DC \u0441 \u043d\u0435\u0441\u0442\u0430\u0431\u0438\u043b\u044c\u043d\u044b\u043c\u0438 \u0441\u0435\u0442\u044f\u043c\u0438 \u0438 \u0432\u044b\u0441\u043e\u043a\u0438\u0435 \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0438 \u043d\u0435 \u043e\u0447\u0435\u043d\u044c \u043f\u043e\u0434\u0445\u043e\u0434\u044f\u0442 \u0434\u043b\u044f RabbitMQ.<\/p>\n<p>  <\/p>\n<h2 id=\"kak-pravilno-ekspluatirovat-kafka\">\u041a\u0430\u043a \u043f\u0440\u0430\u0432\u0438\u043b\u044c\u043d\u043e \u044d\u043a\u0441\u043f\u043b\u0443\u0430\u0442\u0438\u0440\u043e\u0432\u0430\u0442\u044c Kafka<\/h2>\n<p>  <\/p>\n<p>\u041c\u0410\u0420\u0421\u0415\u041b\u042c \u0418\u0411\u0420\u0410\u0415\u0412: \u041f\u0440\u0435\u0434\u043f\u043e\u043b\u043e\u0436\u0438\u043c, \u043c\u044b \u0440\u0435\u0448\u0438\u043b\u0438, \u0447\u0442\u043e \u043f\u0440\u043e\u0435\u043a\u0442 \u043f\u043e\u0434\u0445\u043e\u0434\u0438\u0442 \u0434\u043b\u044f Kafka, \u043c\u044b \u0435\u0433\u043e \u043f\u043e\u0441\u0442\u0430\u0432\u0438\u043b\u0438. \u041d\u043e \u043f\u043e\u0441\u0442\u0430\u0432\u0438\u0442\u044c \u0438 \u043d\u0430\u0441\u0442\u0440\u043e\u0438\u0442\u044c \u2014 \u044d\u0442\u043e \u043f\u043e\u043b\u0434\u0435\u043b\u0430. \u0414\u0430\u043b\u044c\u0448\u0435 \u0435\u0433\u043e \u043d\u0430\u0434\u043e \u044d\u043a\u0441\u043f\u043b\u0443\u0430\u0442\u0438\u0440\u043e\u0432\u0430\u0442\u044c. \u041a\u0430\u043a \u043f\u0440\u0430\u0432\u0438\u043b\u044c\u043d\u043e \u044d\u043a\u0441\u043f\u043b\u0443\u0430\u0442\u0438\u0440\u043e\u0432\u0430\u0442\u044c Kafka? \u041d\u0430 \u0447\u0442\u043e \u0441\u0442\u043e\u0438\u0442 \u043e\u0431\u0440\u0430\u0442\u0438\u0442\u044c \u0432\u043d\u0438\u043c\u0430\u043d\u0438\u0435? \u041a\u0430\u043a\u0438\u0435 \u043c\u0435\u0442\u0440\u0438\u043a\u0438 \u0441\u043e\u0431\u0438\u0440\u0430\u0442\u044c? <\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u041d\u0430\u0434\u043e \u043d\u0430\u0447\u0430\u0442\u044c \u0441 \u0432\u043e\u043f\u0440\u043e\u0441\u0430, \u00ab\u0410 \u043d\u0430 \u0447\u0451\u043c \u0432\u044b \u0441\u043e\u0431\u0438\u0440\u0430\u0435\u0442\u0435\u0441\u044c \u0437\u0430\u043f\u0443\u0441\u043a\u0430\u0442\u044c Kafka: \u043d\u0430 \u0432\u0438\u0440\u0442\u0443\u0430\u043b\u044c\u043d\u044b\u0445 \u043c\u0430\u0448\u0438\u043d\u0430\u0445, \u043d\u0430 Kubernetes, \u043d\u0430 bare metal?\u00bb \u0418 \u043e\u0442 \u044d\u0442\u043e\u0433\u043e \u0441\u043f\u043e\u0441\u043e\u0431\u044b \u0440\u0430\u0437\u0432\u0451\u0440\u0442\u043a\u0438 \u0438 \u0438\u043d\u0441\u0442\u0430\u043b\u043b\u044f\u0446\u0438\u0438 \u0431\u0443\u0434\u0443\u0442 \u043a\u0430\u0440\u0434\u0438\u043d\u0430\u043b\u044c\u043d\u043e \u043c\u0435\u043d\u044f\u0442\u044c\u0441\u044f. Multi-DC \u0438 \u043f\u0440\u043e\u0447\u0438\u0435 \u0441\u0435\u0442\u0430\u043f\u044b \u0434\u043e\u0431\u0430\u0432\u043b\u044f\u044e\u0442 \u043f\u0440\u043e\u0431\u043b\u0435\u043c.<br \/>  \u041a\u043b\u0430\u0441\u0441\u0438\u0447\u0435\u0441\u043a\u0430\u044f \u0438\u043d\u0441\u0442\u0430\u043b\u043b\u044f\u0446\u0438\u044f Kafka \u2014 \u044d\u0442\u043e \u043d\u0435\u043a\u0438\u0439 \u043a\u043b\u0430\u0441\u0442\u0435\u0440 \u0441 \u043c\u0438\u043d\u0438\u043c\u0443\u043c \u0442\u0440\u0435\u043c\u044f \u043d\u043e\u0434\u0430\u043c\u0438, \u0447\u0442\u043e\u0431\u044b \u0434\u0430\u043d\u043d\u044b\u0435 \u043a\u043e\u043f\u0438\u0440\u043e\u0432\u0430\u043b\u0438\u0441\u044c \u043a\u0430\u043a \u043c\u0438\u043d\u0438\u043c\u0443\u043c \u0434\u0432\u0430\u0436\u0434\u044b. \u0422\u043e \u0435\u0441\u0442\u044c \u0443 \u0432\u0430\u0441 \u0431\u0443\u0434\u0435\u0442 \u0442\u0440\u0438 \u0431\u0440\u043e\u043a\u0435\u0440\u0430. \u041a\u0430\u043a \u0432\u044b \u0431\u0443\u0434\u0435\u0442\u0435 \u0438\u0445 \u0437\u0430\u043f\u0443\u0441\u043a\u0430\u0442\u044c, \u044d\u0442\u043e \u0437\u0430\u0432\u0438\u0441\u0438\u0442 \u043e\u0442 \u0432\u0430\u0441: \u043c\u043e\u0436\u0435\u0442\u0435 \u0441 \u043f\u043e\u043c\u043e\u0449\u044c\u044e Puppet, \u043c\u043e\u0436\u0435\u0442\u0435 \u043f\u043e\u043f\u0440\u043e\u0431\u043e\u0432\u0430\u0442\u044c \u0441\u0434\u0435\u043b\u0430\u0442\u044c \u044d\u0442\u043e \u0432 Kubernetes, \u0447\u0442\u043e \u0431\u0443\u0434\u0435\u0442 \u043d\u0430\u043c\u043d\u043e\u0433\u043e \u0441\u043b\u043e\u0436\u043d\u0435\u0435. Kafka \u2014 \u044d\u0442\u043e \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0435\u043b\u0451\u043d\u043d\u0430\u044f \u0441\u0438\u0441\u0442\u0435\u043c\u0430, \u0443 Kafka \u0435\u0441\u0442\u044c \u043e\u0434\u0438\u043d \u043d\u0435\u0431\u043e\u043b\u044c\u0448\u043e\u0439 \u043d\u0435\u0434\u043e\u0441\u0442\u0430\u0442\u043e\u043a, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u043f\u043e\u0441\u0442\u0435\u043f\u0435\u043d\u043d\u043e \u0443\u0441\u0442\u0440\u0430\u043d\u044f\u0435\u0442\u0441\u044f, \u044d\u0442\u043e \u0437\u0430\u0432\u0438\u0441\u0438\u043c\u043e\u0441\u0442\u044c \u043e\u0442 ZooKeeper. <\/p>\n<p>  <\/p>\n<p>ZooKeeper \u2014 \u044d\u0442\u043e \u0435\u0449\u0451 \u043e\u0434\u043d\u0430 \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0435\u043b\u0451\u043d\u043d\u0430\u044f \u0441\u0438\u0441\u0442\u0435\u043c\u0430, \u0441 \u0435\u0449\u0451 \u043e\u0434\u043d\u0438\u043c \u0441\u0435\u0442\u043e\u043c \u0441\u043e\u0431\u0441\u0442\u0432\u0435\u043d\u043d\u044b\u0445 \u043e\u0441\u043e\u0431\u0435\u043d\u043d\u043e\u0441\u0442\u0435\u0439 (\u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433\u043e\u0432\u044b\u0445, \u0438\u043d\u0441\u0442\u0430\u043b\u043b\u044f\u0446\u0438\u043e\u043d\u043d\u044b\u0445 \u0438 \u0432\u0441\u0435\u0433\u043e \u043e\u0441\u0442\u0430\u043b\u044c\u043d\u043e\u0433\u043e), \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0432\u0430\u043c \u043f\u0440\u0438\u0434\u0451\u0442\u0441\u044f \u0442\u043e\u0436\u0435 \u0440\u0430\u0437\u0432\u0435\u0440\u043d\u0443\u0442\u044c \u0438 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c. <\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u041f\u043e\u0447\u0435\u043c\u0443 \u043d\u0435\u0434\u043e\u0441\u0442\u0430\u0442\u043e\u043a?<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u041d\u0443 \u043d\u0435 \u0437\u043d\u0430\u044e, \u0435\u0441\u043b\u0438 \u0442\u044b \u0441\u0430\u0434\u043e\u043c\u0430\u0437\u043e\u0445\u0438\u0441\u0442, \u0442\u043e \u0442\u0435\u0431\u0435 \u043c\u043e\u0436\u0435\u0442 \u0431\u044b\u0442\u044c \u043f\u0440\u0438\u043a\u043e\u043b\u044c\u043d\u043e \u0437\u0430\u043f\u0443\u0441\u043a\u0430\u0442\u044c \u0434\u0432\u0435 \u0441\u0438\u0441\u0442\u0435\u043c\u044b, \u0447\u0442\u043e\u0431\u044b \u043a\u0430\u043a\u043e\u0433\u043e-\u0442\u043e \u043f\u0440\u043e\u0434\u0443\u043a\u0442\u043e\u0432\u043e\u0433\u043e \u043a\u0435\u0439\u0441\u0430 \u0434\u043e\u0431\u0438\u0442\u044c\u0441\u044f, \u043d\u043e \u0432\u043e\u043e\u0431\u0449\u0435\u2026 <\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u041d\u0443 \u0441\u043b\u0443\u0448\u0430\u0439, \u0442\u044b \u044d\u0442\u043e\u0442 ZooKeeper \u043e\u0434\u0438\u043d \u0440\u0430\u0437 \u043e\u043f\u0438\u0441\u044b\u0432\u0430\u0435\u0448\u044c \u0432 Puppet, \u0438 \u043f\u043e\u0442\u043e\u043c \u0442\u0435\u0431\u0435 \u0443\u0436\u0435 \u043d\u0435 \u0432\u0430\u0436\u043d\u043e \u0431\u0443\u0434\u0435\u0442, Kafka \u043e\u0434\u043d\u0430 \u0438\u043b\u0438 \u0441 ZooKeeper.<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u041c\u044b \u0436\u0435 \u043e\u0431\u0441\u0443\u0436\u0434\u0430\u0435\u043c \u044d\u0442\u043e \u0441 \u0442\u043e\u0447\u043a\u0438 \u0437\u0440\u0435\u043d\u0438\u044f DevOps? \u0414\u043b\u044f \u043b\u044e\u0431\u043e\u0433\u043e DevOps-\u0438\u043d\u0436\u0435\u043d\u0435\u0440\u0430 \u044d\u0442\u043e \u0435\u0449\u0451 \u043e\u0434\u043d\u0430 \u0441\u0438\u0441\u0442\u0435\u043c\u0430, \u043a\u043e\u0442\u043e\u0440\u0443\u044e \u043d\u0443\u0436\u043d\u043e \u0437\u043d\u0430\u0442\u044c, \u0430\u043b\u0435\u0440\u0442\u0438\u0442\u044c, \u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u0442\u044c, \u043a\u043e\u0442\u043e\u0440\u0430\u044f \u0443 \u0432\u0430\u0441 \u0431\u0443\u0434\u0435\u0442 \u043f\u0430\u0434\u0430\u0442\u044c.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0421 \u0434\u0440\u0443\u0433\u043e\u0439 \u0441\u0442\u043e\u0440\u043e\u043d\u044b, ZooKeeper \u043c\u043e\u0436\u0435\u0442 \u043d\u0435 \u0442\u043e\u043b\u044c\u043a\u043e \u0434\u043b\u044f Kafka \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c\u0441\u044f, \u043e\u043d \u0432\u043f\u043e\u043b\u043d\u0435 \u043c\u043e\u0436\u0435\u0442 \u0436\u0438\u0442\u044c \u0432 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438 \u0432 \u043a\u0430\u043a\u0438\u0445-\u0442\u043e \u0434\u0440\u0443\u0433\u0438\u0445 \u0441\u0438\u0441\u0442\u0435\u043c\u0430\u0445.<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u0410 \u044d\u0442\u043e\u0433\u043e, \u043a\u0441\u0442\u0430\u0442\u0438, \u043b\u0443\u0447\u0448\u0435 \u043d\u0435 \u0434\u0435\u043b\u0430\u0442\u044c. \u041b\u0443\u0447\u0448\u0435 \u043d\u0435 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c ZooKeeper \u0434\u043b\u044f \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u0438\u0445 \u0441\u0438\u0441\u0442\u0435\u043c.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0421 \u044d\u0442\u0438\u043c \u044f \u0441\u043e\u0433\u043b\u0430\u0441\u0435\u043d, \u043d\u043e \u044f \u043f\u0440\u043e \u0434\u0440\u0443\u0433\u043e\u0435. \u042f \u043f\u0440\u043e \u0442\u043e, \u0447\u0442\u043e \u0442\u044b \u0433\u0434\u0435-\u0442\u043e \u0432 Puppet \u0438\u043c\u0435\u0435\u0448\u044c \u043e\u043f\u0438\u0441\u0430\u043d\u043d\u044b\u0435 \u043c\u043e\u0434\u0443\u043b\u0438 \u043f\u043e\u0434 ZooKeeper, \u0438 \u0441\u0435\u0442\u0430\u043f\u0438\u0448\u044c \u0442\u044b \u0435\u0433\u043e \u0434\u043b\u044f Kafka \u0438\u043b\u0438 \u0434\u043b\u044f ClickHouse \u2014 \u043d\u0435 \u0432\u0430\u0436\u043d\u043e. \u041f\u043e\u043d\u044f\u0442\u043d\u043e, \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044f \u0438\u0437\u043c\u0435\u043d\u0438\u0442\u0441\u044f, \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0430 \u0431\u0443\u0434\u0435\u0442 \u0434\u0440\u0443\u0433\u0430\u044f, \u043d\u043e \u0442\u044b \u0443\u0436\u0435 \u0443\u043c\u0435\u0435\u0448\u044c \u0441 \u043d\u0438\u043c \u0440\u0430\u0431\u043e\u0442\u0430\u0442\u044c \u0438 \u0443 \u0442\u0435\u0431\u044f \u0443\u0436\u0435 \u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433 \u043d\u0430\u0441\u0442\u0440\u043e\u0435\u043d (\u043d\u0435\u043c\u043d\u043e\u0433\u043e \u0447\u0442\u043e-\u0442\u043e \u0434\u0440\u0443\u0433\u043e\u0435 \u043f\u043e\u044f\u0432\u0438\u0442\u0441\u044f, \u043a\u043e\u043d\u0435\u0447\u043d\u043e). \u042f \u043d\u0435 \u0440\u0430\u0437\u0434\u0435\u043b\u044f\u044e \u043d\u0435\u043b\u044e\u0431\u043e\u0432\u044c \u043a ZooKeeper.<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u041d\u0438\u043a\u0430\u043a\u043e\u0439 \u043d\u0435\u043b\u044e\u0431\u0432\u0438 \u043d\u0435\u0442, \u043f\u0440\u043e\u0441\u0442\u043e \u043d\u0443\u0436\u043d\u043e \u043e\u0442\u0434\u0430\u0432\u0430\u0442\u044c \u0441\u0435\u0431\u0435 \u043e\u0442\u0447\u0451\u0442, \u0432\u043e\u0442 \u0438 \u0432\u0441\u0451\u2026<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0414\u0430 \u043b\u0430\u0434\u043d\u043e! <\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u041a \u0441\u043b\u043e\u0432\u0443 \u0441\u043a\u0430\u0437\u0430\u0442\u044c, \u0432 \u043c\u043e\u0435\u0439 \u043a\u043e\u043c\u0430\u043d\u0434\u0435 \u0432 Booking.com \u0437\u0430 \u0432\u0441\u0451 \u0432\u0440\u0435\u043c\u044f \u044d\u043a\u0441\u043f\u043b\u0443\u0430\u0442\u0430\u0446\u0438\u0438 Kafka \u043d\u0435 \u0431\u044b\u043b\u043e \u043a\u0430\u043a\u0438\u0445-\u0442\u043e \u0431\u043e\u043b\u044c\u0448\u0438\u0445 \u043f\u0440\u043e\u0431\u043b\u0435\u043c \u0441 ZooKeeper. \u041d\u043e, \u0447\u0442\u043e\u0431\u044b \u0438\u0445 \u043d\u0435 \u0431\u044b\u043b\u043e, \u043d\u0430\u043c \u043f\u0440\u0438\u0448\u043b\u043e\u0441\u044c \u0435\u0433\u043e \u043f\u043e\u0434\u0440\u043e\u0431\u043d\u043e \u0438\u0437\u0443\u0447\u0438\u0442\u044c. <\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: ZooKeeper \u2014 \u043e\u0447\u0435\u043d\u044c \u0441\u0442\u0430\u0440\u0430\u044f \u0441\u0438\u0441\u0442\u0435\u043c\u0430. \u0423 \u043d\u0430\u0441 \u0442\u043e\u0436\u0435 \u0441 \u043d\u0438\u043c \u043d\u0438\u043a\u043e\u0433\u0434\u0430 \u043d\u0435 \u0431\u044b\u043b\u043e \u043f\u0440\u043e\u0431\u043b\u0435\u043c.<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u041d\u043e \u0443 \u043d\u0430\u0441 \u0432 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438 \u0432\u0441\u0451 \u0436\u0435 \u0431\u044b\u043b\u0438 \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u044b \u0441 ZooKeeper. \u041d\u0435 \u0432 \u043c\u043e\u0435\u0439 \u043a\u043e\u043c\u0430\u043d\u0434\u0435, \u043d\u043e \u0432 \u0434\u0440\u0443\u0433\u0438\u0445 \u043a\u043e\u043c\u0430\u043d\u0434\u0430\u0445. \u0418 \u043a\u043e\u0433\u0434\u0430 \u043e\u043d\u0438 \u0441\u043b\u0443\u0447\u0430\u044e\u0442\u0441\u044f, \u043e\u043d\u0438 \u043e\u0431\u044b\u0447\u043d\u043e \u043e\u0447\u0435\u043d\u044c \u0441\u0435\u0440\u044c\u0451\u0437\u043d\u044b\u0435.<\/p>\n<p>  <\/p>\n<p>\u0412 \u0447\u0451\u043c \u0435\u0449\u0451 \u043e\u0441\u043e\u0431\u0435\u043d\u043d\u043e\u0441\u0442\u044c Kafka \u0434\u043b\u044f \u043b\u044e\u0434\u0435\u0439, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u043f\u0440\u0438\u0445\u043e\u0434\u044f\u0442 \u0438\u0437 managed-\u0441\u0435\u0440\u0432\u0438\u0441\u043e\u0432? \u041d\u0430\u043f\u0440\u0438\u043c\u0435\u0440, \u043a\u043e\u0433\u0434\u0430 \u0432\u044b \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442\u0435 \u0441 SQS \u0432 Amazon, \u0432\u044b \u0447\u0451\u0442\u043a\u043e \u0437\u043d\u0430\u0435\u0442\u0435 \u043b\u0438\u043c\u0438\u0442\u044b \u0432\u0430\u0448\u0435\u0439 \u043e\u0447\u0435\u0440\u0435\u0434\u0438. \u0412\u044b \u043d\u0435 \u043c\u043e\u0436\u0435\u0442\u0435 \u0437\u0430\u043f\u0438\u0441\u0430\u0442\u044c, \u0443\u0441\u043b\u043e\u0432\u043d\u043e, \u0431\u043e\u043b\u044c\u0448\u0435 \u0442\u044b\u0441\u044f\u0447\u0438 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0439 \u0432 \u0441\u0435\u043a\u0443\u043d\u0434\u0443; \u043d\u0435 \u043c\u043e\u0436\u0435\u0442\u0435 \u0437\u0430\u043f\u0438\u0441\u0430\u0442\u044c \u0431\u043e\u043b\u044c\u0448\u0435 \u0447\u0435\u043c 1 \u041c\u0431 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0439 \u0432 \u0441\u0435\u043a\u0443\u043d\u0434\u0443. \u0418 \u0432\u044b \u043c\u043e\u0436\u0435\u0442\u0435 \u0432\u044b\u0441\u0442\u0440\u0430\u0438\u0432\u0430\u0442\u044c \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u0435, \u043e\u0442\u0442\u0430\u043b\u043a\u0438\u0432\u0430\u044f\u0441\u044c \u043e\u0442 \u044d\u0442\u0438\u0445 \u043e\u0447\u0435\u043d\u044c \u0447\u0451\u0442\u043a\u0438\u0445 \u043b\u0438\u043c\u0438\u0442\u043e\u0432. \u0421 Kafka \u0442\u0430\u043a\u043e\u0433\u043e \u043d\u0435\u0442. \u042d\u0442\u043e \u0437\u0430\u0432\u0438\u0441\u0438\u0442 \u0438 \u043e\u0442 \u0442\u043e\u0433\u043e, \u043a\u0430\u043a \u0437\u0430\u0432\u0438\u0441\u0438\u0442 \u0432\u0430\u0448\u0435 \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u0435 \u2014 \u0438 \u043f\u0440\u043e\u0434\u044e\u0441\u0435\u0440\u044b, \u0438 \u043a\u043e\u043d\u0441\u044e\u043c\u0435\u0440\u044b; \u043e\u0442 \u0442\u043e\u0433\u043e, \u043a\u0430\u043a \u043d\u0430\u0441\u0442\u0440\u043e\u0435\u043d \u0432\u0430\u0448 \u043a\u043b\u0430\u0441\u0442\u0435\u0440. \u0415\u0441\u043b\u0438 \u043f\u0440\u0438\u0434\u0451\u0442\u0435 \u043a \u0430\u0434\u043c\u0438\u043d\u0443 \u0438 \u0441\u043a\u0430\u0436\u0435\u0442\u0435: \u00ab\u0417\u0430\u0432\u0435\u0434\u0438 \u043c\u043d\u0435 \u0442\u043e\u043f\u0438\u043a \u0438 \u0441\u043a\u0430\u0436\u0438, \u0441\u043a\u043e\u043b\u044c\u043a\u043e \u044f \u0441\u043c\u043e\u0433\u0443 \u0437\u0430\u043f\u0438\u0441\u0430\u0442\u044c \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0439 \u0432 \u043e\u0434\u043d\u0443 \u043f\u0430\u0440\u0442\u0438\u0446\u0438\u044e\u00bb. \u0421\u043a\u043e\u0440\u0435\u0435 \u0432\u0441\u0435\u0433\u043e, \u043e\u043d \u043d\u0435 \u0441\u043c\u043e\u0436\u0435\u0442 \u0434\u0430\u0442\u044c \u0432\u0430\u043c \u043f\u0440\u043e\u0441\u0442\u043e\u0439 \u043e\u0442\u0432\u0435\u0442. \u042d\u0442\u043e \u0435\u0449\u0451 \u043e\u0434\u043d\u0430 \u043e\u0441\u043e\u0431\u0435\u043d\u043d\u043e\u0441\u0442\u044c Kafka, \u0441 \u043a\u043e\u0442\u043e\u0440\u043e\u0439 \u043c\u044b \u0441\u0442\u0430\u043b\u043a\u0438\u0432\u0430\u043b\u0438\u0441\u044c \u043e\u0447\u0435\u043d\u044c \u0447\u0430\u0441\u0442\u043e. \u041f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e \u043f\u0440\u0438\u0445\u043e\u0434\u044f\u0442 \u043b\u044e\u0434\u0438 \u0441 \u043e\u0447\u0435\u043d\u044c \u0440\u0430\u0437\u043d\u044b\u043c \u0431\u044d\u043a\u0433\u0440\u0430\u0443\u043d\u0434\u043e\u043c, \u043e\u0441\u043e\u0431\u0435\u043d\u043d\u043e \u0438\u0437 \u043f\u0440\u043e\u0434\u0443\u043a\u0442\u043e\u0432\u044b\u0445 \u043a\u043e\u043c\u0430\u043d\u0434, \u0438 \u043f\u043e\u0441\u043b\u0435\u0434\u043d\u0435\u0435, \u0447\u0442\u043e \u0438\u043c \u043d\u0443\u0436\u043d\u043e \u2014 \u044d\u0442\u043e \u0434\u0443\u043c\u0430\u0442\u044c \u043f\u0440\u043e \u041a\u0431 \u0438 \u041c\u0431 \u0432 \u0441\u0435\u043a\u0443\u043d\u0434\u0443, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u043e\u043d\u0438 \u043c\u043e\u0433\u0443\u0442 \u043f\u0440\u043e\u043f\u0443\u0441\u0442\u0438\u0442\u044c \u0447\u0435\u0440\u0435\u0437 \u043e\u0434\u043d\u0443 \u043f\u0430\u0440\u0442\u0438\u0446\u0438\u044e \u0441 \u043a\u0430\u043a\u043e\u0439-\u0442\u043e latency. \u041f\u0440\u0438\u0434\u0451\u0442\u0441\u044f \u043f\u0440\u043e\u043f\u0438\u0441\u044b\u0432\u0430\u0442\u044c \u043a\u0430\u043a\u0438\u0435-\u0442\u043e \u0433\u0430\u0439\u0434\u043b\u0430\u0439\u043d\u044b \u0434\u043b\u044f \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u0447\u0438\u043a\u043e\u0432. \u041d\u0443\u0436\u043d\u043e \u0431\u0443\u0434\u0435\u0442 \u0437\u0430\u043f\u0443\u0441\u043a\u0430\u0442\u044c \u0431\u0435\u043d\u0447\u043c\u0430\u0440\u043a\u0438. \u041d\u0443\u0436\u043d\u043e \u0431\u0443\u0434\u0435\u0442 \u043f\u043e\u043d\u0438\u043c\u0430\u0442\u044c, \u0432\u043e\u0442 \u043d\u0430 \u0432\u0430\u0448\u0435\u043c \u0441\u0435\u0442\u0430\u043f\u0435, \u043d\u0430 \u0432\u0430\u0448\u0435\u043c \u0436\u0435\u043b\u0435\u0437\u0435, \u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0434\u0430\u043d\u043d\u044b\u0445 \u0437\u0430 \u043a\u0430\u043a\u043e\u0439 \u0438\u043d\u0442\u0435\u0440\u0432\u0430\u043b \u0432\u0440\u0435\u043c\u0435\u043d\u0438 \u0432\u044b \u043c\u043e\u0436\u0435\u0442\u0435 \u043f\u0440\u043e\u043f\u0443\u0441\u0442\u0438\u0442\u044c. <\/p>\n<p>  <\/p>\n<p>\u0427\u0442\u043e \u0435\u0449\u0451 \u043d\u0443\u0436\u043d\u043e \u0437\u043d\u0430\u0442\u044c \u043f\u0440\u043e Kafka? \u041a\u043b\u0438\u0435\u043d\u0442\u044b \u2014 \u043d\u0430 \u043a\u0430\u043a\u043e\u043c \u044f\u0437\u044b\u043a\u0435 \u0432\u044b \u043f\u0438\u0448\u0435\u0442\u0435, \u0438 \u0447\u0435\u043c \u0432\u044b \u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442\u0435\u0441\u044c. Kafka \u0438\u0437\u043d\u0430\u0447\u0430\u043b\u044c\u043d\u043e \u043d\u0430\u043f\u0438\u0441\u0430\u043d\u0430 \u043d\u0430 Scala, \u0442\u0435\u043f\u0435\u0440\u044c \u0443\u0436\u0435 \u0431\u043e\u043b\u044c\u0448\u0435 \u043d\u0430 Java. \u0421\u043e\u043e\u0442\u0432\u0435\u0442\u0441\u0442\u0432\u0435\u043d\u043d\u043e, \u043f\u043e\u0441\u043b\u0435\u0434\u043d\u0438\u0439 vanilla-\u043a\u043b\u0438\u0435\u043d\u0442, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u0438\u0432\u0430\u0435\u0442 \u044d\u0442\u043e \u0432\u0441\u0451, \u044d\u0442\u043e \u0434\u0436\u0430\u0432\u043e\u0432\u044b\u0439 \u043a\u043b\u0438\u0435\u043d\u0442. \u0415\u0441\u043b\u0438 \u0432\u044b \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442\u0435 C#, \u0442\u043e \u043e\u0444\u0438\u0446\u0438\u0430\u043b\u044c\u043d\u044b\u0439 \u043a\u043b\u0438\u0435\u043d\u0442 Confluent, \u043d\u0430\u043f\u0440\u0438\u043c\u0435\u0440, \u0441\u0434\u0435\u043b\u0430\u043d \u043f\u043e\u0432\u0435\u0440\u0445 C-\u0431\u0438\u0431\u043b\u0438\u043e\u0442\u0435\u043a\u0438 librdkafka, \u043a\u043e\u0442\u043e\u0440\u0430\u044f \u0442\u043e\u0436\u0435 \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u0438\u0432\u0430\u0435\u0442\u0441\u044f \u0447\u0435\u043b\u043e\u0432\u0435\u043a\u043e\u043c, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u0432 Confluent, \u043d\u043e \u0432\u0441\u0451 \u0440\u0430\u0432\u043d\u043e \u0443 \u0432\u0430\u0441 \u0431\u0443\u0434\u0435\u0442 \u0437\u0430\u0434\u0435\u0440\u0436\u043a\u0430 \u0441 \u0444\u0438\u0447\u0430\u043c\u0438, \u043e\u043d\u0438 \u0431\u0443\u0434\u0443\u0442 \u043f\u0440\u0438\u0445\u043e\u0434\u0438\u0442\u044c \u043f\u043e\u0437\u0436\u0435.<\/p>\n<p>  <\/p>\n<p>\u041a\u043b\u0438\u0435\u043d\u0442\u044b C Sharp, Java, Go, Python, Ruby\u2026 \u043c\u044b \u0432 Booking.com \u0435\u0449\u0451 Perl \u043b\u044e\u0431\u0438\u043b\u0438 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c, \u043a\u0430\u043a \u0432\u044b \u0437\u043d\u0430\u0435\u0442\u0435, \u043d\u0430\u043c \u043f\u0440\u0438\u0448\u043b\u043e\u0441\u044c \u0441\u0432\u043e\u0439 \u043a\u043b\u0438\u0435\u043d\u0442 \u043f\u043e\u0432\u0435\u0440\u0445 librdkafka \u043f\u0438\u0441\u0430\u0442\u044c. \u042d\u0442\u043e \u0434\u043e\u0441\u0442\u0430\u0442\u043e\u0447\u043d\u043e \u0431\u043e\u043b\u044c\u0448\u0430\u044f \u0431\u043e\u043b\u044c, \u043a\u043e\u0442\u043e\u0440\u0430\u044f \u043c\u043e\u0436\u0435\u0442 \u0432\u043e\u0437\u043d\u0438\u043a\u043d\u0443\u0442\u044c \u0432 \u0442\u0435\u0445 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u044f\u0445, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u044e\u0442 \u0440\u0430\u0437\u043d\u044b\u0435 \u044f\u0437\u044b\u043a\u043e\u0432\u044b\u0435 \u044d\u043a\u043e\u0441\u0438\u0441\u0442\u0435\u043c\u044b.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0414\u0430, \u043d\u043e \u0437\u0434\u0435\u0441\u044c \u043c\u043e\u0436\u043d\u043e \u043b\u0438\u0431\u043e \u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c\u0441\u044f \u0432\u043e\u0442 \u044d\u0442\u0438\u043c\u0438 \u043a\u043b\u0438\u0435\u043d\u0442\u0430\u043c\u0438 \u0438\u043b\u0438 \u043f\u0438\u0441\u0430\u0442\u044c \u0441\u0432\u043e\u0438, \u043b\u0438\u0431\u043e \u0432\u0442\u043e\u0440\u043e\u0435 \u2014 \u043a\u0430\u043a\u0438\u0435-\u0442\u043e \u043f\u0440\u043e\u043a\u0441\u0438 \u043a\u043e\u043c\u043f\u043b\u0435\u043c\u0435\u043d\u0442\u0438\u0442\u044c \u0438\u043b\u0438 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c, \u0442\u0430\u043c \u0443\u0436\u0435 \u043d\u0435\u0442 \u043f\u0440\u0438\u0432\u044f\u0437\u043a\u0438 \u043a \u044f\u0437\u044b\u043a\u0443.<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u0421\u043e\u0432\u0435\u0440\u0448\u0435\u043d\u043d\u043e \u0432\u0435\u0440\u043d\u043e! \u0418 \u043c\u044b \u043e\u043f\u044f\u0442\u044c \u043f\u0440\u0438\u0445\u043e\u0434\u0438\u043c \u043a \u0442\u043e\u043c\u0443, \u0447\u0442\u043e \u044d\u0442\u043e \u0435\u0449\u0451 \u043e\u0434\u0438\u043d \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u044b\u0439 \u043a\u043e\u043c\u043f\u043e\u043d\u0435\u043d\u0442, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u043f\u0440\u0438\u0434\u0435\u0442\u0441\u044f \u0432\u043d\u0435\u0434\u0440\u0438\u0442\u044c, \u0447\u0442\u043e\u0431\u044b \u044d\u0442\u0443 \u0441\u0438\u0441\u0442\u0435\u043c\u0443 \u0440\u0430\u0437\u0432\u044f\u0437\u0430\u0442\u044c. \u042d\u0442\u043e \u0432\u0441\u0451 \u043f\u043e\u0434\u0447\u0435\u0440\u043a\u0438\u0432\u0430\u0435\u0442 \u0442\u043e, Kafka, \u043e\u043d\u0430 \u043a\u0430\u043a \u0431\u0440\u043e\u043a\u0435\u0440 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0439, \u043a\u0430\u043a \u0431\u044b \u043c\u044b \u0435\u0433\u043e \u043d\u0438 \u043d\u0430\u0437\u044b\u0432\u0430\u043b\u0438, \u0434\u043e\u0441\u0442\u0430\u0442\u043e\u0447\u043d\u043e \u0431\u0435\u0441\u043f\u043e\u043b\u0435\u0437\u043d\u0430 \u0441\u0430\u043c\u0430 \u043f\u043e \u0441\u0435\u0431\u0435. <strong>\u0421\u0430\u043c\u044b\u0439 \u0431\u043e\u043b\u044c\u0448\u043e\u0439 \u0431\u0435\u043d\u0435\u0444\u0438\u0442 Kafka \u043f\u043e \u0441\u0440\u0430\u0432\u043d\u0435\u043d\u0438\u044e \u0441 RabbitMQ \u0438\u043b\u0438 Pulsar \u2014 \u044d\u0442\u043e \u0435\u0451 \u044d\u043a\u043e\u0441\u0438\u0441\u0442\u0435\u043c\u0430. \u042d\u0442\u043e \u043a\u043e\u043b\u0438\u0447\u0435\u0441\u0442\u0432\u043e \u043a\u043e\u043d\u043d\u0435\u043a\u0442\u043e\u0440\u043e\u0432, \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u0439, \u043f\u0440\u043e\u043f\u0440\u0438\u0435\u0442\u0430\u0440\u043d\u044b\u0445 \u0440\u0435\u0448\u0435\u043d\u0438\u0439, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u043f\u0440\u043e\u0441\u0442\u043e \u0438\u0437 \u043a\u043e\u0440\u043e\u0431\u043a\u0438 \u0431\u0443\u0434\u0443\u0442 \u0440\u0430\u0431\u043e\u0442\u0430\u0442\u044c \u0441 Kafka.<\/strong> \u042f \u0437\u043d\u0430\u044e \u0434\u0430\u0436\u0435 \u043a\u0435\u0439\u0441\u044b \u0438\u0437 \u0434\u0440\u0443\u0433\u0438\u0445 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0439, \u0433\u0434\u0435 \u0438\u043d\u0442\u0435\u0433\u0440\u0438\u0440\u043e\u0432\u0430\u043b\u0438 \u0434\u0430\u043d\u043d\u044b\u0435 \u0438\u0437 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u0438\u0445 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0439 \u0441 \u043f\u043e\u043c\u043e\u0449\u044c\u044e Kafka. \u041f\u0440\u043e\u0441\u0442\u043e \u043f\u043e\u0442\u043e\u043c\u0443, \u0447\u0442\u043e \u0443 \u043d\u0438\u0445 \u0443\u0436\u0435 \u043e\u043d\u0430 \u0431\u044b\u043b\u0430, \u0438 \u0438\u043c \u0431\u044b\u043b\u043e \u043d\u0430\u043c\u043d\u043e\u0433\u043e \u043f\u0440\u043e\u0449\u0435 \u0442\u0430\u043a\u0438\u043c \u043e\u0431\u0440\u0430\u0437\u043e\u043c \u0437\u0430\u043f\u0440\u043e\u0434\u044e\u0441\u0441\u0438\u0442\u044c \u0434\u0440\u0443\u0433 \u0434\u0440\u0443\u0433\u0443 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u044f \u0432 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0435, \u043f\u0440\u043e\u043a\u0438\u043d\u0443\u0442\u044c \u0441\u0435\u0442\u0435\u0432\u044b\u0435 \u0434\u043e\u0441\u0442\u0443\u043f\u044b \u0443\u0441\u043b\u043e\u0432\u043d\u044b\u0435, \u0447\u0435\u043c \u0433\u043e\u0440\u043e\u0434\u0438\u0442\u044c \u0441\u0432\u043e\u0438 \u0441\u043e\u0431\u0441\u0442\u0432\u0435\u043d\u043d\u044b\u0435 \u043f\u0440\u043e\u043f\u0440\u0438\u0435\u0442\u0430\u0440\u043d\u044b\u0435 http-\u043f\u0440\u043e\u0442\u043e\u043a\u043e\u043b\u044b \u0438\u043b\u0438 \u0435\u0449\u0451 \u0447\u0442\u043e-\u0442\u043e. \u0412\u043e\u0442 \u0438\u043c\u0435\u043d\u043d\u043e \u044d\u0442\u0430 \u0438\u043d\u0444\u0440\u0430\u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u0430 \u0438 \u0435\u0451 \u0440\u0430\u0441\u043f\u0440\u043e\u0441\u0442\u0440\u0430\u043d\u0435\u043d\u043d\u043e\u0441\u0442\u044c \u2014 \u0432\u043e\u0442 \u044d\u0442\u043e \u0441\u0430\u043c\u0430\u044f \u0433\u043b\u0430\u0432\u043d\u0430\u044f \u043c\u043e\u0449\u044c Kafka, \u043d\u0430 \u043c\u043e\u0439 \u0432\u0437\u0433\u043b\u044f\u0434. <\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u041c\u043d\u0435 \u0442\u043e\u0436\u0435 \u0442\u0430\u043a \u043a\u0430\u0436\u0435\u0442\u0441\u044f. \u0411\u043e\u043b\u0435\u0435 \u0442\u043e\u0433\u043e, \u0435\u0441\u0442\u044c \u0440\u0435\u0431\u044f\u0442\u0430 \u0438\u0437 \u0440\u0430\u0437\u043d\u044b\u0445 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0439, \u0432 \u0442\u043e\u043c \u0447\u0438\u0441\u043b\u0435 \u0440\u043e\u0441\u0441\u0438\u0439\u0441\u043a\u0438\u0445, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0438\u0437 Kafka \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u044e\u0442 \u0442\u043e\u043b\u044c\u043a\u043e \u043a\u043e\u043d\u043d\u0435\u043a\u0442\u043e\u0440\u044b. \u0412\u0441\u0451 \u0432\u043e\u0442 \u044d\u0442\u043e \u0432\u043e\u0442 \u0441\u0432\u044f\u0437\u0430\u043b\u0438, \u043f\u043e\u0441\u0442\u0430\u0432\u0438\u043b\u0438 Kafka, \u0438 \u0437\u0430 \u0441\u0447\u0435\u0442 \u044d\u0442\u043e\u0439 \u044d\u043a\u043e\u0441\u0438\u0441\u0442\u0435\u043c\u044b \u043d\u0435 \u043f\u0438\u0448\u0443\u0442 \u0432\u043e\u043e\u0431\u0449\u0435 \u043d\u0438\u043a\u0430\u043a\u043e\u0433\u043e \u043a\u043e\u0434\u0430. \u041d\u0430 \u043a\u043e\u043d\u0444\u0438\u0433\u0430\u0445 \u0443 \u043d\u0438\u0445 \u0432\u0441\u0451 \u0432\u0437\u043b\u0435\u0442\u0430\u0435\u0442, \u0432\u0441\u0451 \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442. \u0417\u0434\u0435\u0441\u044c \u0438\u043d\u043e\u0433\u0434\u0430 \u0446\u0435\u043d\u0430 \u0432\u043d\u0435\u0434\u0440\u0435\u043d\u0438\u044f \u043e\u0447\u0435\u043d\u044c \u043c\u0430\u043b\u0435\u043d\u044c\u043a\u0430\u044f. \u041e\u043d\u0430 \u0432\u0441\u044f \u0443\u043f\u0438\u0440\u0430\u0435\u0442\u0441\u044f \u0432 \u0438\u043d\u0444\u0440\u0430\u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u0443, \u043f\u043e \u0441\u0443\u0442\u0438. <\/p>\n<p>  <\/p>\n<p>\u0427\u0435\u043c \u0433\u043b\u0443\u0431\u0436\u0435 Kafka \u043f\u0440\u043e\u0440\u0430\u0441\u0442\u0430\u0435\u0442 \u0432 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u044e, \u0435\u0441\u0442\u044c \u0443 \u043d\u0435\u0435 \u0442\u0430\u043a\u0430\u044f \u0444\u0438\u0448\u043a\u0430, \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0430 \u043d\u0430\u0447\u0438\u043d\u0430\u044e\u0442 \u043f\u043b\u043e\u0434\u0438\u0442\u044c\u0441\u044f \u0441 \u0431\u043e\u043b\u044c\u0448\u043e\u0439 \u0441\u0438\u043b\u043e\u0439 \u043f\u043e\u0441\u043b\u0435 \u043f\u0435\u0440\u0432\u043e\u0433\u043e, \u0438\u043d\u0444\u0440\u0430\u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u0430 \u0442\u043e\u0436\u0435 \u0440\u0430\u0437\u0440\u0430\u0441\u0442\u0430\u0435\u0442\u0441\u044f \u0438 \u043f\u043e\u0440\u043e\u0439 \u0441\u0442\u0430\u043d\u043e\u0432\u0438\u0442\u0441\u044f \u043e\u0447\u0435\u043d\u044c \u0441\u043b\u043e\u0436\u043d\u043e\u0439. \u0412\u0441\u0451 \u0447\u0442\u043e \u043c\u044b \u043f\u0435\u0440\u0435\u0447\u0438\u0441\u043b\u0438\u043b\u0438: \u043a\u043e\u043d\u043d\u0435\u043a\u0442\u043e\u0440\u044b, Zookeeper, \u0440\u0435\u043f\u043b\u0438\u043a\u0430\u0442\u043e\u0440\u044b, \u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433\u0438, \u0448\u0442\u0443\u043a\u0438, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u044e\u0442 \u043b\u0435\u0433\u0447\u0435 \u0430\u0434\u043c\u0438\u043d\u0438\u0441\u0442\u0440\u0438\u0440\u043e\u0432\u0430\u0442\u044c \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0430 Kafka (\u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e \u0430\u0434\u043c\u0438\u043d\u0438\u0441\u0442\u0440\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u0435 \u2014 \u044d\u0442\u043e \u0434\u043e\u0432\u043e\u043b\u044c\u043d\u043e \u0431\u043e\u043b\u044c\u0448\u043e\u0439 \u043e\u0431\u044a\u0451\u043c toil work). \u0418 \u043e\u0447\u0435\u043d\u044c \u0431\u044b\u0441\u0442\u0440\u043e. \u0421\u0442\u0430\u043d\u0434\u0430\u0440\u0442\u043d\u0430\u044f \u0438\u0441\u0442\u043e\u0440\u0438\u044f \u2014 \u043a\u043e\u0433\u0434\u0430 \u0443 \u043d\u0430\u0441 \u0435\u0441\u0442\u044c Kafka, \u0430 \u0432\u043e\u043a\u0440\u0443\u0433 \u043d\u0435\u0435 \u0435\u0449\u0435 10 \u0438\u043d\u0444\u0440\u0430\u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u043d\u044b\u0445 \u0441\u0435\u0440\u0432\u0438\u0441\u043e\u0432 \u0438\u043b\u0438 \u0442\u0435\u0445\u043d\u043e\u043b\u043e\u0433\u0438\u0439 \u0432\u0440\u0430\u0449\u0430\u0435\u0442\u0441\u044f. <\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u041d\u0430 \u044d\u0442\u0443 \u0442\u0435\u043c\u0443 \u0435\u0449\u0435 \u043c\u043e\u0436\u0435\u0442\u0435 \u043f\u043e\u0441\u043c\u043e\u0442\u0440\u0435\u0442\u044c \u043a\u0430\u043a \u0440\u0430\u0437 \u0432 Avito \u043c\u044b \u0432 \u044f\u043d\u0432\u0430\u0440\u0435 \u044d\u0442\u043e\u0433\u043e \u0433\u043e\u0434\u0430 \u0434\u0435\u043b\u0430\u043b\u0438 \u0434\u043e\u043a\u043b\u0430\u0434\u044b, \u044f \u0438 \u0422\u043e\u043b\u044f, \u0438 \u043c\u044b \u043f\u043e\u0434\u0440\u043e\u0431\u043d\u043e \u043e\u0431\u0441\u0443\u0436\u0434\u0430\u043b\u0438 \u044d\u043a\u043e\u0441\u0438\u0441\u0442\u0435\u043c\u044b. \u0422\u043e, \u043a\u0430\u043a \u043c\u044b \u0434\u0435\u043b\u0430\u043b\u0438 \u044d\u0442\u043e \u0432 Booking.com \u0438 \u0422\u043e\u043b\u044f \u0440\u0430\u0441\u0441\u043a\u0430\u0437\u044b\u0432\u0430\u043b, \u043a\u0430\u043a \u0440\u0435\u0431\u044f\u0442\u0430 \u0434\u0435\u043b\u0430\u044e\u0442 \u043a\u043e\u043d\u043d\u0435\u043a\u0442\u043e\u0440\u044b \u0432 Avito, \u0438 \u043c\u043e\u0436\u043d\u043e \u043f\u043e\u0441\u043c\u043e\u0442\u0440\u0435\u0442\u044c, \u043a\u0430\u043a\u043e\u0435 \u043a\u043e\u043b\u0438\u0447\u0435\u0441\u0442\u0432\u043e \u0434\u043e\u043f\u043e\u043b\u043d\u0438\u0442\u0435\u043b\u044c\u043d\u044b\u0445 \u043a\u043e\u043c\u043f\u043e\u043d\u0435\u043d\u0442\u043e\u0432 \u043d\u0443\u0436\u043d\u043e \u0434\u043b\u044f \u0442\u043e\u0433\u043e, \u0447\u0442\u043e\u0431\u044b \u044d\u0444\u0444\u0435\u043a\u0442\u0438\u0432\u043d\u043e \u0440\u0430\u043d\u0438\u0442\u044c \u044d\u0442\u0443 \u0441\u0438\u0441\u0442\u0435\u043c\u0443, \u0447\u0442\u043e\u0431\u044b \u0432\u0430\u0448\u0438 \u0434\u0435\u0432\u0435\u043b\u043e\u043f\u0435\u0440\u044b \u0437\u0430\u043d\u0438\u043c\u0430\u043b\u0438\u0441\u044c \u043f\u0440\u043e\u0434\u0443\u043a\u0442\u043e\u0432\u043e\u0439 \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u043a\u043e\u0439, \u0430 \u043d\u0435 \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u043a\u043e\u0439 \u0434\u043b\u044f Kafka.<\/p>\n<p>  <\/p>\n<p>\u042f \u0435\u0449\u0435 \u0445\u043e\u0442\u0435\u043b \u043f\u043e-\u0431\u044b\u0441\u0442\u0440\u043e\u043c\u0443 \u043e\u0442\u0432\u0435\u0442\u0438\u0442\u044c \u043d\u0430 \u0432\u043e\u043f\u0440\u043e\u0441 \u0438\u0437 \u0447\u0430\u0442\u0430: \u00ab\u041b\u0443\u0447\u0448\u0435 Kafka Connect \u0438\u043b\u0438 NiFi?\u00bb \u0412 NiFi \u043d\u0435\u0442 \u0440\u0435\u043f\u043b\u0438\u043a\u0430\u0446\u0438\u0438. \u0415\u0441\u043b\u0438 \u0443 \u0432\u0430\u0441 \u043f\u0430\u0434\u0430\u0435\u0442 \u043d\u043e\u0434\u0430 \u0432 NiFi \u043f\u0435\u0440\u0435\u0434 \u0442\u0435\u043c, \u043a\u0430\u043a \u043e\u043d\u0430 \u043f\u0440\u043e\u043a\u0438\u043d\u0443\u043b\u0430 \u0434\u0430\u043d\u043d\u044b\u0435 \u0435\u0449\u0451 \u043a\u0443\u0434\u0430-\u0442\u043e, \u0435\u0441\u043b\u0438 \u0432\u044b \u043d\u0435 \u043f\u043e\u0434\u043d\u0438\u043c\u0438\u0442\u0435 \u0435\u0451 \u043e\u0431\u0440\u0430\u0442\u043d\u043e (\u043d\u0435 \u0437\u043d\u0430\u044e, \u043f\u043e\u043c\u043e\u043b\u0438\u0442\u0435\u0441\u044c \u0438\u043b\u0438 \u043f\u043e\u0439\u0434\u0451\u0442\u0435 \u0434\u0438\u0441\u043a \u0441\u043e\u0431\u0438\u0440\u0430\u0442\u044c \u0440\u0443\u043a\u0430\u043c\u0438), \u0442\u043e \u043d\u0435 \u0441\u043c\u043e\u0436\u0435\u0442\u0435 \u044d\u0442\u0438 \u0434\u0430\u043d\u043d\u044b\u0435 \u0432\u043e\u0441\u0441\u0442\u0430\u043d\u043e\u0432\u0438\u0442\u044c.<\/p>\n<p>  <\/p>\n<p>\u0418\u0412\u0410\u041d \u0421\u0418\u0414\u041e\u0420\u041e\u0412: \u0425\u043e\u0447\u0443 \u0432\u0441\u0451 \u0436\u0435 \u043f\u0440\u043e \u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433 \u0440\u0435\u0437\u044e\u043c\u0438\u0440\u043e\u0432\u0430\u0442\u044c. \u0421 \u043a\u043e\u043b\u043b\u0435\u0433\u0430\u043c\u0438 \u044f \u043f\u043e\u043b\u043d\u043e\u0441\u0442\u044c\u044e \u0441\u043e\u0433\u043b\u0430\u0441\u0435\u043d. \u0415\u0434\u0438\u043d\u0441\u0442\u0432\u0435\u043d\u043d\u0430\u044f \u043c\u0435\u0442\u0440\u0438\u043a\u0430, \u043a\u043e\u0442\u043e\u0440\u0443\u044e \u043d\u0443\u0436\u043d\u043e \u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u0442\u044c \u043d\u0430 \u0438\u043d\u0444\u0440\u0430\u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u0435 \u2014 \u044d\u0442\u043e \u0442\u0435\u0440\u044f\u0435\u043c \u043c\u044b \u0434\u0435\u043d\u044c\u0433\u0438 \u0438\u043b\u0438 \u043d\u0435 \u0442\u0435\u0440\u044f\u0435\u043c, \u0430 \u0434\u0430\u043b\u044c\u0448\u0435 \u0443\u0436\u0435 \u0441\u043f\u0443\u0441\u043a\u0430\u0442\u044c\u0441\u044f \u0434\u043e \u0441\u0430\u043c\u043e\u0433\u043e \u043d\u0438\u0436\u043d\u0435\u0433\u043e \u043a\u043e\u043c\u043f\u043e\u043d\u0435\u043d\u0442\u0430. \u0415\u0441\u043b\u0438 \u0440\u0430\u0441\u0441\u043c\u0430\u0442\u0440\u0438\u0432\u0430\u0442\u044c Kafka \u043a\u0430\u043a \u0432\u0435\u0449\u044c \u0432 \u0441\u0435\u0431\u0435, \u0442\u043e \u0435\u0451 \u043d\u0443\u0436\u043d\u043e \u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u0442\u044c \u043a\u0430\u043a \u043e\u0431\u044b\u0447\u043d\u043e\u0435 Java-\u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u0435. \u041f\u043e\u0431\u043e\u043b\u044c\u0448\u0435 \u043f\u0430\u043c\u044f\u0442\u0438 \u043f\u043e\u0441\u0442\u0430\u0432\u0438\u043b, \u043e\u043d\u0430 \u043d\u0435 \u0432\u044b\u043b\u0435\u0442\u0430\u0435\u0442 \u2014 \u0432\u0441\u0451 \u0445\u043e\u0440\u043e\u0448\u043e.<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u042d\u0442\u043e, \u043a\u0441\u0442\u0430\u0442\u0438, \u043f\u043b\u043e\u0445\u043e\u0435 \u0440\u0435\u0448\u0435\u043d\u0438\u0435 \u0434\u043b\u044f Kafka, \u043d\u0443 \u0434\u0430 \u043b\u0430\u0434\u043d\u043e.<\/p>\n<p>  <\/p>\n<p>\u0418\u0412\u0410\u041d \u0421\u0418\u0414\u041e\u0420\u041e\u0412: \u041c\u044b \u0436\u0435 \u0432 \u043e\u0442\u0440\u044b\u0432\u0435 \u043e\u0442 \u0438\u043d\u0444\u0440\u0430\u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u044b, \u043d\u0430\u043c \u0436\u0435 \u043d\u0435 \u0441\u043a\u0430\u0437\u0430\u043b\u0438 \u0434\u0430\u043d\u043d\u044b\u0435. \u0410 \u0434\u0430\u043b\u044c\u0448\u0435 \u043d\u0443\u0436\u043d\u043e \u0441\u043c\u043e\u0442\u0440\u0435\u0442\u044c, \u0432\u044b\u043f\u043e\u043b\u043d\u044f\u0435\u0442 \u043b\u0438 \u0432\u044b\u0431\u0440\u0430\u043d\u043d\u0430\u044f \u0447\u0430\u0441\u0442\u044c \u0438\u043d\u0444\u0440\u0430\u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u044b, \u0440\u0435\u0430\u043b\u0438\u0437\u043e\u0432\u0430\u043d\u043d\u0430\u044f \u043d\u0430 Kafka, \u0441\u0432\u043e\u044e \u0431\u0438\u0437\u043d\u0435\u0441-\u0437\u0430\u0434\u0430\u0447\u0443. \u0421\u0430\u043c\u044b\u0439 \u043f\u0440\u043e\u0441\u0442\u043e\u0439 \u043a\u0435\u0439\u0441, \u043a\u043e\u0433\u0434\u0430 \u043c\u044b \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u043c Kafka \u043a\u0430\u043a \u043e\u0447\u0435\u0440\u0435\u0434\u044c \u0438 \u043a\u0438\u0434\u0430\u0435\u043c \u0441 \u043e\u0434\u043d\u043e\u0439 \u0441\u0442\u043e\u0440\u043e\u043d\u044b \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0435 \u0432 \u0434\u0440\u0443\u0433\u043e\u0435, \u0442\u043e \u0441\u043c\u043e\u0442\u0440\u0438\u043c: \u043e\u043d\u0438 \u043e\u0442\u043f\u0440\u0430\u0432\u043b\u044f\u044e\u0442\u0441\u044f \u0438 \u043f\u0440\u0438\u043d\u0438\u043c\u0430\u044e\u0442\u0441\u044f? \u0441 \u043a\u0430\u043a\u043e\u0439 \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u044c\u044e \u043f\u0440\u0438\u043d\u0438\u043c\u0430\u044e\u0442\u0441\u044f? \u0441 \u043a\u0430\u043a\u043e\u0439 \u043e\u0442\u043f\u0440\u0430\u0432\u043b\u044f\u044e\u0442\u0441\u044f? \u043f\u043e\u0447\u0435\u043c\u0443 \u0442\u0430\u043a \u043c\u0430\u043b\u043e \u0438\u043b\u0438 \u043c\u043d\u043e\u0433\u043e \u043f\u0440\u0438\u043d\u0438\u043c\u0430\u0435\u0442\u0441\u044f? \u0435\u0441\u0442\u044c \u043b\u0438 \u0430\u043d\u043e\u043c\u0430\u043b\u0438\u0438? \u0410\u043d\u043e\u043c\u0430\u043b\u0438\u0438 \u0432 \u0442\u043e\u043c \u0431\u0438\u0437\u043d\u0435\u0441-\u043f\u0440\u043e\u0446\u0435\u0441\u0441\u0435, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0442\u0435\u0445\u043d\u043e\u043b\u043e\u0433\u0438\u0447\u0435\u0441\u043a\u0438 \u0440\u0435\u0430\u043b\u0438\u0437\u0443\u0435\u0442 Kafka. <\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0422\u044b \u0433\u043e\u0432\u043e\u0440\u0438\u0448\u044c \u043f\u0440\u043e ISO-\u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433, \u043d\u0430\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u044f \u0443\u0441\u043b\u044b\u0448\u0430\u043b, \u044d\u0442\u043e \u0448\u0442\u0443\u043a\u0430 \u043a\u0440\u0443\u0442\u0430\u044f. \u041a\u0430\u0436\u0435\u0442\u0441\u044f, \u0438\u0437 \u043d\u0435\u0451 \u043d\u0443\u0436\u043d\u043e \u0438\u0441\u0445\u043e\u0434\u0438\u0442\u044c, \u0438 \u0432\u0441\u044f\u043a\u0438\u0435 \u0442\u0430\u043c \u0430\u043b\u0435\u0440\u0442\u044b \u043d\u0430 \u043f\u0435\u0439\u0434\u0436\u0435\u0440\u044b \u043f\u0440\u0438\u0441\u044b\u043b\u0430\u0442\u044c, \u043a\u043e\u0433\u0434\u0430 \u043d\u0430\u0447\u0438\u043d\u0430\u044e\u0442\u0441\u044f \u0432\u0441\u044f\u043a\u0438\u0435 \u0442\u0430\u043a\u0438\u0435 \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u044b, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e \u0443 Kafka \u043e\u0442\u043a\u0430\u0437 \u043e\u0434\u043d\u043e\u0439, \u043f\u044f\u0442\u0438 \u0438\u043b\u0438 \u0434\u0435\u0441\u044f\u0442\u0438 \u043c\u0430\u0448\u0438\u043d \u2014 \u044d\u0442\u043e \u043d\u0435 \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u0430, \u043c\u043e\u0436\u043d\u043e \u0441\u043f\u0430\u0442\u044c \u0434\u0430\u043b\u044c\u0448\u0435, \u0435\u0441\u043b\u0438 \u0432\u0441\u0451 \u043e\u0441\u0442\u0430\u043b\u044c\u043d\u043e\u0435 \u0432\u044b\u043f\u043e\u043b\u043d\u044f\u0435\u0442\u0441\u044f.<\/p>\n<p>  <\/p>\n<p>\u041d\u043e \u0432\u0441\u0435 \u0440\u0430\u0432\u043d\u043e \u043d\u0443\u0436\u043d\u043e \u0435\u0449\u0435 \u0438\u043c\u0435\u0442\u044c \u0438\u043d\u0444\u0440\u0430\u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u043d\u044b\u0439 \u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0432\u043d\u0443\u0442\u0440\u0438 \u0441\u0430\u043c\u043e\u0439 Kafka \u0441\u043c\u043e\u0442\u0440\u0438\u0442, \u0447\u0442\u043e \u043f\u0440\u043e\u0438\u0441\u0445\u043e\u0434\u0438\u0442, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e \u043a\u043e\u0433\u0434\u0430 \u0442\u0430\u043c \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u044b \u043d\u0430\u0447\u0438\u043d\u0430\u044e\u0442\u0441\u044f, \u0432 Kafka \u043e\u0447\u0435\u043d\u044c \u043c\u043d\u043e\u0433\u043e \u043c\u0435\u0442\u0440\u0438\u043a, \u044d\u0442\u043e \u043d\u0435 \u0442\u043e\u043b\u044c\u043a\u043e \u0442\u043e \u0447\u0442\u043e Java \u0434\u0430\u0435\u0442, \u0434\u043b\u044f Kafka \u0438\u0445 \u0442\u0430\u043c \u043c\u0438\u043b\u043b\u0438\u043e\u043d. <\/p>\n<p>  <\/p>\n<p>\u041c\u044b \u0441\u0434\u0435\u043b\u0430\u043b\u0438 \u0441\u0435\u0431\u0435 \u0442\u0440\u0438 \u043e\u043a\u043d\u0430. \u041f\u0435\u0440\u0432\u043e\u0435 \u2014 \u043d\u0430 \u0443\u0440\u043e\u0432\u043d\u0435 \u0432\u0441\u0435\u0445 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u043e\u0432 \u0441\u043c\u043e\u0442\u0440\u0438\u043c, \u0447\u0442\u043e \u0432\u043e\u043e\u0431\u0449\u0435 \u043f\u0440\u043e\u0438\u0441\u0445\u043e\u0434\u0438\u0442 \u0442\u0430\u043c, \u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0431\u0440\u043e\u043a\u0435\u0440\u043e\u0432 \u0436\u0438\u0432\u044b\u0445\/\u043d\u0435\u0436\u0438\u0432\u044b\u0445 \u0432 \u043f\u0440\u043e\u0446\u0435\u043d\u0442\u043d\u043e\u043c \u0441\u043e\u043e\u0442\u043d\u043e\u0448\u0435\u043d\u0438\u0438, \u0435\u0441\u0442\u044c \u043b\u0438 \u043e\u0444\u043b\u0430\u0439\u043d-\u0440\u0435\u043f\u043b\u0438\u043a\u0438, \u043d\u0430\u043f\u0440\u0438\u043c\u0435\u0440, \u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0443 \u043d\u0430\u0441 \u043d\u0435 \u0432\u044b\u043f\u043e\u043b\u043d\u044f\u0435\u0442\u0441\u044f isr. <\/p>\n<p>  <\/p>\n<p>\u0414\u0430\u043b\u044c\u0448\u0435 \u0441\u043f\u0443\u0441\u043a\u0430\u0435\u043c\u0441\u044f \u043d\u0430 \u0443\u0440\u043e\u0432\u0435\u043d\u044c \u043a\u043e\u043d\u043a\u0440\u0435\u0442\u043d\u043e\u0433\u043e \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0430, \u0441\u043c\u043e\u0442\u0440\u0438\u043c, \u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0443 \u043d\u0435\u0433\u043e \u0432\u0445\u043e\u0434\u044f\u0449\u0438\u0445 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0439 \u0441\u0435\u0439\u0447\u0430\u0441, \u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0438\u0441\u0445\u043e\u0434\u044f\u0449\u0438\u0445. \u0421\u043a\u043e\u043b\u044c\u043a\u043e \u0431\u044b\u043b\u043e \u043d\u0435\u0434\u0435\u043b\u044e \u043d\u0430\u0437\u0430\u0434 \u0432 \u044d\u0442\u043e\u0442 \u0436\u0435 \u0434\u0435\u043d\u044c, \u0432 \u044d\u0442\u043e \u0436\u0435 \u0432\u0440\u0435\u043c\u044f. \u041a\u043e\u043b\u0438\u0447\u0435\u0441\u0442\u0432\u043e \u0442\u043e\u043f\u0438\u043a\u043e\u0432 \u043f\u0430\u0440\u0442\u0438\u0446\u0438\u0439 \u043c\u043e\u0436\u043d\u043e \u043f\u043e\u0441\u043c\u043e\u0442\u0440\u0435\u0442\u044c, \u043d\u0443, \u043f\u0440\u043e\u0441\u0442\u043e \u0441\u0435\u0440\u0432\u0435\u0440\u043d\u044b\u0435 \u043c\u0435\u0442\u0440\u0438\u043a\u0438, \u043e\u0447\u0435\u0432\u0438\u0434\u043d\u043e, \u0432 \u043f\u0435\u0440\u0432\u0443\u044e \u043e\u0447\u0435\u0440\u0435\u0434\u044c \u043d\u0430\u0434\u043e \u0441\u043c\u043e\u0442\u0440\u0435\u0442\u044c \u2014 \u0441\u0435\u0442\u044c, \u043d\u0430\u0432\u0435\u0440\u043d\u043e\u0435. <\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u0421\u0435\u0442\u044c, \u0444\u0430\u0439\u043b\u043e\u0432\u044b\u0435 \u0434\u0435\u0441\u043a\u0440\u0438\u043f\u0442\u043e\u0440\u044b, disk io.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0424\u0430\u0439\u043b\u043e\u0432\u044b\u0435 \u0434\u0435\u0441\u043a\u0440\u0438\u043f\u0442\u043e\u0440\u044b \u043c\u043e\u0436\u043d\u043e \u043f\u043e\u0441\u0442\u0430\u0432\u0438\u0442\u044c 1 \u043c\u043b\u043d, \u0438 \u043d\u0435 \u0441\u043c\u043e\u0442\u0440\u0435\u0442\u044c \u0438\u0445. \u041d\u043e \u0443 \u043d\u0430\u0441 \u043e\u043d\u0438 \u0442\u043e\u0436\u0435 \u0432\u044b\u0432\u0435\u0434\u0435\u043d\u044b, \u043d\u0430 \u0441\u0430\u043c\u043e\u043c \u0434\u0435\u043b\u0435.<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u041d\u0443 \u0434\u0430, \u043a \u0432\u0430\u043c \u043f\u0440\u043e\u0441\u0442\u043e \u043f\u0440\u0438\u0434\u0451\u0442 1 \u043c\u043b\u043d \u043a\u043e\u043d\u043d\u0435\u043a\u0448\u0435\u043d\u043e\u0432, \u0432\u044b \u0434\u0430\u0436\u0435 \u043d\u0435 \u0443\u0437\u043d\u0430\u0435\u0442\u0435 \u043e\u0431 \u044d\u0442\u043e\u043c.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u042f \u0434\u0443\u043c\u0430\u044e, \u043c\u044b \u0443\u0437\u043d\u0430\u0435\u043c \u043e\u0431 \u044d\u0442\u043e\u043c \u0431\u044b\u0441\u0442\u0440\u043e. \u0412\u0441\u0435 \u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u0435\u043b\u0438 Avito \u0443\u0437\u043d\u0430\u044e\u0442 \u043e\u0431 \u044d\u0442\u043e\u043c. <\/p>\n<p>  <\/p>\n<p>\u0418 \u0441\u0430\u043c\u044b\u0439 \u043d\u0438\u0437\u043a\u0438\u0439 \u0443\u0440\u043e\u0432\u0435\u043d\u044c \u2014 \u044d\u0442\u043e \u0443\u0436\u0435 \u043a\u043e\u0433\u0434\u0430 \u0442\u044b \u043d\u0430 \u0443\u0440\u043e\u0432\u043d\u0435 \u0431\u0440\u043e\u043a\u0435\u0440\u0430 \u0441\u043c\u043e\u0442\u0440\u0438\u0448\u044c \u0441\u043f\u0435\u0446\u0438\u0444\u0438\u0447\u043d\u044b\u0435 \u043a\u0430\u043a\u0438\u0435-\u0442\u043e \u043c\u0435\u0442\u0440\u0438\u043a\u0438, \u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0442\u0430\u043c \u0432 Q \u0432\u0438\u0441\u0438\u0442 \u044d\u0442\u043e \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0435, \u043a\u0430\u043a \u0447\u0430\u0441\u0442\u043e \u043c\u0435\u043d\u044f\u044e\u0442\u0441\u044f shiring expand. \u0422\u0430\u043c \u043c\u043d\u043e\u0433\u043e \u0432\u0441\u0435\u0433\u043e, \u0447\u0442\u043e \u043c\u043e\u0436\u0435\u0442 \u043f\u043e\u0437\u0432\u043e\u043b\u0438\u0442\u044c \u043f\u043e\u043c\u043e\u0447\u044c \u043f\u043e\u043d\u044f\u0442\u044c, \u0433\u0434\u0435 \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u0430 (\u0441 \u0414\u0426 \u0447\u0442\u043e-\u0442\u043e \u043f\u0440\u043e\u0438\u0437\u043e\u0448\u043b\u043e, \u043d\u0435 \u0432\u044b\u0432\u043e\u0437\u044f\u0442 \u0440\u0435\u0439\u0434\u044b, \u0438 \u0438\u0445 \u043d\u0430\u0434\u043e \u0443\u0432\u0435\u043b\u0438\u0447\u0438\u0442\u044c). \u0422\u0430\u043a\u043e\u0439 \u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433 \u0442\u043e\u0436\u0435 \u0434\u043e\u043b\u0436\u0435\u043d \u0431\u044b\u0442\u044c. \u042f \u043d\u0435 \u0432\u0438\u0436\u0443 \u043a\u0435\u0439\u0441\u0430, \u043a\u043e\u0433\u0434\u0430 \u0432\u044b \u0431\u0435\u0437 \u043d\u0435\u0433\u043e \u043c\u043e\u0436\u0435\u0442\u0435 \u043f\u043e\u043d\u044f\u0442\u044c, \u0447\u0442\u043e \u043f\u0440\u043e\u0438\u0441\u0445\u043e\u0434\u0438\u0442.<\/p>\n<p>  <\/p>\n<p>\u0418\u0412\u0410\u041d \u0421\u0418\u0414\u041e\u0420\u041e\u0412: \u0415\u0441\u0442\u044c \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u0430 \u043e\u0432\u0435\u0440\u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433\u0430. \u041a\u0430\u043a \u0442\u044b \u043a\u043b\u0430\u0441\u0441\u043d\u043e \u0440\u0430\u0441\u0441\u043a\u0430\u0437\u0430\u043b, \u0447\u0442\u043e \u0432\u044b \u0441\u043f\u0443\u0441\u043a\u0430\u0435\u0442\u0435\u0441\u044c \u0444\u0430\u043a\u0442\u0438\u0447\u0435\u0441\u043a\u0438 \u0441 SLA-\u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433\u0430 \u043d\u0430 \u043f\u0440\u043e\u0446\u0435\u0441\u0441\u044b \u043a\u043e\u043d\u043a\u0440\u0435\u0442\u043d\u044b\u0445 \u0441\u0438\u0441\u0442\u0435\u043c, \u043d\u0430 \u043a\u043e\u043d\u043a\u0440\u0435\u0442\u043d\u044b\u0439 \u043a\u043b\u0430\u0441\u0442\u0435\u0440, \u043d\u0430 \u043a\u043e\u043d\u043a\u0440\u0435\u0442\u043d\u0443\u044e \u0434\u0436\u043e\u0431\u0443. \u0415\u0441\u043b\u0438 \u043c\u044b \u0441\u043f\u0443\u0441\u043a\u0430\u0435\u043c\u0441\u044f \u043d\u0430 \u043a\u043e\u043d\u043a\u0440\u0435\u0442\u043d\u0443\u044e \u0434\u0436\u043e\u0431\u0443 \u0438 \u0432\u0438\u0434\u0438\u043c \u044d\u043a\u0440\u0430\u043d \u0438\u0437 \u0442\u044b\u0441\u044f\u0447\u0438 \u043c\u0435\u0442\u0440\u0438\u043a, \u0438 30 \u0438\u0437 \u043d\u0438\u0445 \u0433\u043e\u0440\u044f\u0442 \u043a\u0440\u0430\u0441\u043d\u044b\u043c\u0438, \u0441\u0434\u0435\u043b\u0430\u0442\u044c \u0432\u044b\u0432\u043e\u0434, \u0447\u0442\u043e \u043f\u0440\u043e\u0438\u0441\u0445\u043e\u0434\u0438\u0442, \u043d\u0435\u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e. \u0418\u0441\u0447\u0435\u0440\u043f\u044b\u0432\u0430\u044e\u0449\u0438\u043c \u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433\u043e\u043c \u043c\u043e\u0436\u043d\u043e \u0441\u0447\u0438\u0442\u0430\u0442\u044c \u0442\u043e\u0442, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0441\u0440\u0430\u0431\u0430\u0442\u044b\u0432\u0430\u0435\u0442 \u0432 \u0431\u043e\u043b\u044c\u0448\u0438\u043d\u0441\u0442\u0432\u0435 \u0441\u043b\u0443\u0447\u0430\u0435\u0432. \u0410 \u0441 \u0432\u0435\u0440\u0445\u043d\u0435\u0433\u043e \u0443\u0440\u043e\u0432\u043d\u044f \u0443 \u043d\u0430\u0441 \u0441\u0442\u043e\u0438\u0442 \u00ab\u0432\u0441\u0435 \u0441\u043b\u043e\u043c\u0430\u043b\u043e\u0441\u044c\u00bb. \u0418 \u00ab\u0432\u0441\u0435 \u0441\u043b\u043e\u043c\u0430\u043b\u043e\u0441\u044c\u00bb \u0437\u0430\u043f\u0443\u0441\u043a\u0430\u0435\u0442 \u0440\u0435\u0441\u0435\u0447 \u0434\u043e \u0440\u0430\u0441\u0448\u0438\u0440\u0435\u043d\u0438\u044f \u0441\u043f\u0438\u0441\u043a\u043e\u0432 \u0430\u043b\u0435\u0440\u0442\u043e\u0432. <\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u041c\u043d\u0435 \u043a\u0430\u0436\u0435\u0442\u0441\u044f, \u0447\u0442\u043e \u043c\u044b \u043f\u0440\u043e\u0441\u0442\u043e \u043f\u0440\u0438\u0445\u043e\u0434\u0438\u043c \u043a \u0442\u043e\u043f\u0438\u043a\u0443 white box VS black box \u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433, \u043d\u0430\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u044f \u0437\u043d\u0430\u044e \u0443 \u0421\u043b\u0451\u0440\u043c\u0430 \u0435\u0441\u0442\u044c \u0432\u0441\u044f\u043a\u0438\u0435 \u043a\u0443\u0440\u0441\u044b \u043d\u0430 \u044d\u0442\u0443 \u0442\u0435\u043c\u0443. <\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0421\u0430\u043c\u044b\u0439 \u043f\u0440\u043e\u0441\u0442\u043e\u0439 \u043f\u0443\u0442\u044c \u2014 \u044d\u0442\u043e \u0432\u0437\u044f\u0442\u044c \u043a\u0430\u043a\u043e\u0439-\u0442\u043e \u043f\u0440\u043e\u043f\u0440\u0438\u0435\u0442\u0430\u0440\u043d\u044b\u0439 \u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u0443\u0436\u0435 \u0434\u043e\u043b\u0433\u043e (\u043d\u0430\u043f\u0440\u0438\u043c\u0435\u0440, \u043e\u0442 Confluent). \u041f\u043e\u0441\u043c\u043e\u0442\u0440\u0435\u0442\u044c, \u043a\u0430\u043a \u0443 \u043d\u0438\u0445 \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442, \u0438 \u043f\u043e\u043d\u044f\u0442\u044c \u0447\u0442\u043e \u0432\u0430\u043c \u043d\u0443\u0436\u043d\u043e. \u0422\u0430\u043c \u0432\u0441\u0451 \u0434\u043e\u0432\u043e\u043b\u044c\u043d\u043e-\u0442\u0430\u043a\u0438 \u043a\u0440\u0430\u0441\u0438\u0432\u043e, \u0432 \u043a\u0430\u0440\u0442\u0438\u043d\u043a\u0430\u0445. \u041d\u0435 \u043d\u0430\u0434\u043e \u044d\u0442\u043e \u043f\u043e\u043a\u0443\u043f\u0430\u0442\u044c, \u043d\u043e \u0437\u0430\u0438\u043c\u043f\u043b\u0435\u043c\u0435\u043d\u0442\u0438\u0442\u044c \u0447\u0435\u0440\u0435\u0437 Prometheus, Consul, Grafana, Graphite \u0442\u043e\u0447\u043d\u043e \u043c\u043e\u0436\u043d\u043e.<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u0423 Kafka \u0432 \u0433\u043b\u0430\u0432\u043d\u043e\u0439 \u0434\u043e\u043a\u0443\u043c\u0435\u043d\u0442\u0430\u0446\u0438\u0438 \u0435\u0441\u0442\u044c \u043e\u043f\u0438\u0441\u0430\u043d\u0438\u0435 \u043a\u0440\u0438\u0442\u0438\u0447\u0435\u0441\u043a\u0438\u0445 \u043c\u0435\u0442\u0440\u0438\u043a, \u0437\u0430 \u043a\u043e\u0442\u043e\u0440\u044b\u043c\u0438 \u043d\u0430\u0434\u043e \u0441\u043b\u0435\u0434\u0438\u0442\u044c. <\/p>\n<p>  <\/p>\n<h2 id=\"osobennosti-razrabotki-prilozheniy-dlya-raboty-s-kafka\">\u041e\u0441\u043e\u0431\u0435\u043d\u043d\u043e\u0441\u0442\u0438 \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u043a\u0438 \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u0439 \u0434\u043b\u044f \u0440\u0430\u0431\u043e\u0442\u044b \u0441 Kafka<\/h2>\n<p>  <\/p>\n<p>\u041c\u0410\u0420\u0421\u0415\u041b\u042c \u0418\u0411\u0420\u0410\u0415\u0412: \u0415\u0441\u0442\u044c \u043b\u0438 \u043e\u0441\u043e\u0431\u0435\u043d\u043d\u043e\u0441\u0442\u0438 \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u043a\u0438 \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u044f \u0434\u043b\u044f \u0440\u0430\u0431\u043e\u0442\u044b \u0441 Kafka? \u041a\u0430\u043a\u0438\u0435-\u0442\u043e \u043f\u043e\u0434\u0445\u043e\u0434\u044b?<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u0425\u043e\u0447\u0435\u0442\u0441\u044f \u043a\u0430\u043a-\u0442\u043e \u0441\u0444\u043e\u0440\u043c\u0443\u043b\u0438\u0440\u043e\u0432\u0430\u0442\u044c, \u0447\u0442\u043e\u0431\u044b \u043e\u043f\u044f\u0442\u044c \u044d\u0442\u043e \u043d\u0435 \u043f\u0440\u0435\u0432\u0440\u0430\u0449\u0430\u0442\u044c \u0432 \u0447\u0430\u0441\u043e\u0432\u0443\u044e \u0434\u0438\u0441\u043a\u0443\u0441\u0441\u0438\u044e, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e \u043e\u0447\u0435\u043d\u044c \u0448\u0438\u0440\u043e\u043a\u0438\u0435 \u0432\u043e\u043f\u0440\u043e\u0441\u044b. \u041c\u044b \u0443\u0436\u0435 \u0437\u0430\u0442\u0440\u043e\u043d\u0443\u043b\u0438 \u043a\u043b\u0438\u0435\u043d\u0442\u044b. \u0412 \u0437\u0430\u0432\u0438\u0441\u0438\u043c\u043e\u0441\u0442\u0438 \u043e\u0442 \u0442\u043e\u0433\u043e, \u043a\u0430\u043a\u043e\u0439 \u043a\u043b\u0438\u0435\u043d\u0442 \u0432\u044b \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442\u0435, \u043e\u043d \u0431\u0443\u0434\u0435\u0442 \u0432\u0435\u0441\u0442\u0438 \u0441\u0435\u0431\u044f \u043f\u043e-\u0440\u0430\u0437\u043d\u043e\u043c\u0443. \u0414\u0430\u0432\u0430\u0439\u0442\u0435 \u043e\u0431\u0441\u0443\u0434\u0438\u043c Java vanilla \u043a\u043b\u0438\u0435\u043d\u0442, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e \u043e\u043d \u043d\u0430\u0432\u0435\u0440\u043d\u044f\u043a\u0430 \u0441\u0430\u043c\u044b\u0439 \u043f\u043e\u043f\u0443\u043b\u044f\u0440\u043d\u044b\u0439. \u0412 Java vanilla \u043a\u043b\u0438\u0435\u043d\u0442\u0435 \u0443 \u0432\u0430\u0441 \u0435\u0441\u0442\u044c \u0434\u0432\u0435 \u0447\u0430\u0441\u0442\u0438 \u044d\u0442\u043e\u0439 \u0431\u0438\u0431\u043b\u0438\u043e\u0442\u0435\u043a\u0438: producers \u0438 consumers. \u041e\u0431\u0435 \u044d\u0442\u0438 \u0447\u0430\u0441\u0442\u0438 \u0442\u044e\u043d\u044f\u0442\u0441\u044f \u0441\u043e\u0432\u0435\u0440\u0448\u0435\u043d\u043d\u043e \u043f\u043e-\u0440\u0430\u0437\u043d\u043e\u043c\u0443. \u0423 \u043a\u0430\u0436\u0434\u043e\u0439 \u0441\u0432\u043e\u0439 \u043d\u0430\u0431\u043e\u0440 \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u0439, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0432\u044b \u043c\u043e\u0436\u0435\u0442\u0435 \u043d\u0430\u0441\u0442\u0440\u043e\u0438\u0442\u044c \u0432 \u0437\u0430\u0432\u0438\u0441\u0438\u043c\u043e\u0441\u0442\u0438 \u043e\u0442 \u0442\u043e\u0433\u043e, \u043f\u043e\u0434 \u043a\u0430\u043a\u0438\u0435 \u043f\u0440\u043e\u0434\u0443\u043a\u0442\u043e\u0432\u044b\u0435 \u0446\u0435\u043b\u0438 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442\u0435 Kafka. \u041f\u0440\u043e\u0434\u044e\u0441\u0435\u0440 \u0432\u044b \u043c\u043e\u0436\u0435\u0442\u0435 \u0437\u0430\u0442\u044e\u043d\u0438\u0442\u044c \u043b\u0438\u0431\u043e \u043f\u043e\u0434 low latency, \u0447\u0442\u043e\u0431\u044b \u043e\u043d \u043a\u0430\u043a \u043c\u043e\u0436\u043d\u043e \u0431\u044b\u0441\u0442\u0440\u0435\u0435 \u043e\u0442\u043f\u0440\u0430\u0432\u043b\u044f\u043b \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u044f \u0441 \u0432\u044b\u0441\u043e\u043a\u043e\u0439 \u0433\u0430\u0440\u0430\u043d\u0442\u0438\u0435\u0439 \u0434\u043e\u0441\u0442\u0430\u0432\u043a\u0438, \u043b\u0438\u0431\u043e \u0432\u044b \u043c\u043e\u0436\u0435\u0442\u0435 \u0441\u043a\u0430\u0437\u0430\u0442\u044c: \u043c\u043d\u0435 \u043d\u0443\u0436\u043d\u043e \u043c\u0435\u0434\u043b\u0435\u043d\u043d\u043e, \u043d\u043e \u043c\u043d\u043e\u0433\u043e, \u0438\u043b\u0438 \u043c\u0430\u043b\u043e, \u043d\u043e \u043a\u0430\u0447\u0435\u0441\u0442\u0432\u0435\u043d\u043d\u043e, \u043b\u0438\u0431\u043e \u0447\u0442\u043e-\u0442\u043e \u0441\u0440\u0435\u0434\u043d\u0435\u0435 (in the middle). <\/p>\n<p>  <\/p>\n<p>\u041f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e, \u043a\u0441\u0442\u0430\u0442\u0438, \u044d\u0442\u043e \u043a\u0430\u0441\u0430\u0435\u0442\u0441\u044f \u0438 \u043d\u0430\u0441\u0442\u0440\u043e\u0435\u043a \u0431\u0440\u043e\u043a\u0435\u0440\u0430 \u0442\u043e\u0436\u0435, Kafka \u043d\u0430\u0441\u0442\u0440\u043e\u0435\u043d\u0430 \u043a\u0430\u043a \u0441\u0438\u0441\u0442\u0435\u043c\u0430 in the middle: \u043e\u043d\u0430 \u043d\u0435 \u0434\u0430\u0435\u0442 \u0432\u0430\u043c \u0441\u0443\u043f\u0435\u0440\u0433\u0430\u0440\u0430\u043d\u0442\u0438\u0438 \u0434\u043e\u0441\u0442\u0430\u0432\u043a\u0438 \u0438 \u043d\u0435 \u0437\u0430\u0442\u043e\u0447\u0435\u043d\u0430 \u043f\u043e\u0434 \u0441\u0443\u043f\u0435\u0440 low latency, \u043e\u043d\u0430 \u0433\u0434\u0435-\u0442\u043e \u043f\u043e\u0441\u0435\u0440\u0435\u0434\u0438\u043d\u0435, \u0447\u0442\u043e\u0431\u044b \u0443\u0434\u043e\u0432\u043b\u0435\u0442\u0432\u043e\u0440\u044f\u0442\u044c 80% \u044e\u0437\u043a\u0435\u0439\u0441\u043e\u0432. \u042d\u0442\u043e \u0432\u0430\u0436\u043d\u043e \u0443\u043f\u043e\u043c\u044f\u043d\u0443\u0442\u044c, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e \u0435\u0441\u043b\u0438 \u0432\u044b \u043d\u0435 \u0432\u0438\u0434\u0438\u0442\u0435 \u043f\u0440\u043e\u0431\u043b\u0435\u043c \u0441 \u043f\u0440\u043e\u0434\u044e\u0441\u0435\u0440\u0430\u043c\u0438, \u0441 \u043a\u043e\u043d\u0441\u044e\u043c\u0435\u0440\u0430\u043c\u0438 \u0438\u043b\u0438 \u0431\u0440\u043e\u043a\u0435\u0440\u0430\u043c\u0438, \u0441\u043a\u043e\u0440\u0435\u0435 \u0432\u0441\u0435\u0433\u043e, \u0432\u0430\u043c \u043d\u0435 \u043d\u0443\u0436\u043d\u043e \u0442\u0440\u043e\u0433\u0430\u0442\u044c \u044d\u0442\u0438 \u043d\u0430\u0441\u0442\u0440\u043e\u0439\u043a\u0438. <\/p>\n<p>  <\/p>\n<p>\u041f\u0440\u0438\u0432\u0435\u0434\u0443 \u043f\u0440\u0438\u043c\u0435\u0440. \u0412 Booking.com \u0432 \u043f\u0435\u0440\u0432\u044b\u0435 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u043b\u0435\u0442 \u043c\u044b, \u043c\u043e\u0436\u0435\u0442 \u0431\u044b\u0442\u044c, 3 \u0438\u043b\u0438 4 \u0438\u0437 \u0441\u043e\u0442\u043d\u0438 top level \u043a\u043e\u043d\u0444\u0438\u0433\u043e\u0432 \u043c\u0435\u043d\u044f\u043b\u0438. \u0422\u043e \u0435\u0441\u0442\u044c \u0432\u043e\u0442 \u044d\u0442\u043e\u0442 \u0434\u0435\u0444\u043e\u043b\u0442 \u0434\u0435\u0439\u0441\u0442\u0432\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u043e\u0447\u0435\u043d\u044c \u00absame\u00bb \u0432 Kafka. \u0415\u0441\u043b\u0438 \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0430\u0442\u044c\u0441\u044f \u043a producer side. \u0414\u0436\u0430\u0432\u043e\u0432\u044b\u0439 producer \u2014 \u044d\u0442\u043e \u043c\u0443\u043b\u044c\u0442\u0438\u0442\u0440\u0435\u0434\u043d\u043e\u0435 \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u0435, \u043a\u043e\u0442\u043e\u0440\u043e\u0435 \u0432\u043d\u0443\u0442\u0440\u0438 \u043e\u0442\u043a\u0440\u044b\u0432\u0430\u0435\u0442 n \u0442\u0440\u0435\u0434\u043e\u0432, \u043a\u043e\u043d\u043d\u0435\u043a\u0442\u0438\u0442\u0441\u044f \u043a \u0431\u0440\u043e\u043a\u0435\u0440\u0430\u043c, \u043d\u0430\u0447\u0438\u043d\u0430\u0435\u0442 \u0441\u043b\u0430\u0442\u044c \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u044f. \u041b\u0443\u0447\u0448\u0430\u044f \u043f\u0440\u0430\u043a\u0442\u0438\u043a\u0430 \u0435\u0433\u043e \u043f\u0440\u0438\u043c\u0435\u043d\u0435\u043d\u0438\u044f \u2014 \u044d\u0442\u043e \u043f\u0435\u0440\u0435\u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043d\u0438\u0435 \u043e\u0434\u043d\u043e\u0433\u043e \u0438 \u0442\u043e\u0433\u043e \u0436\u0435 \u0438\u043d\u0441\u0442\u0430\u043d\u0441\u0430 \u0432 Java. \u041d\u0435 \u043d\u0443\u0436\u043d\u043e \u043e\u0442\u043a\u0440\u044b\u0432\u0430\u0442\u044c \u0442\u0440\u0435\u0434-\u0441\u0435\u0439\u0444, \u0441\u043e\u043e\u0442\u0432\u0435\u0442\u0441\u0442\u0432\u0435\u043d\u043d\u043e, \u0432\u044b \u043c\u043e\u0436\u0435\u0442\u0435 \u0443\u0441\u043f\u0435\u0448\u043d\u043e \u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c\u0441\u044f \u043e\u0434\u043d\u0438\u043c \u0438 \u0442\u0435\u043c \u0436\u0435 \u0438\u043d\u0441\u0442\u0430\u043d\u0441\u043e\u043c. <\/p>\n<p>  <\/p>\n<p>\u0421 \u043a\u043e\u043d\u0441\u044e\u043c\u0435\u0440\u043e\u043c \u0441\u043e\u0432\u0435\u0440\u0448\u0435\u043d\u043d\u043e \u0434\u0440\u0443\u0433\u0430\u044f \u0438\u0441\u0442\u043e\u0440\u0438\u044f, \u043e\u043d \u043d\u0435 \u0442\u0440\u0435\u0434-\u0441\u0435\u0439\u0444. \u041c\u0430\u043b\u043e \u0442\u043e\u0433\u043e, \u0447\u0442\u043e, \u043a\u043e\u0433\u0434\u0430 \u0432\u044b \u0434\u0435\u043b\u0430\u0435\u0442\u0435 \u043a\u0430\u043a\u0438\u0435-\u0442\u043e \u0437\u0430\u043f\u0440\u043e\u0441\u044b \u0442\u0438\u043f\u0430 poll, \u0435\u0441\u043b\u0438 \u0432 \u0434\u0430\u043d\u043d\u044b\u0439 \u043c\u043e\u043c\u0435\u043d\u0442 \u0432 \u0431\u0443\u0444\u0435\u0440\u0435 \u0443 \u044d\u0442\u043e\u0433\u043e \u043a\u043e\u043d\u0441\u044e\u043c\u0435\u0440\u0430 \u043d\u0435\u0442 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0439, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u043e\u043d \u0432\u0430\u043c \u043c\u043e\u0436\u0435\u0442 \u043e\u0442\u0434\u0430\u0442\u044c \u043d\u0430\u043f\u0440\u044f\u043c\u0443\u044e, \u043e\u043d \u0437\u0430\u0431\u043b\u043e\u043a\u0438\u0440\u0443\u0435\u0442 \u0432\u0430\u0448 main trap \u0438 \u043d\u0430\u0447\u043d\u0435\u0442 \u0434\u0435\u043b\u0430\u0442\u044c \u0437\u0430\u043f\u0440\u043e\u0441\u044b Kafka. \u042d\u0442\u043e \u0443\u0436\u0435 \u0441\u043e\u0432\u0435\u0440\u0448\u0435\u043d\u043d\u043e \u0434\u0432\u0430 \u0440\u0430\u0437\u043d\u044b\u0445 \u043f\u043e\u0432\u0435\u0434\u0435\u043d\u0438\u044f \u0432\u0440\u043e\u0434\u0435 \u043a\u0430\u043a \u043e\u0434\u043d\u043e\u0439 \u0438 \u0442\u043e\u0439 \u0436\u0435 \u0431\u0438\u0431\u043b\u0438\u043e\u0442\u0435\u043a\u0438.<br \/>  \u041d\u043e \u044f \u0443\u0432\u0435\u0440\u0435\u043d, \u0447\u0442\u043e \u0432 80-90% \u0432\u0430\u043c \u043d\u0435 \u043d\u0430\u0434\u043e \u0431\u0443\u0434\u0435\u0442 \u043d\u0438\u0447\u0435\u0433\u043e \u0442\u044e\u043d\u0438\u0442\u044c, \u0432\u0430\u043c \u043f\u0440\u043e\u0441\u0442\u043e \u043d\u0443\u0436\u043d\u043e \u043f\u043e\u043d\u044f\u0442\u044c, \u0441 \u043a\u0430\u043a\u043e\u0439 \u0433\u0430\u0440\u0430\u043d\u0442\u0438\u0435\u0439 \u0432\u044b \u0445\u043e\u0442\u0438\u0442\u0435 \u0434\u043e\u0441\u0442\u0430\u0432\u0438\u0442\u044c \u0432\u0430\u0448\u0435 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0435. \u0412\u0430\u043c, \u043d\u0430\u043f\u0440\u0438\u043c\u0435\u0440, \u0431\u0435\u0437 \u0440\u0430\u0437\u043d\u0438\u0446\u044b, \u0434\u043e\u0439\u0434\u0435\u0442 \u043e\u043d\u043e \u0438\u043b\u0438 \u043d\u0435\u0442 (\u043f\u043e\u0441\u043a\u043e\u043b\u044c\u043a\u0443 \u044d\u0442\u043e \u043c\u0435\u0442\u0440\u0438\u043a\u0430 \u0438\u043b\u0438 log line), \u0438\u043b\u0438 \u0432\u0430\u043c \u0432\u0430\u0436\u043d\u043e \u043d\u0435 \u043f\u043e\u0442\u0435\u0440\u044f\u0442\u044c \u0435\u0433\u043e (\u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0435 \u043e \u0437\u0430\u043a\u0430\u0437\u0435 \u043d\u0430 \u0441\u0430\u0439\u0442\u0435). \u0414\u043b\u044f \u044d\u0442\u043e\u0433\u043e \u0435\u0441\u0442\u044c \u043e\u0434\u043d\u0430 top level \u043d\u0430\u0441\u0442\u0440\u043e\u0439\u043a\u0430, \u043a\u043e\u0442\u043e\u0440\u0430\u044f \u0431\u0443\u0434\u0435\u0442 \u0444\u0430\u043a\u0442\u0438\u0447\u0435\u0441\u043a\u0438 \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u0438\u0440\u043e\u0432\u0430\u0442\u044c, \u043d\u0430 \u043a\u0430\u043a\u043e\u0435 \u043a\u043e\u043b\u0438\u0447\u0435\u0441\u0442\u0432\u043e \u0440\u0435\u043f\u043b\u0438\u043a \u0431\u0443\u0434\u0435\u0442 \u0437\u0430\u043f\u0438\u0441\u0430\u043d\u043e \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0435, \u0438 \u043e\u0442\u0432\u0435\u0442 \u0432 \u0432\u0430\u0448\u0435 \u043f\u0440\u0438\u043b\u043e\u0436\u0435\u043d\u0438\u0435 \u0432\u0435\u0440\u043d\u0451\u0442\u0441\u044f \u0442\u043e\u043b\u044c\u043a\u043e \u0442\u043e\u0433\u0434\u0430, \u043a\u043e\u0433\u0434\u0430 n \u0440\u0435\u043f\u043b\u0438\u043a \u043f\u043e\u0434\u0442\u0432\u0435\u0440\u0434\u0438\u043b\u0438 \u0437\u0430\u043f\u0438\u0441\u044c. \u0421\u043e\u043e\u0442\u0432\u0435\u0442\u0441\u0442\u0432\u0435\u043d\u043d\u043e, \u0432\u044b \u043c\u043e\u0436\u0435\u0442\u0435 \u0441\u043a\u0430\u0437\u0430\u0442\u044c, \u0447\u0442\u043e \u044f \u043f\u0440\u043e\u0441\u0442\u043e \u043f\u043e\u0441\u043b\u0430\u043b \u043f\u043e \u0441\u0435\u0442\u0438 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0435, \u0438 \u043c\u043d\u0435 \u0434\u0430\u0436\u0435 TCP-\u0430\u043a\u0442 \u043d\u0435 \u043d\u0443\u0436\u0435\u043d, (\u044d\u0442\u043e \u0430\u043a\u0442 0, \u043f\u043e-\u043c\u043e\u0435\u043c\u0443).<br \/>  \u041f\u0440\u043e \u0432\u0441\u044e \u044d\u0442\u0443 \u0442\u0435\u043c\u0443 \u0435\u0441\u0442\u044c \u043e\u0442\u043b\u0438\u0447\u043d\u0430\u044f \u0441\u0442\u0430\u0442\u044c\u044f \u00abHow to Lose Messages on a Kafka Cluster\u00bb. \u0418 \u0442\u0430\u043c \u0434\u043e\u0441\u0442\u0430\u0442\u043e\u0447\u043d\u043e \u0431\u043e\u043b\u044c\u0448\u043e\u0435 \u0438\u0441\u0441\u043b\u0435\u0434\u043e\u0432\u0430\u043d\u0438\u0435 \u043f\u0440\u043e\u0432\u0435\u0434\u0435\u043d\u043e. \u0422\u0430\u043c \u0432 Docker \u0447\u0443\u0432\u0430\u043a \u043f\u043e\u0434\u043d\u0438\u043c\u0430\u043b \u0440\u0430\u0437\u043d\u044b\u0435 \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u0438 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u043e\u0432, \u043f\u0438\u0441\u0430\u043b \u0432 \u043d\u0438\u0445 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u044f, \u0432\u0430\u043b\u0438\u043b \u044d\u0442\u0438 \u043d\u043e\u0434\u044b \u0438 \u0441\u043c\u043e\u0442\u0440\u0435\u043b, \u0433\u0434\u0435 \u043a\u0430\u043a\u0438\u0435 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u044f \u0442\u0435\u0440\u044f\u044e\u0442\u0441\u044f. \u041f\u043e\u0439\u0434\u0438\u0442\u0435 \u043f\u043e\u0447\u0438\u0442\u0430\u0439\u0442\u0435 \u0438 \u0432\u044b \u043f\u043e\u0439\u043c\u0451\u0442\u0435, \u0447\u0442\u043e \u043d\u0443\u0436\u043d\u043e \u0438 \u043d\u0435 \u043d\u0443\u0436\u043d\u043e \u0434\u0435\u043b\u0430\u0442\u044c.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u042f \u0441 \u0421\u0430\u0448\u0435\u0439 \u043f\u043e\u043b\u043d\u043e\u0441\u0442\u044c\u044e \u0441\u043e\u0433\u043b\u0430\u0441\u0435\u043d. \u0415\u0434\u0438\u043d\u0441\u0442\u0432\u0435\u043d\u043d\u043e\u0435, \u0434\u043e\u0431\u0430\u0432\u0438\u043b \u0431\u044b, \u0447\u0442\u043e \u0432\u044b, \u0441\u043a\u043e\u0440\u0435\u0435 \u0432\u0441\u0435\u0433\u043e, \u0432 \u043a\u0430\u043a\u043e\u0439-\u0442\u043e \u043c\u043e\u043c\u0435\u043d\u0442 \u043f\u0440\u0438\u0434\u0451\u0442\u0435 \u043a \u043a\u043e\u0440\u043e\u0431\u043e\u0447\u043a\u0430\u043c. \u0423 \u0432\u0430\u0441 \u0431\u0443\u0434\u0443\u0442 \u043a\u0430\u043a \u0440\u0430\u0437 \u044d\u0442\u0438 \u043a\u043e\u043d\u0444\u0438\u0433\u0438 \u0438 \u0432\u044b \u043c\u043e\u0436\u0435\u0442\u0435 \u0438\u0445 \u0432\u0441\u0435\u0445 \u0437\u0430\u0433\u043d\u0430\u0442\u044c \u0432 \u043a\u0430\u043a\u043e\u0439-\u043d\u0438\u0431\u0443\u0434\u044c \u0444\u0440\u0435\u0439\u043c\u0432\u043e\u0440\u043a \u0438 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c \u0432\u0441\u0451 \u0432\u0440\u0435\u043c\u044f \u043e\u0434\u043d\u0438 \u0438 \u0442\u0435 \u0436\u0435, \u0447\u0442\u043e\u0431\u044b \u043d\u0435 \u0434\u0430\u0432\u0430\u0442\u044c \u043a\u043b\u0438\u0435\u043d\u0442\u0430\u043c \u0441\u0438\u043b\u044c\u043d\u043e \u043c\u043d\u043e\u0433\u043e \u0440\u0443\u0447\u0435\u043a, \u0447\u0442\u043e\u0431\u044b \u043e\u043d\u0438 \u043d\u0435 \u043a\u0440\u0443\u0442\u0438\u043b\u0438 \u0438 \u043d\u0435 \u043f\u043e\u0440\u0442\u0438\u043b\u0438 \u0441\u0430\u043c\u0438 \u0441\u0435\u0431\u0435 \u0436\u0438\u0437\u043d\u044c \u0441\u043b\u0443\u0447\u0430\u0439\u043d\u043e. <\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u0421\u043e\u0433\u043b\u0430\u0441\u0435\u043d. \u0423 \u043d\u0430\u0441 \u0432 Booking.com \u043f\u0440\u0438\u043c\u0435\u0440\u043d\u043e \u0442\u0430\u043a \u0436\u0435 \u0438 \u0431\u044b\u043b\u043e \u0441\u0434\u0435\u043b\u0430\u043d\u043e: \u0442\u044b \u043c\u043e\u0433 \u0437\u0430\u0442\u044e\u043d\u0438\u0442\u044c \u0432\u0441\u0435 \u043a\u043e\u043d\u0444\u0438\u0433\u0438, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0445\u043e\u0442\u0435\u043b, \u043d\u0438\u0447\u0435\u0433\u043e \u043d\u0435 \u043e\u0433\u0440\u0430\u043d\u0438\u0447\u0438\u0432\u0430\u043b\u0438, \u043d\u043e \u043c\u044b \u0434\u0430\u0432\u0430\u043b\u0438 \u043d\u0430\u0431\u043e\u0440 \u043f\u0440\u0435\u0441\u0435\u0442\u043e\u0432 \u0438\u043b\u0438 \u043a\u043e\u0440\u043e\u0431\u043e\u0447\u0435\u043a, \u043a\u0430\u043a \u0442\u044b \u0441\u043a\u0430\u0437\u0430\u043b. \u0423 \u043d\u0438\u0445 \u0431\u044b\u043b\u043e human-readable \u043d\u0430\u0437\u0432\u0430\u043d\u0438\u0435 \u0442\u0438\u043f\u0430 \u00ablow latency\u00bb, \u00abNo AX\u00bb, \u00abhigh-throughput\u00bb \u0438 \u043c\u044b \u0437\u0430\u0442\u044e\u043d\u0438\u0432\u0430\u043b\u0438 3-5 \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440\u043e\u0432 \u0432 \u0431\u044d\u043a\u0433\u0440\u0430\u0443\u043d\u0434 \u0437\u0430 \u0442\u0435\u0431\u044f.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0414\u0430, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e \u043a\u0430\u0436\u0435\u0442\u0441\u044f, \u0447\u0442\u043e \u044d\u0442\u043e \u043f\u0440\u043e\u0431\u043b\u0435\u043c\u0430 \u0441\u043e \u0432\u0441\u0435\u043c\u0438 \u0441\u0438\u0441\u0442\u0435\u043c\u0430\u043c\u0438, \u0433\u0434\u0435 \u043c\u043d\u043e\u0433\u043e \u043a\u043b\u0438\u0435\u043d\u0442\u0441\u043a\u0438\u0445 \u043d\u0430\u0441\u0442\u0440\u043e\u0435\u043a, \u0447\u0442\u043e \u0435\u0441\u043b\u0438 \u0443 \u0432\u0430\u0441 \u0441\u043e\u0442\u043d\u0438 \u0441\u0435\u0440\u0432\u0438\u0441\u043e\u0432 \u0438\u043b\u0438 \u043a\u043b\u0438\u0435\u043d\u0442\u043e\u0432, \u0441\u043a\u043e\u0440\u0435\u0435 \u0432\u0441\u0435\u0433\u043e, \u043a\u0442\u043e-\u0442\u043e \u0438\u0437 \u043d\u0438\u0445 \u0441\u0434\u0435\u043b\u0430\u0435\u0442 \u043d\u0435\u043f\u0440\u0430\u0432\u0438\u043b\u044c\u043d\u043e. <\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u041d\u0430\u0432\u0435\u0440\u043d\u043e\u0435, \u0442\u0443\u0442 \u0435\u0449\u0435 \u043f\u0440\u043e \u043a\u043e\u043d\u0441\u044e\u043c\u0435\u0440\u044b \u043d\u0443\u0436\u043d\u043e \u0443\u043f\u043e\u043c\u044f\u043d\u0443\u0442\u044c. \u0421\u0430\u043c\u0430\u044f \u0433\u043b\u0430\u0432\u043d\u0430\u044f \u0442\u0435\u043e\u0440\u0438\u044f, \u043a\u043e\u0442\u043e\u0440\u0443\u044e \u043d\u0443\u0436\u043d\u043e \u0437\u043d\u0430\u0442\u044c \u043f\u0440\u043e \u043a\u043e\u043d\u0441\u044e\u043c\u0435\u0440\u0430 \u2014 \u043a\u043e\u0433\u0434\u0430 \u0432\u044b \u043e\u0442\u043f\u0440\u0430\u0432\u043b\u044f\u0435\u0442\u0435 offset, \u043a\u043e\u043c\u043c\u0438\u0442\u0438\u0442\u0435 offset. \u0413\u0430\u0440\u0430\u043d\u0442\u0438\u044f \u043e\u0431\u0440\u0430\u0431\u043e\u0442\u043a\u0438 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u044f \u044d\u0442\u043e: at least once, at most once \u0438\u043b\u0438 exactly once. \u042d\u0442\u043e \u0432\u0430\u0436\u043d\u043e \u0434\u043b\u044f \u0442\u043e\u0433\u043e, \u0447\u0442\u043e\u0431\u044b \u043d\u0435 \u043f\u043e\u0442\u0435\u0440\u044f\u0442\u044c \u0432\u0430\u0448\u0438 \u0434\u0430\u043d\u043d\u044b\u0435, \u043d\u0435 \u043f\u043e\u0442\u0435\u0440\u044f\u0442\u044c \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u044b \u043e\u0431\u0440\u0430\u0431\u043e\u0442\u043a\u0438 \u0432\u0430\u0448\u0438\u0445 \u0434\u0430\u043d\u043d\u044b\u0445 \u0438, \u043f\u043e \u0441\u0443\u0442\u0438, \u043f\u043e \u0431\u043e\u043b\u044c\u0448\u043e\u043c\u0443 \u0441\u0447\u0435\u0442\u0443 \u044d\u0442\u043e \u0432\u0441\u0435 \u0441\u0432\u043e\u0434\u0438\u0442\u0441\u044f \u043a \u0442\u043e\u043c\u0443, \u0447\u0442\u043e \u0432\u043e\u0442 \u0432\u044b \u0441\u0447\u0438\u0442\u0430\u043b\u0438 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0435, \u0432\u044b \u043f\u043e\u043b\u0443\u0447\u0438\u043b\u0438 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0435 \u0438\u0437 Kafka, \u043f\u043e\u0441\u043b\u0435 \u044d\u0442\u043e\u0433\u043e \u0432\u044b \u043f\u0440\u043e\u0432\u043e\u0434\u0438\u0442\u0435 \u0440\u0430\u0431\u043e\u0442\u0443 \u043d\u0430\u0434 \u044d\u0442\u0438\u043c \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0435\u043c (\u043d\u0435\u0432\u0430\u0436\u043d\u043e, \u0447\u0442\u043e \u0432\u044b \u0434\u0435\u043b\u0430\u0435\u0442\u0435), \u0438 \u043f\u0435\u0440\u0435\u0434 \u0432\u0430\u043c\u0438 \u0441\u0442\u043e\u0438\u0442 \u043a\u043b\u044e\u0447\u0435\u0432\u043e\u0439 \u0432\u043e\u043f\u0440\u043e\u0441: \u0432 \u043a\u0430\u043a\u043e\u0439 \u043c\u043e\u043c\u0435\u043d\u0442 \u0432\u044b \u0431\u0443\u0434\u0435\u0442\u0435 \u043a\u043e\u043c\u043c\u0438\u0442\u0438\u0442\u044c \u044d\u0442\u043e\u0442 offset \u043e\u0431\u0440\u0430\u0442\u043d\u043e \u0432 Kafka. \u0412\u044b \u0431\u0443\u0434\u0435\u0442\u0435 \u043a\u043e\u043c\u043c\u0438\u0442\u0438\u0442\u044c \u0435\u0433\u043e \u043a\u0430\u043a \u0437\u0430\u043f\u0440\u043e\u0446\u0435\u0448\u0435\u043d\u043d\u044b\u0439 \u0434\u043e \u0442\u043e\u0433\u043e, \u043a\u0430\u043a \u0432\u044b \u0441\u0434\u0435\u043b\u0430\u0435\u0442\u0435 \u043f\u0440\u043e\u0446\u0435\u0441\u0441\u0438\u043d\u0433 \u0438\u043b\u0438 \u043f\u043e\u0441\u043b\u0435? \u0418 \u0432 \u0437\u0430\u0432\u0438\u0441\u0438\u043c\u043e\u0441\u0442\u0438 \u043e\u0442 \u044d\u0442\u043e\u0433\u043e \u0443 \u0432\u0430\u0441 \u0431\u0443\u0434\u0443\u0442 \u0440\u0430\u0437\u043d\u044b\u0435 \u0433\u0430\u0440\u0430\u043d\u0442\u0438\u0438 \u0434\u043e\u0441\u0442\u0430\u0432\u043a\u0438 \u0438 \u043e\u0431\u0440\u0430\u0431\u043e\u0442\u043a\u0438 \u044d\u0442\u0438\u0445 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0439.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u042f \u0431\u044b \u0435\u0449\u0435 \u0434\u043e\u0431\u0430\u0432\u0438\u043b \u043f\u0440\u043e \u043a\u043e\u043d\u0441\u044e\u043c\u0435\u0440\u0430 \u0442\u043e, \u0447\u0442\u043e \u043e\u043d \u0441\u043a\u0435\u0439\u043b\u0438\u0442\u0441\u044f, \u0438\u0445 \u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u0438\u0437\u043c \u0437\u0430\u0432\u0438\u0441\u0438\u0442 \u043d\u0430\u043f\u0440\u044f\u043c\u0443\u044e \u043e\u0442 \u043a\u043e\u043b\u0438\u0447\u0435\u0441\u0442\u0432\u0430 \u043f\u0430\u0440\u0442\u0438\u0446\u0438\u0439 \u0432 \u0442\u043e\u043f\u0438\u043a\u0435, \u0442\u043e\u0436\u0435 \u0442\u0430\u043a\u0430\u044f \u0431\u0430\u0437\u043e\u0432\u0430\u044f \u0448\u0442\u0443\u043a\u0430. \u0421\u0430\u0448\u0430 \u0441\u043a\u0430\u0437\u0430\u043b \u043f\u0440\u043e \u043c\u0435\u0445\u0430\u043d\u0438\u043a\u0443 \u043e\u0444\u0441\u0435\u0442\u043e\u0432, \u0435\u0441\u0442\u044c \u0435\u0449\u0435 \u0432\u0442\u043e\u0440\u0430\u044f \u0431\u0430\u0437\u043e\u0432\u0430\u044f \u043c\u0435\u0445\u0430\u043d\u0438\u043a\u0430: \u043d\u0435 \u043d\u0443\u0436\u043d\u043e \u043a\u043e\u043d\u0441\u044e\u043c\u0435\u0440\u043e\u0432 \u0431\u043e\u043b\u044c\u0448\u0435 \u0434\u0435\u043b\u0430\u0442\u044c, \u0447\u0435\u043c \u043a\u043e\u043b\u0438\u0447\u0435\u0441\u0442\u0432\u043e \u043f\u0430\u0440\u0442\u0438\u0446\u0438\u0439, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e \u0432 Kafka \u0442\u0430\u043a \u0441\u0434\u0435\u043b\u0430\u043d\u043e \u2014 \u0442\u0430\u043c \u0431\u043e\u043b\u044c\u0448\u0435, \u0447\u0435\u043c \u043e\u0434\u0438\u043d \u043a\u043e\u043d\u0441\u044e\u043c\u0435\u0440 \u043d\u0430 \u043e\u0434\u043d\u0443 \u043f\u0430\u0440\u0442\u0438\u0446\u0438\u044e \u043d\u0435 \u043d\u0430\u043c\u0430\u043f\u0438\u0442\u0441\u044f. \u0415\u0441\u043b\u0438 \u0443 \u0432\u0430\u0441 \u0438\u0445 \u0431\u0443\u0434\u0435\u0442, \u0443\u0441\u043b\u043e\u0432\u043d\u043e, 10, \u0430 \u043f\u0430\u0440\u0442\u0438\u0446\u0438\u0439 \u0432\u0441\u0435\u0433\u043e \u0442\u0440\u0438, \u0442\u043e \u043d\u0438\u043a\u0430\u043a\u043e\u0439 \u043f\u043e\u043b\u044c\u0437\u044b \u0432\u044b \u0438\u0437 \u044d\u0442\u043e\u0433\u043e \u043d\u0435 \u0438\u0437\u0432\u043b\u0435\u0447\u0435\u0442\u0435, \u0438 \u0432\u0430\u043c \u043d\u0430\u0434\u043e \u0431\u0443\u0434\u0435\u0442 \u0441\u043d\u0430\u0447\u0430\u043b\u0430 \u043f\u0430\u0440\u0442\u0438\u0446\u0438\u0438 \u0443\u0432\u0435\u043b\u0438\u0447\u0438\u0442\u044c, \u0430 \u043f\u043e\u0442\u043e\u043c \u0443\u0436\u0435 \u0432\u044b \u043f\u043e\u043b\u0443\u0447\u0438\u0442\u0435 \u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u0438\u0437\u043c.<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u0421\u043e\u0432\u0435\u0440\u0448\u0435\u043d\u043d\u043e \u0432\u0435\u0440\u043d\u043e, \u0434\u0430.<\/p>\n<p>  <\/p>\n<h2 id=\"bekapy\">\u0411\u044d\u043a\u0430\u043f\u044b<\/h2>\n<p>  <\/p>\n<p>\u041c\u0410\u0420\u0421\u0415\u041b\u042c \u0418\u0411\u0420\u0410\u0415\u0412: \u041f\u043e\u0441\u043b\u0435\u0434\u043d\u0438\u0439 \u0432\u043e\u043f\u0440\u043e\u0441 \u0438\u0437 \u0437\u0430\u0433\u043e\u0442\u043e\u0432\u043e\u043a, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u043c\u044b \u0443\u0441\u043f\u0435\u0435\u043c \u0440\u0430\u0441\u0441\u043c\u043e\u0442\u0440\u0435\u0442\u044c: \u0431\u044d\u043a\u0430\u043f. Kafka \u2014 \u0448\u0442\u0443\u043a\u0430 \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0451\u043b\u0435\u043d\u043d\u0430\u044f, \u0438 \u0432\u0440\u043e\u0434\u0435 \u043a\u0430\u043a \u043c\u043e\u0436\u043d\u043e \u0437\u0430\u0431\u0438\u0442\u044c \u0438 \u0441\u043a\u0430\u0437\u0430\u0442\u044c: \u043e\u043d\u0430 \u0441\u0430\u043c\u0430 \u0441\u0435\u0431\u044f \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u0438\u0432\u0430\u0435\u0442, \u0438 \u0435\u0441\u043b\u0438 \u0447\u0442\u043e-\u0442\u043e \u0443\u043f\u0430\u0434\u0435\u0442, \u0442\u043e \u043d\u0443 \u0438 \u043b\u0430\u0434\u043d\u043e, \u043e\u043d\u0430 \u0431\u0443\u0434\u0435\u0442 \u0440\u0430\u0431\u043e\u0442\u0430\u0442\u044c. \u041c\u0430\u0445\u043d\u0443\u0442\u044c \u0440\u0443\u043a\u043e\u0439 \u0438 \u043f\u0440\u0435\u0434\u043f\u043e\u043b\u043e\u0436\u0438\u0442\u044c, \u0447\u0442\u043e \u043d\u0438\u043a\u0430\u043a\u0438\u0445 \u043f\u0440\u043e\u0431\u043b\u0435\u043c \u043d\u0435 \u0431\u0443\u0434\u0435\u0442. \u041d\u043e \u043f\u0440\u0438 \u044d\u0442\u043e\u043c \u0447\u0442\u043e-\u0442\u043e \u0442\u0430\u043a\u043e\u0435 \u0430\u0434\u043c\u0438\u043d\u0441\u043a\u043e\u0435 \u0432 \u0434\u0443\u0448\u0435 \u043f\u0440\u043e\u0441\u0438\u0442 \u0432\u0441\u0435-\u0442\u0430\u043a\u0438 \u043a\u0430\u043a\u0438\u0435-\u0442\u043e \u0441\u043e\u0445\u0440\u0430\u043d\u0435\u043d\u0438\u044f \u0441\u043e\u0441\u0442\u043e\u044f\u043d\u0438\u0439, \u0431\u044d\u043a\u0430\u043f\u044b \u043d\u0430 \u0432\u0441\u044f\u043a\u0438\u0439 \u0441\u043b\u0443\u0447\u0430\u0439. \u0418 \u0432\u043e\u043f\u0440\u043e\u0441 \u0442\u0430\u043a\u043e\u0439: \u043d\u0443\u0436\u043d\u044b \u043b\u0438 \u0432\u043e\u043e\u0431\u0449\u0435 \u0431\u044d\u043a\u0430\u043f\u044b \u043d\u0430 Kafka, \u0435\u0441\u043b\u0438 \u043d\u0443\u0436\u043d\u044b, \u0442\u043e \u043f\u043e\u0447\u0435\u043c\u0443 \u0438\u043b\u0438 \u043f\u043e\u0447\u0435\u043c\u0443 \u043d\u0435 \u043d\u0443\u0436\u043d\u044b?<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u042f \u043f\u0440\u0438\u0434\u0435\u0440\u0436\u0438\u0432\u0430\u044e\u0441\u044c \u043c\u043d\u0435\u043d\u0438\u044f, \u0447\u0442\u043e \u0441\u043a\u043e\u0440\u0435\u0435 \u043d\u0435 \u043d\u0443\u0436\u043d\u044b. \u0412\u043e-\u043f\u0435\u0440\u0432\u044b\u0445, \u0432 Kafka \u0435\u0441\u0442\u044c \u0432\u0441\u0442\u0440\u043e\u0435\u043d\u043d\u044b\u0439 \u043c\u0435\u0445\u0430\u043d\u0438\u0437\u043c \u0440\u0435\u043f\u043b\u0438\u043a\u0430\u0446\u0438\u0438, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u043f\u043e\u043b\u043d\u043e\u0441\u0442\u044c\u044e \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0438\u0440\u0443\u0435\u0442\u0441\u044f \u0432\u0430\u043c\u0438, \u0438 \u0432\u044b \u043c\u043e\u0436\u0435\u0442\u0435 \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u0438\u0440\u043e\u0432\u0430\u0442\u044c \u043a\u043e\u043b\u0438\u0447\u0435\u0441\u0442\u0432\u043e \u0440\u0435\u043f\u043b\u0438\u043a \u043e\u0442 \u043d\u0443\u043b\u044f \u0434\u043e \u0431\u0435\u0441\u043a\u043e\u043d\u0435\u0447\u043d\u043e\u0441\u0442\u0438. \u041f\u043e\u043c\u0438\u043c\u043e \u044d\u0442\u043e\u0433\u043e \u043c\u0435\u0445\u0430\u043d\u0438\u0437\u043c\u0430 \u0432\u0441\u0442\u0440\u043e\u0435\u043d\u043d\u043e\u0439 \u0441\u0435\u0440\u0432\u0435\u0440\u043d\u043e\u0439 \u0440\u0435\u043f\u043b\u0438\u043a\u0430\u0446\u0438\u0438 \u0443 \u0432\u0430\u0441 \u0435\u0441\u0442\u044c \u0442\u0435 \u0441\u0430\u043c\u044b\u0435 \u0433\u0430\u0440\u0430\u043d\u0442\u0438\u0438 \u0434\u043e\u0441\u0442\u0430\u0432\u043a\u0438, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u043c\u044b \u0443\u0436\u0435 \u043e\u0431\u0441\u0443\u0434\u0438\u043b\u0438 (\u0442\u043e\u0442 \u0441\u0430\u043c\u044b\u0439 \u043f\u0430\u0440\u0430\u043c\u0435\u0442\u0440 Ex). \u0412\u044b \u043c\u043e\u0436\u0435\u0442\u0435 \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u0438\u0440\u043e\u0432\u0430\u0442\u044c, \u043d\u0430 \u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0444\u0438\u0437\u0438\u0447\u0435\u0441\u043a\u0438\u0445 \u0438\u043b\u0438 \u0432\u0438\u0440\u0442\u0443\u0430\u043b\u044c\u043d\u044b\u0445 \u043c\u0430\u0448\u0438\u043d, \u043a\u043e\u043d\u0442\u0435\u0439\u043d\u0435\u0440\u043e\u0432, \u043f\u043e\u0434\u043e\u0432 \u0443 \u0432\u0430\u0441 \u0431\u0443\u0434\u0435\u0442 \u0437\u0430\u043f\u0438\u0441\u0430\u043d\u043e \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0435 \u043f\u0435\u0440\u0435\u0434 \u0442\u0435\u043c, \u043a\u0430\u043a producer \u043f\u043e\u043b\u0443\u0447\u0438\u0442 \u00ab\u0412\u0441\u0451 OK\u00bb \u043e\u0442 \u0441\u0435\u0440\u0432\u0435\u0440\u0430. \u0418\u0441\u0445\u043e\u0434\u044f \u0438\u0437 \u0442\u0435\u0445 \u0431\u0438\u0437\u043d\u0435\u0441-\u043a\u0435\u0439\u0441\u043e\u0432, \u0441 \u043a\u043e\u0442\u043e\u0440\u044b\u043c\u0438 \u0440\u0430\u0431\u043e\u0442\u0430\u043b \u044f, \u044d\u0442\u043e\u0439 \u0433\u0430\u0440\u0430\u043d\u0442\u0438\u0438 \u0431\u044b\u043b\u043e \u0431\u043e\u043b\u0435\u0435 \u0447\u0435\u043c \u0434\u043e\u0441\u0442\u0430\u0442\u043e\u0447\u043d\u043e. <\/p>\n<p>  <\/p>\n<p>\u0422\u0443\u0442 \u0435\u0449\u0451 \u0442\u0430\u043a\u043e\u0439 \u043c\u043e\u043c\u0435\u043d\u0442, \u0447\u0442\u043e Kafka \u0438\u043c\u0435\u0435\u0442 \u0437\u0430\u043c\u0435\u0447\u0430\u0442\u0435\u043b\u044c\u043d\u044b\u0439 \u0432\u0441\u0442\u0440\u043e\u0435\u043d\u043d\u044b\u0439 \u043c\u0435\u0445\u0430\u043d\u0438\u0437\u043c \u0440\u0435\u0442\u0435\u043d\u0448\u0435\u043d\u0430 \u0434\u0430\u043d\u043d\u044b\u0445. \u041e\u043d\u0430 \u043c\u043e\u0436\u0435\u0442 \u0438\u0437 \u043a\u043e\u0440\u043e\u0431\u043a\u0438 \u043f\u043e \u0432\u0440\u0435\u043c\u0435\u043d\u0438 \u0438\u043b\u0438 \u043f\u043e \u0440\u0430\u0437\u043c\u0435\u0440\u0443 \u0432\u0430\u0448\u0435\u0433\u043e \u0442\u043e\u043f\u0438\u043a\u0430 \u0443\u0434\u0430\u043b\u044f\u0442\u044c \u0441\u0442\u0430\u0440\u044b\u0435 \u0441\u0435\u0433\u043c\u0435\u043d\u0442\u044b. \u0421\u0435\u0433\u043c\u0435\u043d\u0442\u044b \u0434\u0430\u043d\u043d\u044b\u0445, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0431\u044b\u043b\u0438 \u0437\u0430\u043f\u0438\u0441\u0430\u043d\u044b, \u0434\u043e\u043f\u0443\u0441\u0442\u0438\u043c, \u043d\u0435\u0434\u0435\u043b\u044e \u043d\u0430\u0437\u0430\u0434, \u0435\u0441\u043b\u0438 \u0432\u044b \u0435\u0435 \u0442\u0430\u043a \u0441\u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0438\u0440\u043e\u0432\u0430\u043b\u0438. \u042d\u0442\u043e \u0434\u0430\u0451\u0442 \u0432\u0430\u043c \u0433\u0430\u0440\u0430\u043d\u0442\u0438\u044e, \u0447\u0442\u043e \u0441\u0435\u0439\u0447\u0430\u0441 \u0432\u043d\u0443\u0442\u0440\u0438 \u0432\u0430\u0448\u0435\u0433\u043e \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0430 \u0431\u0443\u0434\u0443\u0442 \u0434\u0430\u043d\u043d\u044b\u0435 \u0437\u0430 \u043f\u0440\u043e\u0448\u0435\u0434\u0448\u0443\u044e \u043d\u0435\u0434\u0435\u043b\u044e, \u0430 \u0431\u043e\u043b\u0435\u0435 \u0440\u0430\u043d\u043d\u0438\u0435 Kafka \u0430\u0432\u0442\u043e\u043c\u0430\u0442\u0438\u0447\u0435\u0441\u043a\u0438 \u0438\u0437 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0430 \u0432\u044b\u043a\u0438\u043d\u0435\u0442. \u0427\u0430\u0449\u0435 \u0432\u0441\u0435\u0433\u043e Kafka \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442\u0441\u044f \u0438\u043c\u0435\u043d\u043d\u043e \u0441 \u0442\u0430\u043a\u0438\u043c \u043f\u0430\u0442\u0442\u0435\u0440\u043d\u043e\u043c, \u0430 \u043d\u0435 \u043a\u0430\u043a \u0431\u0435\u0441\u043a\u043e\u043d\u0435\u0447\u043d\u0430\u044f \u0431\u0430\u0437\u0430 \u0434\u0430\u043d\u043d\u044b\u0445. <\/p>\n<p>  <\/p>\n<p>\u041e\u0434\u0438\u043d \u0438\u0437 \u043f\u043e\u043f\u0443\u043b\u044f\u0440\u043d\u044b\u0445 \u043f\u0430\u0442\u0442\u0435\u0440\u043d\u043e\u0432 \u2014 \u0441\u043a\u043b\u0430\u0434\u044b\u0432\u0430\u0442\u044c \u0440\u0435\u0437\u0443\u043b\u044c\u0442\u0430\u0442\u044b \u0430\u043d\u0430\u043b\u0438\u0442\u0438\u0447\u0435\u0441\u043a\u043e\u0439 \u043e\u0431\u0440\u0430\u0431\u043e\u0442\u043a\u0438 \u0432 \u0442\u043e\u0442 \u0436\u0435 \u0441\u0430\u043c\u044b\u0439 Amazon S3, \u0447\u0442\u043e\u0431\u044b \u043f\u043e\u0442\u043e\u043c \u0438\u0445 \u043c\u043e\u0436\u043d\u043e \u0431\u044b\u043b\u043e \u043f\u043e\u0434\u043d\u044f\u0442\u044c \u0434\u0440\u0443\u0433\u0438\u043c \u043a\u0430\u043a\u0438\u043c-\u0442\u043e \u043a\u043e\u043c\u043f\u043e\u043d\u0435\u043d\u0442\u043e\u043c. <\/p>\n<p>  <\/p>\n<p>\u0415\u0449\u0451 \u043e\u0434\u0438\u043d \u0438\u043d\u0442\u0435\u0440\u0435\u0441\u043d\u044b\u0439 \u043c\u043e\u043c\u0435\u043d\u0442 \u2014 \u044d\u0442\u043e \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u043a\u0430 infinite retention, \u0442\u043e \u0435\u0441\u0442\u044c \u0431\u0435\u0441\u043a\u043e\u043d\u0435\u0447\u043d\u043e\u0433\u043e \u0440\u0435\u0442\u0435\u043d\u0448\u0435\u043d\u0430. \u042d\u0442\u043e \u0437\u043d\u0430\u0447\u0438\u0442, \u0447\u0442\u043e \u0432\u044b \u0441\u043c\u043e\u0436\u0435\u0442\u0435 \u0441\u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0438\u0440\u043e\u0432\u0430\u0442\u044c Kafka \u0442\u0430\u043a\u0438\u043c \u043e\u0431\u0440\u0430\u0437\u043e\u043c, \u0447\u0442\u043e \u0432\u043e\u0442 \u0442\u0435 \u0441\u0430\u043c\u044b\u0435 \u0441\u0442\u0430\u0440\u044b\u0435 \u0441\u0435\u0433\u043c\u0435\u043d\u0442\u044b, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0432\u044b\u043a\u0438\u0434\u044b\u0432\u0430\u044e\u0442\u0441\u044f \u0438 \u043f\u0440\u043e\u0441\u0442\u043e \u0443\u0434\u0430\u043b\u044f\u044e\u0442\u0441\u044f \u0441 \u0434\u0438\u0441\u043a\u0430, \u0432\u044b \u043c\u043e\u0436\u0435\u0442\u0435 \u0441\u043a\u0430\u0437\u0430\u0442\u044c Kafka, \u0447\u0442\u043e \u043e\u043d\u0430 \u0434\u043e\u043b\u0436\u043d\u0430 \u0438\u0445 \u0441\u043b\u043e\u0436\u0438\u0442\u044c \u0432 \u043a\u0430\u043a\u043e\u0439-\u0442\u043e \u0445\u043e\u043b\u043e\u0434\u043d\u044b\u0439 object store (\u043f\u043e \u0431\u043e\u043b\u044c\u0448\u043e\u043c\u0443 \u0441\u0447\u0451\u0442\u0443, \u044d\u0442\u043e Tiered Storage). \u0418\u043d\u0442\u0435\u0440\u043f\u0440\u0430\u0439\u0437\u043d\u044b\u0439 \u0443\u0436\u0435 \u0435\u0441\u0442\u044c, \u043d\u043e \u044f \u0438\u043c \u043d\u0435 \u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043b\u0441\u044f, \u0442\u0430\u043a \u0447\u0442\u043e \u043d\u0435 \u0431\u0443\u0434\u0443 \u0433\u043e\u0432\u043e\u0440\u0438\u0442\u044c (open source \u0434\u043e\u043b\u0436\u0435\u043d \u043f\u043e\u044f\u0432\u0438\u0442\u044c\u0441\u044f). \u0422\u0430\u043a \u0447\u0442\u043e \u0445\u043e\u043b\u043e\u0434\u043d\u044b\u0435 \u0441\u0435\u0433\u043c\u0435\u043d\u0442\u044b, \u0434\u0430\u043d\u043d\u044b\u0435, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0432\u044b \u0443\u0436\u0435 \u043d\u0435 \u0431\u0443\u0434\u0435\u0442\u0435 \u0430\u043a\u0442\u0438\u0432\u043d\u043e \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c, \u0432\u044b \u043c\u043e\u0436\u0435\u0442\u0435 \u0441\u043b\u043e\u0436\u0438\u0442\u044c \u0432 S3 \u0438 \u043f\u043e\u0442\u043e\u043c \u0434\u043e\u0441\u0442\u0430\u0432\u0430\u0442\u044c \u0440\u0430\u0437 \u0432 \u0433\u043e\u0434, \u043a\u043e\u0433\u0434\u0430 \u043d\u0443\u0436\u043d\u043e \u043f\u0435\u0440\u0435\u0447\u0438\u0442\u0430\u0442\u044c \u0432\u0435\u0441\u044c \u043b\u043e\u0433. \u0422\u0430\u043a \u0432\u044b \u0431\u0443\u0434\u0435\u0442\u0435 \u0441\u043e\u0445\u0440\u0430\u043d\u044f\u0442\u044c \u043c\u0435\u0441\u0442\u043e \u043d\u0430 \u0433\u043e\u0440\u044f\u0447\u0435\u043c \u0434\u0438\u0441\u043a\u0435 \u0438 \u043f\u0440\u0438 \u044d\u0442\u043e\u043c \u043d\u0435 \u043f\u043e\u043d\u0430\u0434\u043e\u0431\u0438\u0442\u044c\u0441\u044f \u0437\u0430\u0434\u0443\u043c\u044b\u0432\u0430\u0442\u044c\u0441\u044f \u043e \u0431\u044d\u043a\u0430\u043f\u0430\u0445 \u0438 \u043f\u0440\u043e\u0447\u0438\u0445 \u0434\u043e\u043f\u043e\u043b\u043d\u0438\u0442\u0435\u043b\u044c\u043d\u044b\u0445 \u043d\u0430\u0441\u0442\u0440\u043e\u0439\u043a\u0430\u0445.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u042f \u043f\u043e\u043b\u043d\u043e\u0441\u0442\u044c\u044e \u00ab\u0437\u0430\u00bb, \u0438 \u0443 \u043c\u0435\u043d\u044f \u0435\u0441\u0442\u044c \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0434\u043e\u043f\u043e\u043b\u043d\u0435\u043d\u0438\u0439. \u041d\u0430\u0447\u043d\u0443 \u0441 Tiered Storage. \u042d\u0442\u043e \u043a\u0440\u0443\u0442\u0430\u044f \u0448\u0442\u0443\u043a\u0430, \u043a\u043e\u0442\u043e\u0440\u0430\u044f \u0438\u0437\u043c\u0435\u043d\u0438\u0442 \u0432 \u0446\u0435\u043b\u043e\u043c \u043a\u043e\u043d\u0444\u0438\u0433\u0443\u0440\u0430\u0446\u0438\u044e \u043c\u0430\u0448\u0438\u043d \u043f\u043e Kafka. \u0421\u0435\u0439\u0447\u0430\u0441 \u0443 \u043d\u0430\u0441 \u0435\u0441\u0442\u044c \u043a\u0430\u043a\u0438\u0435-\u0442\u043e \u0437\u0430\u0440\u044f\u0436\u0435\u043d\u043d\u044b\u0435 \u0436\u0435\u043b\u0435\u0437\u043a\u0430\u043c\u0438, \u0434\u0438\u0441\u043a\u0430\u043c\u0438 \u043c\u0430\u0448\u0438\u043d\u044b, \u0430 \u043c\u043e\u0436\u043d\u043e \u0431\u0443\u0434\u0435\u0442 \u043f\u0440\u043e\u0441\u0442\u043e \u043a\u0430\u043a\u0438\u0435-\u0442\u043e \u043c\u0430\u043b\u0435\u043d\u044c\u043a\u0438\u0435 (\u043f\u043e\u0447\u0442\u0438 in memory) Kafka \u0441\u0442\u0430\u0432\u0438\u0442\u044c, \u0430 \u0432\u0441\u0435 \u043e\u0441\u0442\u0430\u043b\u044c\u043d\u043e\u0435 \u0441\u043a\u043b\u0430\u0434\u044b\u0432\u0430\u0442\u044c \u0432 Tiered Storage. \u042d\u0442\u043e \u043a\u0430\u043a \u043e\u0434\u0438\u043d \u0438\u0437 \u0432\u0430\u0440\u0438\u0430\u043d\u0442\u043e\u0432 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u043d\u0438\u044f. <\/p>\n<p>  <\/p>\n<p>\u041f\u043e \u043f\u043e\u0432\u043e\u0434\u0443 \u0431\u044d\u043a\u0430\u043f\u043e\u0432 \u0443 \u043d\u0430\u0441 \u0442\u0430\u043a\u043e\u0439 \u0436\u0435 \u043f\u043e\u0434\u0445\u043e\u0434. Kafka \u2014 \u044d\u0442\u043e \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0435\u043b\u0451\u043d\u043d\u0430\u044f \u043e\u0442\u043a\u0430\u0437\u043e\u0443\u0441\u0442\u043e\u0439\u0447\u0438\u0432\u0430\u044f \u0441\u0438\u0441\u0442\u0435\u043c\u0430, \u043a\u043e\u0442\u043e\u0440\u0430\u044f \u043d\u0435 \u0434\u043e\u043b\u0436\u043d\u0430 \u0442\u0435\u0440\u044f\u0442\u044c \u0434\u0430\u043d\u043d\u044b\u0435, \u0438 \u043e\u043d\u0430 \u0434\u043b\u044f \u044d\u0442\u043e\u0433\u043e \u043f\u0440\u0430\u043a\u0442\u0438\u0447\u0435\u0441\u043a\u0438 \u0432\u0441\u0451 \u0434\u0435\u043b\u0430\u0435\u0442. \u0423\u0433\u0440\u043e\u0431\u0438\u0442\u044c \u043c\u043e\u0436\u043d\u043e \u043b\u044e\u0431\u0443\u044e \u0441\u0438\u0441\u0442\u0435\u043c\u0443, \u043a\u043e\u043d\u0435\u0447\u043d\u043e. \u041e\u0434\u0438\u043d \u0438\u0437 \u043a\u043b\u044e\u0447\u0435\u0432\u044b\u0445 \u043a\u043e\u043d\u0444\u0438\u0433\u043e\u0432, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u043d\u0443\u0436\u043d\u043e \u043d\u0435 \u0437\u0430\u0431\u044b\u0442\u044c \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u043e\u0432\u0430\u0442\u044c \u044d\u0442\u043e rack awareness, \u043d\u0430 \u043c\u043e\u0439 \u0432\u0437\u0433\u043b\u044f\u0434. \u0414\u0430\u0436\u0435 \u0435\u0441\u043b\u0438 \u0432\u044b \u0436\u0438\u0432\u0435\u0442\u0435 \u0432 \u043e\u0434\u043d\u043e\u043c \u0434\u0430\u0442\u0430-\u0446\u0435\u043d\u0442\u0440\u0435, \u043f\u043e\u043f\u0440\u043e\u0431\u0443\u0439\u0442\u0435, \u0435\u0441\u043b\u0438 \u0443 \u0432\u0430\u0441 \u0435\u0441\u0442\u044c \u043a\u043e\u043d\u0442\u0440\u043e\u043b\u044c \u043d\u0430\u0434 \u0441\u0435\u0440\u0432\u0435\u0440\u0430\u043c\u0438, \u0445\u043e\u0442\u044f \u0431\u044b \u0432 \u0440\u0430\u0437\u043d\u044b\u0435 \u0441\u0442\u043e\u0439\u043a\u0438 \u0440\u0430\u0437\u043d\u0435\u0441\u0442\u0438 \u0431\u0440\u043e\u043a\u0435\u0440\u044b, \u0432\u0441\u0435\u043c \u0431\u0440\u043e\u043a\u0435\u0440\u0430\u043c \u043f\u0440\u043e\u043f\u0438\u0441\u0430\u0442\u044c, \u0433\u0434\u0435 \u043e\u043d\u0438 \u0441\u0442\u043e\u044f\u0442 (rack id). \u0418 Kafka \u0431\u0443\u0434\u0435\u0442 \u0441\u043b\u0435\u0434\u0438\u0442\u044c, \u0447\u0442\u043e\u0431\u044b \u0443 \u0432\u0430\u0441 \u0432\u0441\u0435 \u043b\u0438\u0434\u0435\u0440\u044b \u0440\u0430\u0432\u043d\u043e\u043c\u0435\u0440\u043d\u043e \u043f\u043e \u044d\u0442\u0438\u043c \u0440\u044d\u043a\u0430\u043c \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0435\u043b\u0438\u043b\u0438\u0441\u044c. \u0422\u043e\u0433\u0434\u0430 \u0432\u0435\u0440\u043e\u044f\u0442\u043d\u043e\u0441\u0442\u044c \u043f\u0440\u043e\u0431\u043b\u0435\u043c \u043c\u0438\u043d\u0438\u043c\u0430\u043b\u044c\u043d\u0430\u044f. \u041f\u0440\u0438 \u044d\u0442\u043e\u043c \u0441\u0442\u043e\u0438\u043c\u043e\u0441\u0442\u044c \u0431\u044d\u043a\u0430\u043f\u043e\u0432 Kafka \u0432\u044b\u0441\u043e\u043a\u0430\u044f. \u0422\u0430\u043a \u0447\u0442\u043e Kafka \u0431\u044d\u043a\u0430\u043f\u0438\u0442\u044c-\u0442\u043e \u043c\u043e\u0436\u043d\u043e, \u043d\u043e \u0431\u0443\u0434\u0435\u0442 \u044d\u0442\u043e \u0441\u0442\u043e\u0438\u0442\u044c \u0434\u043e\u0440\u043e\u0433\u043e, \u0430 \u0440\u0435\u0430\u043b\u044c\u043d\u043e\u0433\u043e \u043f\u0440\u043e\u0444\u0438\u0442\u0430 \u0432\u044b \u043d\u0430\u0432\u0435\u0440\u043d\u044f\u043a\u0430 \u043d\u0435 \u043f\u043e\u043b\u0443\u0447\u0438\u0442\u0435. <\/p>\n<p>  <\/p>\n<p>\u0418 \u0432\u0442\u043e\u0440\u043e\u0439 \u043c\u043e\u043c\u0435\u043d\u0442: \u0443 Kafka \u0435\u0441\u0442\u044c Zookeeper, \u043a\u0430\u043a \u043c\u044b \u0443\u0436\u0435 \u043e\u0431\u0441\u0443\u0436\u0434\u0430\u043b\u0438, \u0438 \u044d\u0442\u043e \u0442\u0430 \u0441\u0438\u0441\u0442\u0435\u043c\u0430, \u043a\u043e\u0442\u043e\u0440\u0443\u044e, \u0431\u044d\u043a\u0430\u043f\u0438\u0442\u044c \u043c\u043e\u0436\u043d\u043e. \u041e\u043d\u0430 \u0434\u043e\u0432\u043e\u043b\u044c\u043d\u043e \u043d\u0435\u0434\u043e\u0440\u043e\u0433\u0430\u044f. \u041c\u044b \u0431\u044d\u043a\u0430\u043f\u0438\u043c \u0435\u0435. \u041f\u0440\u043e\u0441\u0442\u043e \u0440\u0430\u0437 \u0432 \u043d\u0435\u0434\u0435\u043b\u044e \u0441\u043d\u0438\u043c\u0430\u0435\u043c \u0431\u044d\u043a\u0430\u043f\u044b, \u0432\u0430\u043b\u0438\u0434\u0438\u0440\u0443\u0435\u043c \u0438\u0445 \u0434\u043e\u0432\u043e\u043b\u044c\u043d\u043e \u043f\u0440\u0438\u043c\u0438\u0442\u0438\u0432\u043d\u043e. \u0421\u043c\u043e\u0442\u0440\u0438\u043c, \u0447\u0442\u043e \u0443 \u0431\u0440\u043e\u043a\u0435\u0440\u043e\u0432 id \u0441\u0442\u043e\u044f\u0442, \u0432 Docker \u0440\u0430\u0437\u0432\u043e\u0440\u0430\u0447\u0438\u0432\u0430\u0435\u043c \u0438 \u0441\u0447\u0438\u0442\u0430\u0435\u043c, \u0447\u0442\u043e \u0432\u0441\u0451 OK.<\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u041c\u044b \u0442\u043e\u0436\u0435 \u0431\u044d\u043a\u0430\u043f\u0438\u043c Zookeeper, \u044d\u0442\u043e \u0432\u0430\u0436\u043d\u043e. <\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0411\u0435\u0437 Zookeeper Kafka \u0442\u0435\u0440\u044f\u0435\u0442 \u0438\u043d\u0444\u043e\u0440\u043c\u0430\u0446\u0438\u044e \u043e \u0442\u043e\u043c, \u043a\u0430\u043a\u0438\u0435 \u0434\u0430\u043d\u043d\u044b\u0435 \u0433\u0434\u0435 \u043b\u0435\u0436\u0430\u0442, \u043a\u0430\u043a \u0438\u0445 \u043f\u043e\u043b\u0443\u0447\u0438\u0442\u044c. \u0414\u0430\u0436\u0435 \u0435\u0441\u043b\u0438 \u0432\u0441\u044f Kafka \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u0445\u043e\u0440\u043e\u0448\u043e, \u0430 \u043a\u043b\u0430\u0441\u0442\u0435\u0440 Zookeeper \u043f\u043e \u043a\u0430\u043a\u0438\u043c-\u0442\u043e \u043f\u0440\u0438\u0447\u0438\u043d\u0430\u043c \u043e\u0442\u043b\u0435\u0442\u0435\u043b, \u0432\u0430\u043c \u0431\u0443\u0434\u0435\u0442 \u043e\u0447\u0435\u043d\u044c \u0441\u043b\u043e\u0436\u043d\u043e \u0432\u043e\u0441\u0441\u0442\u0430\u043d\u043e\u0432\u0438\u0442\u044c \u0434\u0430\u043d\u043d\u044b\u0435. \u0415\u0441\u0442\u044c \u0432\u0441\u044f\u043a\u0438\u0435 Kafka-\u0434\u0430\u043c\u043f\u044b, \u043a\u043e\u0442\u043e\u0440\u044b\u043c\u0438 \u043c\u043e\u0436\u043d\u043e \u0432\u044b\u0442\u0430\u0449\u0438\u0442\u044c \u0438\u0437 \u043a\u043e\u043d\u043a\u0440\u0435\u0442\u043d\u044b\u0445 \u0442\u043e\u043f\u0438\u043a\u043e\u0432, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0432\u044b \u0437\u043d\u0430\u0435\u0442\u0435, \u0433\u0434\u0435 \u043b\u0435\u0436\u0430\u0442, \u043a\u043e\u043d\u043a\u0440\u0435\u0442\u043d\u044b\u0435 \u0434\u0430\u043d\u043d\u044b\u0435. \u041d\u043e \u044d\u0442\u043e \u0431\u0443\u0434\u0435\u0442 \u0434\u043e\u043b\u0433\u043e \u0438 \u0441\u043a\u043e\u0440\u0435\u0435 \u0432\u0441\u0435\u0433\u043e \u043d\u0435 \u0432\u043e\u0441\u0441\u0442\u0430\u043d\u043e\u0432\u0438\u0442\u0435 \u0432\u0435\u0441\u044c \u043a\u043b\u0430\u0441\u0442\u0435\u0440. \u041f\u043e\u044d\u0442\u043e\u043c\u0443 \u043b\u0443\u0447\u0448\u0435 Zookeeper-\u043c\u043e\u0437\u0433\u0438 \u0433\u0434\u0435-\u0442\u043e \u0445\u0440\u0430\u043d\u0438\u0442\u044c. <\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u041f\u0440\u0438 \u0442\u043e\u043c \u0447\u0442\u043e \u043e\u0431\u044a\u0451\u043c \u044d\u0442\u0438\u0445 \u00ab\u043c\u043e\u0437\u0433\u043e\u0432\u00bb \u0438\u0437\u043c\u0435\u0440\u044f\u0435\u0442\u0441\u044f \u0432 \u041c\u0431. <\/p>\n<p>  <\/p>\n<p>\u0422\u0430\u043c \u0435\u0449\u0435 \u0441\u043f\u0440\u0430\u0448\u0438\u0432\u0430\u044e\u0442 \u0432 \u0447\u0430\u0442\u0435: \u0443\u0447\u0438\u0442\u044b\u0432\u0430\u0435\u0442\u0441\u044f \u043b\u0438 rack id \u0432 min.insync.replicas? \u042f \u043e\u0442\u0432\u0435\u0447\u0443 \u2014 \u043d\u0435\u0442. \u041f\u0440\u043e\u0441\u0442\u043e \u0441\u043c\u044b\u0441\u043b rack id, \u0432 \u0442\u043e\u043c, \u0447\u0442\u043e \u043e\u043d \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442\u0441\u044f Kafka \u0432 \u043c\u043e\u043c\u0435\u043d\u0442 \u0441\u043e\u0437\u0434\u0430\u043d\u0438\u044f \u0442\u043e\u043f\u0438\u043a\u0430. \u041a\u043e\u0433\u0434\u0430 \u0432\u044b \u0433\u043e\u0432\u043e\u0440\u0438\u0442\u0435, \u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0443 \u0432\u0430\u0441 \u0435\u0441\u0442\u044c \u043f\u0430\u0440\u0442\u0438\u0446\u0438\u0439 \u0432 \u0442\u043e\u043f\u0438\u043a\u0435, \u0438 \u0434\u043b\u044f \u043a\u0430\u0436\u0434\u043e\u0439 \u0443 \u0432\u0430\u0441 \u0431\u0443\u0434\u0435\u0442 n \u0440\u0435\u043f\u043b\u0438\u043a. \u0412\u043e\u0442 \u044d\u0442\u043e\u0442 rack id, Kafka \u0432\u0430\u043c \u0433\u0430\u0440\u0430\u043d\u0442\u0438\u0440\u0443\u0435\u0442, \u0447\u0442\u043e \u044d\u0442\u0438 \u0440\u0435\u043f\u043b\u0438\u043a\u0438 \u043f\u0430\u0440\u0442\u0438\u0446\u0438\u0439 \u0431\u0443\u0434\u0443\u0442 \u0440\u0430\u0441\u043a\u0438\u0434\u0430\u043d\u044b \u043f\u043e \u0440\u0430\u0437\u043d\u044b\u043c \u0440\u044d\u043a\u0430\u043c. \u0427\u0442\u043e \u043e\u043d\u0430 \u043d\u0435 \u043f\u043e\u043b\u043e\u0436\u0438\u0442 \u0438\u0445 \u0432\u0441\u0435 \u0432 \u043e\u0434\u0438\u043d \u0440\u044d\u043a. \u041f\u043e\u0441\u043b\u0435 \u044d\u0442\u043e\u0433\u043e \u043e\u043d\u0430 \u0438 \u043d\u0438\u043a\u0430\u043a\u043e\u0439 rack id \u0432 \u0441\u0432\u043e\u0451\u043c \u0440\u0430\u043d\u0442\u0430\u0439\u043c\u0435 \u043d\u0435 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442. <\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u041d\u0435 Kafka \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0435\u0442, \u0430 \u0432\u0441\u044f\u043a\u0438\u0435 \u0430\u0434\u043c\u0438\u043d-\u043a\u043e\u043c\u0430\u043d\u0434\u044b. \u042d\u0442\u043e \u0431\u0443\u0434\u0435\u0442 \u0432\u043b\u0438\u044f\u0442\u044c \u0442\u043e\u043b\u044c\u043a\u043e \u043d\u0430 \u0440\u0435\u0431\u0430\u043b\u0430\u043d\u0441\u0438\u0440\u043e\u0432\u043a\u0438, \u043a\u043e\u0433\u0434\u0430 \u0432\u044b \u0431\u0443\u0434\u0435\u0442\u0435 \u043f\u0430\u0440\u0442\u0438\u0446\u0438\u0438 \u0434\u0432\u0438\u0433\u0430\u0442\u044c \u043f\u043e \u0431\u0440\u043e\u043a\u0435\u0440\u0430\u043c. \u0422\u043e\u0433\u0434\u0430 \u0434\u0430. \u041e\u043d \u043e\u043f\u044f\u0442\u044c \u0437\u0430\u0438\u0433\u0440\u0430\u0435\u0442, \u0438 Kafka \u0431\u0443\u0434\u0435\u0442 \u0441\u043c\u043e\u0442\u0440\u0435\u0442\u044c \u043d\u0430 \u043d\u0438\u0445 \u0442\u0430\u043a, \u0447\u0442\u043e\u0431\u044b \u043b\u0438\u0434\u0435\u0440\u043e\u0432 \u0438\u043b\u0438 \u043f\u0430\u0440\u0442\u0438\u0446\u0438\u0439 \u043f\u0435\u0440\u0435\u0442\u0430\u0449\u0438\u0442\u044c \u0442\u0430\u043a, \u0447\u0442\u043e\u0431\u044b \u043e\u043d\u0438 \u0431\u044b\u043b\u0438 \u0432\u043e \u0432\u0441\u0435\u0445 \u0441\u0442\u043e\u0439\u043a\u0430\u0445 \u0431\u044b\u043b\u0438 \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0435\u043b\u0435\u043d\u044b \u043f\u0440\u0430\u0432\u0438\u043b\u044c\u043d\u043e. <\/p>\n<p>  <\/p>\n<p>\u0410\u041b\u0415\u041a\u0421\u0410\u041d\u0414\u0420 \u041c\u0418\u0420\u041e\u041d\u041e\u0412: \u0418 \u0435\u0441\u043b\u0438, \u043d\u0430\u043f\u0440\u0438\u043c\u0435\u0440, \u0432\u044b \u0437\u0430\u0434\u0430\u0434\u0438\u0442\u0435, \u0447\u0442\u043e \u0443 \u0432\u0430\u0441 \u0434\u0432\u0430 \u0440\u044d\u043a\u0430, \u043d\u043e \u043f\u0440\u0438 \u044d\u0442\u043e\u043c min.insync.replicas \u0443 \u0432\u0430\u0441 \u0442\u0430\u043c \u0442\u0440\u0438, \u0442\u043e \u043f\u043e \u0443\u043c\u043e\u043b\u0447\u0430\u043d\u0438\u044e \u043a\u043e\u043c\u0430\u043d\u0434\u0430 \u0441\u043e\u0437\u0434\u0430\u043d\u0438\u044f \u0442\u043e\u043f\u0438\u043a\u043e\u0432 \u0441\u043a\u0430\u0436\u0435\u0442 \u0432\u0430\u043c, \u0447\u0442\u043e \u043d\u0435 \u043c\u043e\u0436\u0435\u0442 \u0441\u043e\u0437\u0434\u0430\u0442\u044c \u0442\u043e\u043f\u0438\u043a, \u043f\u043e\u0442\u043e\u043c\u0443 \u0447\u0442\u043e \u043d\u0435 \u043c\u043e\u0436\u0435\u0442 \u0440\u0430\u0441\u043a\u0438\u0434\u0430\u0442\u044c \u043f\u0430\u0440\u0442\u0438\u0446\u0438\u0438 \u0440\u0430\u0432\u043d\u043e\u043c\u0435\u0440\u043d\u043e. <\/p>\n<p>  <\/p>\n<p>\u0418\u0412\u0410\u041d \u0421\u0418\u0414\u041e\u0420\u041e\u0412: \u041f\u043e \u043e\u043f\u044b\u0442\u0443 \u043d\u0430\u0448\u0438\u0445 \u043a\u043b\u0438\u0435\u043d\u0442\u043e\u0432 \u043d\u0430 \u043f\u043e\u0434\u0434\u0435\u0440\u0436\u043a\u0435 \u043c\u043e\u0433\u0443 \u0441\u043a\u0430\u0437\u0430\u0442\u044c, \u0447\u0442\u043e \u0441\u0435\u0439\u0447\u0430\u0441 \u0434\u0430\u043d\u043d\u044b\u0435, \u0445\u0440\u0430\u043d\u0438\u043c\u044b\u0435 \u0432 Kafka, \u043d\u0435 \u043d\u0430\u0441\u0442\u043e\u043b\u044c\u043a\u043e \u0434\u043e\u0440\u043e\u0433\u0438, \u0447\u0442\u043e\u0431\u044b \u0434\u0435\u043b\u0430\u0442\u044c \u0431\u044d\u043a\u0430\u043f\u044b \u0441 \u043d\u0438\u0445. \u041f\u043e\u043a\u0430 \u0447\u0442\u043e \u0432 \u0442\u0438\u043f\u043e\u0432\u044b\u0445 \u0441\u043b\u0443\u0447\u0430\u044f\u0445 \u0432\u0440\u0435\u043c\u044f \u0436\u0438\u0437\u043d\u0438 \u0434\u0430\u043d\u043d\u044b\u0445 \u0432 Kafk \u0434\u043e\u0432\u043e\u043b\u044c\u043d\u043e \u043a\u043e\u0440\u043e\u0442\u043a\u043e\u0435. \u0422\u0443\u0442 \u043f\u0440\u0430\u0432\u0438\u043b\u044c\u043d\u0430\u044f \u043c\u044b\u0441\u043b\u044c \u043f\u0440\u043e \u0442\u043e, \u0447\u0442\u043e \u0440\u0435\u043f\u043b\u0438\u043a\u0438 \u0434\u043e\u043b\u0436\u043d\u044b \u0431\u044b\u0442\u044c \u0432 \u0440\u0430\u0437\u043d\u044b\u0445 \u0434\u0430\u0442\u0430-\u0446\u0435\u043d\u0442\u0440\u0430\u0445. \u041d\u043e \u0440\u0435\u043f\u043b\u0438\u043a\u0430 \u2014 \u044d\u0442\u043e \u043a\u043b\u0430\u0441\u0442\u0435\u0440, \u0438 \u0434\u0430\u0436\u0435 \u0443\u0447\u0438\u0442\u044b\u0432\u0430\u044f, \u0447\u0442\u043e \u043c\u0430\u0441\u0442\u0435\u0440-\u043d\u043e\u0434\u044b \u0442\u0430\u043c \u043d\u0435\u0442, \u043e\u043d\u0438 \u0441\u0430\u043c\u0438 \u0441\u0435\u0431\u0435 \u0432\u044b\u0431\u0438\u0440\u0430\u044e\u0442, \u0441 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u043e\u043c \u0447\u0442\u043e-\u0442\u043e \u043c\u043e\u0436\u0435\u0442 \u043f\u043e\u0439\u0442\u0438 \u043d\u0435 \u0442\u0430\u043a. \u041d\u043e \u0441\u043e\u0445\u0440\u0430\u043d\u044f\u0442\u044c \u0434\u0430\u043d\u043d\u044b\u0435 \u043e\u0447\u0435\u043d\u044c \u0434\u043e\u0440\u043e\u0433\u043e \u043f\u043e \u0441\u043e\u043e\u0442\u043d\u043e\u0448\u0435\u043d\u0438\u044e \u0441\u0442\u043e\u0438\u043c\u043e\u0441\u0442\u044c \u0434\u0430\u043d\u043d\u044b\u0445\/\u0441\u0442\u043e\u0438\u043c\u043e\u0441\u0442\u044c \u0445\u0440\u0430\u043d\u0435\u043d\u0438\u044f \u0434\u0430\u043d\u043d\u044b\u0445, \u0438 \u0441\u0430\u043c\u044b\u0439 \u044d\u0444\u0444\u0435\u043a\u0442\u0438\u0432\u043d\u044b\u0439 \u0432\u0430\u0440\u0438\u0430\u043d\u0442, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u043c\u044b \u0432\u0438\u0434\u0435\u043b\u0438 \u2014 \u044d\u0442\u043e mirroring \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0430. \u0427\u0435\u043c \u043e\u0442\u043b\u0438\u0447\u0430\u0435\u0442\u0441\u044f \u043e\u0442 \u0440\u0435\u043f\u043b\u0438\u043a\u0438: \u043f\u043e\u0434\u043d\u0438\u043c\u0430\u0435\u0442\u0441\u044f \u0442\u043e\u0447\u043d\u043e \u0442\u0430\u043a\u043e\u0439 \u0436\u0435 \u043a\u043b\u0430\u0441\u0442\u0435\u0440 \u0438 \u043d\u0430\u0441\u0442\u0440\u0430\u0438\u0432\u0430\u0435\u0442\u0441\u044f \u0442\u0443\u0434\u0430 \u043f\u0435\u0440\u0435\u0441\u044b\u043b\u043a\u0430 \u0434\u0430\u043d\u043d\u044b\u0445. \u041e\u043d \u043f\u0440\u043e\u0441\u0442\u043e \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442 \u043a\u0430\u043a \u0440\u0435\u0437\u0435\u0440\u0432 \u0438 \u043a\u0430\u043a \u0431\u044d\u043a\u0430\u043f.<\/p>\n<p>  <\/p>\n<p>\u0410\u041d\u0410\u0422\u041e\u041b\u0418\u0419 \u0421\u041e\u041b\u0414\u0410\u0422\u041e\u0412: \u0422\u0443\u0442 \u0441\u0440\u0430\u0437\u0443 \u0434\u0432\u0430 \u043c\u043e\u043c\u0435\u043d\u0442\u0430 \u0438\u043d\u0442\u0435\u0440\u0435\u0441\u043d\u044b\u0445 \u2014 \u0435\u0441\u043b\u0438 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0414\u0426, \u044d\u0442\u043e \u043d\u0435 \u0441\u0438\u043d\u043e\u043d\u0438\u043c \u0442\u043e\u0433\u043e, \u0447\u0442\u043e \u0443 \u043d\u0430\u0441 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u043e\u0432. \u0418 \u0432\u0441\u0435\u0433\u0434\u0430, \u043a\u043e\u0433\u0434\u0430 \u043f\u0440\u043e Kafka \u0447\u0438\u0442\u0430\u0435\u0448\u044c, \u043d\u0430\u0447\u0438\u043d\u0430\u0435\u0442\u0441\u044f \u0441 \u0442\u043e\u0433\u043e, \u0447\u0442\u043e \u00ab\u041e! Stretch cluster, \u0443\u0436\u0430\u0441 \u043a\u0430\u043a\u043e\u0439, \u043d\u0435 \u0438\u0441\u043f\u043e\u043b\u044c\u0437\u0443\u0439\u0442\u0435\u00bb. \u042d\u0442\u043e \u0432\u0441\u0451 \u043d\u0435\u043f\u0440\u0430\u0432\u0434\u0430. \u041d\u0430 \u0441\u0430\u043c\u043e\u043c \u0434\u0435\u043b\u0435, \u043d\u0443\u0436\u043d\u043e \u0438\u0441\u0445\u043e\u0434\u0438\u0442\u044c \u0438\u0437 latency, \u043a\u043e\u0442\u043e\u0440\u0443\u044e \u0432\u0430\u0448\u0430 \u0441\u0435\u0442\u044c \u0434\u0430\u0435\u0442, \u043f\u0440\u043e\u0432\u0435\u0440\u0438\u0442\u044c \u0445\u043e\u0442\u044f \u0431\u044b \u044d\u0442\u043e, \u0438 \u0441\u043a\u043e\u0440\u0435\u0435 \u0432\u0441\u0435\u0433\u043e \u0442\u0430\u043c stretch cluster \u0437\u0430\u0432\u0435\u0434\u0451\u0442\u0441\u044f, \u0431\u0443\u0434\u0435\u0442 \u0432\u0441\u0451 \u0440\u0430\u0431\u043e\u0442\u0430\u0442\u044c \u0445\u043e\u0440\u043e\u0448\u043e. \u0415\u0441\u0442\u044c \u0432\u0430\u0440\u0438\u0430\u043d\u0442\u044b \u0441 \u0430\u0441\u0438\u043d\u0445\u0440\u043e\u043d\u043d\u044b\u043c\u0438 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0430\u043c\u0438, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u043d\u0430 \u043e\u0441\u043d\u043e\u0432\u0435 \u0440\u0435\u043f\u043b\u0438\u043a\u0430\u0442\u043e\u0440\u043e\u0432, \u043d\u043e \u0437\u0434\u0435\u0441\u044c \u0442\u043e\u0436\u0435 \u043d\u0435 \u0441\u0442\u043e\u0438\u0442 \u0437\u0430\u0431\u044b\u0432\u0430\u0442\u044c, \u0447\u0442\u043e \u044d\u0442\u043e \u043f\u043e\u0432\u044b\u0448\u0430\u0435\u0442 \u0441\u043b\u043e\u0436\u043d\u043e\u0441\u0442\u044c \u0432\u0441\u0435\u0439 \u0441\u0438\u0441\u0442\u0435\u043c\u044b \u0438 \u0442\u043e, \u0447\u0442\u043e \u043f\u043e\u044f\u0432\u043b\u044f\u0435\u0442\u0441\u044f \u0435\u0449\u0435 \u043e\u0434\u043d\u0430 \u0442\u043e\u0447\u043a\u0430 \u043e\u0442\u043a\u0430\u0437\u0430, \u0438 \u044d\u0442\u043e \u043d\u0435 \u0431\u0435\u0441\u043f\u043b\u0430\u0442\u043d\u043e. \u0418 \u043d\u0430\u0447\u0438\u043d\u0430\u0442\u044c \u0432\u0441\u0435-\u0442\u0430\u043a\u0438 \u0441\u0442\u043e\u0438\u0442 \u0441 \u043f\u0440\u043e\u0441\u0442\u043e\u0433\u043e stretch cluster, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u043e\u0434\u0438\u043d, \u0440\u0430\u0441\u0442\u044f\u043d\u0443\u0442\u044b\u0439 \u043d\u0430 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0434\u0430\u0442\u0430-\u0446\u0435\u043d\u0442\u0440\u043e\u0432. \u0418 \u0447\u0430\u0441\u0442\u043e \u043e\u043d \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442. <\/p>\n<p>  <\/p>\n<p>\u0418\u0412\u0410\u041d \u0421\u0418\u0414\u041e\u0420\u041e\u0412: \u0414\u043e\u0431\u0430\u0432\u043b\u044e \u0435\u0449\u0451 \u043d\u0435 \u043f\u0440\u043e \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u044b, \u0430 \u043f\u0440\u043e mirroring \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0430. \u0427\u0438\u0442\u0430\u043b \u0432 \u0432\u043e\u043f\u0440\u043e\u0441\u0430\u0445, \u043a\u0430\u043a \u0440\u0430\u0437\u0434\u0435\u043b\u044f\u0442\u044c \u043a\u043e\u043d\u0442\u0443\u0440\u044b \u0431\u0435\u0437\u043e\u043f\u0430\u0441\u043d\u043e\u0441\u0442\u0438, \u043f\u0440\u0430\u043a\u0442\u0438\u0447\u0435\u0441\u043a\u0438\u0439 \u043e\u043f\u044b\u0442 \u2014 \u0435\u0441\u043b\u0438 \u0435\u0441\u0442\u044c \u0438\u043d\u0442\u0440\u0430\u043d\u0435\u0442 \u0438 \u044d\u043a\u0441\u0442\u0440\u0430\u043d\u0435\u0442, \u0438 \u0432 \u0438\u043d\u0442\u0440\u0430\u043d\u0435\u0442 \u043f\u0443\u0441\u043a\u0430\u0442\u044c \u043d\u0435\u043b\u044c\u0437\u044f, \u0430 \u043f\u043e\u0442\u043e\u043a\u0438 \u0434\u0430\u043d\u043d\u044b\u0445 \u0438\u0434\u0443\u0442 \u0438\u0437 \u0432\u043d\u0435\u0448\u043a\u0438, \u043c\u043e\u0436\u043d\u043e \u043c\u0438\u0440\u0440\u043e\u0440\u0438\u0442\u044c \u0447\u0430\u0441\u0442\u044c \u0442\u043e\u043f\u0438\u043a\u043e\u0432 \u0438\u0437 \u0432\u043d\u0435\u0448\u043d\u0435\u0439 Kafka \u0432\u043e \u0432\u043d\u0443\u0442\u0440\u0435\u043d\u043d\u044e\u044e Kafka. \u041e\u0442\u043a\u0440\u044b\u0442\u044c \u0442\u043e\u043b\u044c\u043a\u043e \u043e\u0434\u043d\u0443 \u0434\u044b\u0440\u043e\u0447\u043a\u0443.<\/p>\n<p>  <\/p>\n<p><em>\u0414\u043b\u044f \u0442\u0435\u0445, \u043a\u0442\u043e \u0445\u043e\u0447\u0435\u0442 \u0443\u0437\u043d\u0430\u0442\u044c \u0431\u043e\u043b\u044c\u0448\u0435 \u043e \u043d\u0430\u0441\u0442\u0440\u043e\u0439\u043a\u0435 \u0438 \u043e\u043f\u0442\u0438\u043c\u0438\u0437\u0430\u0446\u0438\u0438 Apache Kafka \u0421\u043b\u0451\u0440\u043c \u0433\u043e\u0442\u043e\u0432\u0438\u0442 \u043d\u043e\u0432\u044b\u0439 \u0432\u0438\u0434\u0435\u043e\u043a\u0443\u0440\u0441. \u0421\u043f\u0438\u043a\u0435\u0440\u044b \u2014 \u0410\u043d\u0430\u0442\u043e\u043b\u0438\u0439 \u0421\u043e\u043b\u0434\u0430\u0442\u043e\u0432 \u0438\u0437 \u0410\u0432\u0438\u0442\u043e \u0438 \u0410\u043b\u0435\u043a\u0441\u0430\u043d\u0434\u0440 \u041c\u0438\u0440\u043e\u043d\u043e\u0432 \u0438\u0437 Stripe. \u0414\u043e\u0441\u0442\u0443\u043f \u043a \u043f\u0435\u0440\u0432\u044b\u043c \u0443\u0440\u043e\u043a\u0430\u043c \u0431\u0443\u0434\u0435\u0442 \u0431\u0435\u0441\u043f\u043b\u0430\u0442\u043d\u044b\u043c. <a href=\"https:\/\/slurm.io\/kafkautm_source=habr&amp;utm_medium=post&amp;utm_campaign=kafka-videocourse&amp;utm_content=post_06-01-2021&amp;utm_term=fedoseenko\">\u041e\u0441\u0442\u0430\u0432\u0438\u0442\u044c \u0437\u0430\u044f\u0432\u043a\u0443<\/a> \u043d\u0430 \u043a\u0443\u0440\u0441 \u043c\u043e\u0436\u043d\u043e \u0443\u0436\u0435 \u0441\u0435\u0439\u0447\u0430\u0441.<\/em><\/p>\n<\/div>\n<p> \u0441\u0441\u044b\u043b\u043a\u0430 \u043d\u0430 \u043e\u0440\u0438\u0433\u0438\u043d\u0430\u043b \u0441\u0442\u0430\u0442\u044c\u0438 <a href=\"https:\/\/habr.com\/ru\/company\/southbridge\/blog\/536164\/\"> https:\/\/habr.com\/ru\/company\/southbridge\/blog\/536164\/<\/a><\/p>\n","protected":false},"excerpt":{"rendered":"\n<div class=\"post__text post__text-html post__text_v1\" id=\"post-content-body\">\n<p>\u0427\u0442\u043e \u0442\u0430\u043a\u043e\u0435 Kafka? \u0413\u0434\u0435 \u0441\u0442\u043e\u0438\u0442, \u0430 \u0433\u0434\u0435 \u043d\u0435 \u0441\u0442\u043e\u0438\u0442 \u043f\u0440\u0438\u043c\u0435\u043d\u044f\u0442\u044c \u044d\u0442\u043e\u0442 \u0438\u043d\u0441\u0442\u0440\u0443\u043c\u0435\u043d\u0442? \u0427\u0435\u043c Kafka \u043e\u0442\u043b\u0438\u0447\u0430\u0435\u0442\u0441\u044f \u043e\u0442 RabbitMQ \u0438 \u0434\u0440\u0443\u0433\u0438\u0445 \u0431\u0440\u043e\u043a\u0435\u0440\u043e\u0432 \u0441\u043e\u043e\u0431\u0449\u0435\u043d\u0438\u0439? \u041a\u0430\u043a \u0435\u0451 \u043f\u0440\u0430\u0432\u0438\u043b\u044c\u043d\u043e \u044d\u043a\u0441\u043f\u043b\u0443\u0430\u0442\u0438\u0440\u043e\u0432\u0430\u0442\u044c? \u0412\u0441\u0451 \u044d\u0442\u043e \u043e\u0431\u0441\u0443\u0434\u0438\u043b\u0438 \u043d\u0430 \u043c\u0438\u0442\u0430\u043f\u0435 \u00abApache Kafka \u0432 \u0432\u043e\u043f\u0440\u043e\u0441\u0430\u0445 \u0438 \u043e\u0442\u0432\u0435\u0442\u0430\u0445\u00bb, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0421\u043b\u0451\u0440\u043c \u043f\u0440\u043e\u0432\u0451\u043b \u0432 \u043d\u043e\u044f\u0431\u0440\u0435 2020. \u0412 \u0440\u0430\u0437\u0433\u043e\u0432\u043e\u0440\u0435 \u0443\u0447\u0430\u0441\u0442\u0432\u043e\u0432\u0430\u043b\u0438 \u0441\u043f\u0438\u043a\u0435\u0440\u044b \u0438\u0437 \u0410\u0432\u0438\u0442\u043e, Stripe, ITSumma \u0438 Confluent. \u0417\u0430\u043f\u0438\u0441\u044c \u043c\u0438\u0442\u0430\u043f\u0430 <a href=\"https:\/\/www.youtube.com\/watch?v=sQX6oUi2eQ4\">\u0434\u043e\u0441\u0442\u0443\u043f\u043d\u0430 \u043d\u0430 YouTube<\/a>, \u0430 \u0442\u0435\u043a\u0441\u0442\u043e\u0432\u0443\u044e \u0432\u0435\u0440\u0441\u0438\u044e \u0440\u0430\u0437\u0433\u043e\u0432\u043e\u0440\u0430 \u0447\u0438\u0442\u0430\u0439\u0442\u0435 \u043d\u0438\u0436\u0435.<\/p>\n<p>  <\/p>\n<p><img decoding=\"async\" src=\"https:\/\/habrastorage.org\/webt\/qa\/ec\/m1\/qaecm1cpxm58qqor5tnxaeqgkfe.jpeg\"><\/p>\n","protected":false},"author":1,"featured_media":0,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[],"tags":[],"class_list":["post-316027","post","type-post","status-publish","format-standard","hentry"],"_links":{"self":[{"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/posts\/316027","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=%2Fwp%2Fv2%2Fcomments&post=316027"}],"version-history":[{"count":0,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=\/wp\/v2\/posts\/316027\/revisions"}],"wp:attachment":[{"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=%2Fwp%2Fv2%2Fmedia&parent=316027"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=%2Fwp%2Fv2%2Fcategories&post=316027"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/savepearlharbor.com\/index.php?rest_route=%2Fwp%2Fv2%2Ftags&post=316027"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}