Про Kafka (основы)

2021 ж. 19 Сәу.
339 126 Рет қаралды

Apache Kafka - популярный распределенный отказоустойчивый брокер сообщений, используемый в высоконагруженных системах и BigData проектах.
На видео мой рассказ про основы Kafka: что, зачем, как и где.

Пікірлер
  • Спасибо за видео. Таймкоды. 1. Что такое кафка? Свойства кафки. История. <a href="#" class="seekto" data-time="40">0:40</a> - <a href="#" class="seekto" data-time="206">3:26</a> 2. Какую задачу решает кафка. <a href="#" class="seekto" data-time="207">3:27</a> - <a href="#" class="seekto" data-time="373">6:13</a> 3. Основные сущности кафки. Перечисление <a href="#" class="seekto" data-time="374">6:14</a> - <a href="#" class="seekto" data-time="394">6:34</a> 4. Broker <a href="#" class="seekto" data-time="395">6:35</a> - <a href="#" class="seekto" data-time="439">7:19</a> 5. Zookeeper <a href="#" class="seekto" data-time="440">7:20</a> - <a href="#" class="seekto" data-time="518">8:38</a> 6. Message (Record) <a href="#" class="seekto" data-time="519">8:39</a> - <a href="#" class="seekto" data-time="588">9:48</a> 7. Topic и Partition <a href="#" class="seekto" data-time="589">9:49</a> - <a href="#" class="seekto" data-time="1610">26:50</a> 8. Producer <a href="#" class="seekto" data-time="1611">26:51</a> - <a href="#" class="seekto" data-time="2188">36:28</a> 9. Consumer, offset <a href="#" class="seekto" data-time="2189">36:29</a> - <a href="#" class="seekto" data-time="2765">46:05</a> 10. Выводы <a href="#" class="seekto" data-time="2766">46:06</a>

    @user-qo5dr9sg5k@user-qo5dr9sg5k2 жыл бұрын
  • Пожалуй лучшее объяснение которое нашел на Ютубе, супер

    @vitalyparhomenko7817@vitalyparhomenko78172 жыл бұрын
    • жаль что единственное видео на канале по айтишной тематике

      @vitalyparhomenko7817@vitalyparhomenko78172 жыл бұрын
    • нефига. там он запутался конкретно. например, на 12ой минуте говорит что с разных партишнов одновременно считываются данные. а потом где-то начиная с 21ой минуты говорит, что данные можно считать только с лидер партишна

      @labourtimesupport3302@labourtimesupport33022 жыл бұрын
    • @@labourtimesupport3302 , путаницы нет. Все верно. Одновременно читаем со всех партиций, но только с лидер-реплик этих партиций. Каждая партиция имеет одну leader-реплику и несколько follower-реплик (то есть каждая партиция представлена в нескольких экземплярах для отказоустойчивости, но работаем для согласованности только с одним экземпляром каждой партиции, остальные экземпляры синхронизируется с основным).

      @vovabog@vovabog2 жыл бұрын
    • @@labourtimesupport3302 хаха, джун попытался покритиковать синьора в его рабочей сфере. П.с. сам как раз на этом моменте запутался.

      @MrRomanvideo@MrRomanvideo2 жыл бұрын
    • @@MrRomanvideo Я тут на работе одному пытался объяснить, почему я топик на 16 разделов сделал. Чудак фактор репликации с количеством разделов перепутал и меня еще обвинял, что я мол не по книге сделал. Типа зачем в 16 раз "нагрузку" увеличивать %) И никак не смог убедить.

      @adoloro@adoloro2 жыл бұрын
  • Владимир, огромное спасибо за столь лаконичный и четкий доклад про Кафку! Словил себя на мысли, что ни разу не перематывал ваш доклад, потому что он так структурирован и подан, что помнишь все термины и благодаря картинкам четко понимаешь все процессы. Присоединяюсь к комментариям выше, было бы просто прекрасно, если бы вы постили побольше видео на темы связанные с IT технологиями.

    @iugaialeksei2108@iugaialeksei21082 жыл бұрын
    • Присоединяюсь к мнению выше - все четко и по полкам, ранее уже изучал Кафку, писал что-то, но полноценное понимание того,как внутри устроено, пришло только сейчас. Автору большой респект за видео и подачу материала.

      @artemlisitsyn9846@artemlisitsyn98462 жыл бұрын
    • А я перематывал назад каждый раз, когда дети орали рядом, но и этот комментарий про позитив - видео подано так, что не хотелось пропустить ни слова

      @user-lh8md5pv6q@user-lh8md5pv6q Жыл бұрын
    • А я нашел данный доклад настолько качественным, что смотрю третий раз подряд его. Нет, не потому что я туповат. Просто тут исключительно полезная информация воды 0. А мозг может мой, а может всех людей, устроен так, что если несколько раз прокрутить одну и ту же информацию, он её запомнит на всю жизнь. Потому что посчитает важной. Теперь меня хоть ночью разбуди, я перескажу доклад.

      @MultiKilimangaro@MultiKilimangaro6 ай бұрын
  • Кратко, без воды, информативно. Ждем еще лекций.

    @raman465@raman4652 жыл бұрын
  • Замечательное видео! Огромное спасибо вам за труд) Будет приятно увидеть от вас похожие по содержанию ролики) Не останавливайтесь! У вас талант объяснять)

    @annasakharova511@annasakharova5112 жыл бұрын
  • Владимир, очень ждем еще видео по Kafka и другим областям IT. Великолепная подача материала, грамотная речь и глубокое понимание вопроса! Спасибо!

    @mqtt2real540@mqtt2real5402 жыл бұрын
  • Отличная подача. Без воды, видно что на основе практического опыта лекция. Спасибо!

    @evgeniylepikov6185@evgeniylepikov61856 ай бұрын
  • Автору огромный респект! Было бы отлично вторую часть, где прям на практике показать, как та или иная настройка отрабатывает.

    @nnutipa@nnutipa2 жыл бұрын
  • Огромное спасибо за столько подробное, понятное и доступное изложение материала!

    @user-hv2vy3kd9f@user-hv2vy3kd9f Жыл бұрын
  • Даёшь больше видео от автора по IT тематике! Самая полезная информация по Kafka которую встречал.

    @user-zc4iq3ig5u@user-zc4iq3ig5u2 жыл бұрын
  • Спасибо огромное! Вы такой талапнтливый преподаватель, и презентация, и объяснение на высшем уровне!

    @elf8641@elf8641 Жыл бұрын
  • Благодарю за столь плотный и структурированный поток сжатой информации.

    @andreykuskov8807@andreykuskov8807 Жыл бұрын
  • Спасибо за то, что, объяснили все человеческим языком!

    @alibekkz7600@alibekkz76002 жыл бұрын
  • Владимир у Вас редкий талант объяснить сложное простыми словами. Спасибо Вам!

    @kz_Ali@kz_Ali2 жыл бұрын
  • Очень насыщенная лекция, но очень доступно и понятно. Автору большое спасибо!

    @Zikit53@Zikit532 жыл бұрын
  • Идеально. Чётко, без воды, по существу, вся визуализация по существу. Такие объяснения -- очень редкий зверь. Спасибо!

    @hornermotorbiker4360@hornermotorbiker43605 ай бұрын
  • Ваша лекция просто огонь!🔥Спасибо😃

    @Rostik_13@Rostik_13 Жыл бұрын
  • Спасибо за видео! Много полезной информации. Пока все в голову не укладывается. Но буду пересматривать те моменты, которые не запомнил. Сама структура и подача очень хорошо получилось!

    @DenisBezrukov-jr1tp@DenisBezrukov-jr1tp4 ай бұрын
  • Хорошее начало, хочется продолжения. Хорошо применён принцип просто о сложно.

    @user-bv1rk8zg3v@user-bv1rk8zg3v2 жыл бұрын
  • Владимир, спасибо! Наверное, одно из лучших изложений материала, которое я когда-либо встречала)) Лаконично, без воды, при этом максимально подробно и чётко. Очень интересно и приятно было слушать. Офигенно, 10/10!

    @arisu2718@arisu27182 жыл бұрын
  • Большое вам спасибо за видео! Думал смотреть сначала видосы на английском, но понял, что многое не очень усваивается, а благодаря вам всё разложилось по полочкам.

    @romann1295@romann12952 жыл бұрын
  • Владимир, спасибо за абсолютно сухую выжимку без всякой воды, настолько понятно, что дальше некуда просто!

    @s0faRy@s0faRy Жыл бұрын
  • офигенно, спасибо! долго искала кусочками информацию, а тут все в одном месте и понятно.

    @veroniquekovalenko4575@veroniquekovalenko45752 жыл бұрын
  • Четко и по делу без воды. Спасибо!

    @cybermindable@cybermindable2 жыл бұрын
  • Большое спасибо! Отличная лекция! Доступное объяснение сложной темы.

    @_garik__@_garik__ Жыл бұрын
  • правда очень круто.. вы смогли объяснить так, что совсем новичок понял очень много и было действительно интересно. Спасибо большое) лайк))

    @michaelcovalciuc2240@michaelcovalciuc22402 жыл бұрын
  • Поддерживаю комментаторов - четко, полно и с практическими примерами и возможными ошибками\подводными камнями! Чувствуется практический опыт за спиной у автора.

    @MrRomanvideo@MrRomanvideo2 жыл бұрын
  • Очень круто! Хочу ещё 50 лекций по кафке от этого автора. Приятно слушать, все быстро чётко логичнои понятно. Просто молодец, дай бог здоровья.

    @avpmk@avpmk6 ай бұрын
  • Большое спасибо за столь подробное и понятное «что под капотом» за 50 минут. Многие "курсы" за 4 часа либо вводят просто базовые термины и их объяснение без погружения в детали, либо погружают в детали так, что ощущение, что я уже должен был все знать про кафку до просмотра.

    @katawasiya@katawasiya4 ай бұрын
  • Очень редкий случай, когда автор доступным языком может объяснить сложные вещи! Потрясающе!

    @user-ee9ym1sn6w@user-ee9ym1sn6w2 жыл бұрын
    • жаль что это не относится к данному автору

      @user-vn2nx1yq9e@user-vn2nx1yq9e8 ай бұрын
    • ​@@user-vn2nx1yq9eотносится

      @user-sd2ed8ni3h@user-sd2ed8ni3hАй бұрын
  • Лучшее, что я нашла по кафке, спасибо огромное автору! отличная подача инфы, с картинками лучше все в голове упорядочивается.

    @user-cm6pr6su7k@user-cm6pr6su7k11 ай бұрын
  • The only reason I am somehow a good developer, is because I forced myself to learn russian, years ago. You guys have a way to explain things that are simply impossible in other languages. This talk was amazing!

    @57skies@57skies2 жыл бұрын
    • Where are you from?

      @AdIstinam@AdIstinam Жыл бұрын
    • Странно, а мы учим английский чтобы получать больше информаций из первоисточников. Парадокс прям какой-то.

      @rustamkadimov5193@rustamkadimov5193 Жыл бұрын
    • @@rustamkadimov5193 imho, knowing both, in a native way was the best thing that happened to me as a developer.

      @57skies@57skies Жыл бұрын
    • на самом деле в рускоязычном интернете в десятки раз меньше информации для девелоперов. Как дополнительная возможность русский может пригодится, но в основном инфу люди ищут в англоязычном интернете.

      @vlera4198@vlera41984 ай бұрын
  • Это действительно лучшее поэтапное схематичное объяснение кафки, огромное вам спасибо

    @tonymaccardio2404@tonymaccardio2404 Жыл бұрын
  • Отличная подача материала, все логично, доступно, четко продемонстрировано информативными слайдами и без разного пафоса !!!

    @vladymyrtereshchenko8919@vladymyrtereshchenko89192 жыл бұрын
  • Хороший доклад, спасибо. Записывайте еще!

    @oeaoo@oeaoo Жыл бұрын
  • Топ! Лучшее видео по кафке. Автору большое спасибо!

    @romantiukh6753@romantiukh67532 жыл бұрын
  • Спасибо большое, продолжайте, пожалуйста

    @VitaliBazhko@VitaliBazhko2 жыл бұрын
  • Великолепное видео, все наглядно, просто и понятно! Спасибо)

    @VladisLove-tg5is@VladisLove-tg5is Жыл бұрын
  • Огромное спасибо, очень полезная лекция!

    @AlexS-lr8wb@AlexS-lr8wb Жыл бұрын
  • Супер. Все доходчиво и понятно, при этом рассказаны как общие принципы, так и различные нюансы

    @Yornero@Yornero2 жыл бұрын
  • Очень качественно разложено по полочкам! Спасибо!

    @woodscrock@woodscrock2 жыл бұрын
  • Послушала с удовольствием, спасибо автору за материал! Давно хотела узнать основную информацию о Kafka.

    @user-ey3mv8mj8q@user-ey3mv8mj8q2 жыл бұрын
  • Низкий поклон Автору! Сложные вещи простыми словами. Всех благ вам :)

    @artemnovikov9429@artemnovikov9429 Жыл бұрын
  • Спасибо! Замечательная подача, очень доступно. Было бы здорово увидеть продолжение, возможно с практикой.

    @arthurkitskan2359@arthurkitskan23592 жыл бұрын
  • Огромное спасибо за ваш доклад! Благодаря этому немного разобрался в инструменте.

    @igor-policee@igor-policee2 жыл бұрын
  • Огромное спасибо за интересную лекцию!

    @ivanvolkov8486@ivanvolkov84862 жыл бұрын
  • Понравилось. Наглядная презентация и объяснение на высоком техническом уровне.

    @alwor@alwor2 жыл бұрын
  • Владимир, Вы голова! Благодарю за материал. И да, остальные Ваши видео тоже познавательные!)

    @DmitryGupolovich@DmitryGupolovich Жыл бұрын
  • Отличный доклад! Спасибо❤

    @BadSanta514@BadSanta5145 ай бұрын
  • Спасибо! Просто отличный разбор. Так доходчиво объяснить - браво!!

    @bilenjka1@bilenjka1 Жыл бұрын
  • Владимир спасибо ! Информация подана без воды - отлично, но очень быстро говоришь и без пауз - немного тяжело новичку воспринимать поток данных. Жду ещё видео.

    @FurbiFurbi@FurbiFurbi2 жыл бұрын
  • Все по делу и без воды. Супер! Спасибо.

    @Boyarsskiy@Boyarsskiy2 жыл бұрын
  • Какое же чудесное видео, рисунки очень помогли в понимании. Спасибо большое !

    @chuckchuck1749@chuckchuck1749Ай бұрын
  • Огромное спасибо и большущее уважение! Отличный материал и подача, все четко по делу без воды, структурировано!!!

    @user-ve3lr8jn7m@user-ve3lr8jn7mАй бұрын
  • эпохальное видео, безмерная благодарность

    @user-tw7lm5nw1g@user-tw7lm5nw1g Жыл бұрын
  • Владимир, это просто огонь. Очень классно для концептуального базового понимания. Спасибо за материал!

    @user-sf9ye9tm3u@user-sf9ye9tm3u4 ай бұрын
  • Отличный доклад! Жалко что больше нет видео по теме

    @ivankartsev4695@ivankartsev4695 Жыл бұрын
  • Всё понятно, схемы огонь, спасибо большое

    @JustEnergyFlow@JustEnergyFlow2 жыл бұрын
  • Грамотно, последовательно, что большая редкость в наше время. Кафку я знаю, освежил знания. Все верно рассказано, ничего не пропущено.

    @user-xd1su3sk3i@user-xd1su3sk3i Жыл бұрын
  • Спасибо большое! Очень полезный материал.

    @Toni9801@Toni9801 Жыл бұрын
  • Отлично! Еще бы ссылку на саму презентацию.

    @user-um9ms3gw5o@user-um9ms3gw5o2 жыл бұрын
  • Спасибо большое за объяснение. Кажется, тут я услышал максимум деталей за менее чем час

    @user-se4gg9sk4b@user-se4gg9sk4b Жыл бұрын
  • Вероятно это самое лучшее объяснение основ про Kafka! Больше спасибо за материал!

    @MrZnakos@MrZnakos21 күн бұрын
  • отличное FAQ по Kafka. спасибо автору

    @Valerikvv80@Valerikvv802 жыл бұрын
  • Отличная лекция. Спасибо.

    @nikolaysheregeda7856@nikolaysheregeda78562 жыл бұрын
  • Замечательный материал! Спасибо)

    @MrOldschoolrocknroll@MrOldschoolrocknroll2 жыл бұрын
  • Огромное спасибо) Давай ещё!!!

    @dimankan@dimankan Жыл бұрын
  • Вова, это офигенно) База по Кафка наглядно представлена и обьяснена, спасибо. Продолжай, пожалуйста)

    @unicoxr5tj417@unicoxr5tj4173 ай бұрын
  • Очень круто и понятно! Спасибо!

    @Teranii@Teranii2 жыл бұрын
  • Спасибо большое, очень понятно рассказал, респект!

    @Vladimir-zj1hc@Vladimir-zj1hc Жыл бұрын
  • спасибо. прекрасная подача материала.

    @alexeykorkin2550@alexeykorkin25502 жыл бұрын
  • Очень крутое объяснение основ! Спасибо за работу!

    @petrovandrey9735@petrovandrey9735 Жыл бұрын
  • Лучшее видео на эту тематику для новичков!

    @user-tv4mn2fu6x@user-tv4mn2fu6x2 жыл бұрын
  • Отдельная благодарность за пояснения на уровне файловой системы.

    @xewuss3750@xewuss37505 ай бұрын
  • Очень доступно и хорошо рассказал! Жирный лайк)

    @user-ez8tb3qx2r@user-ez8tb3qx2r2 жыл бұрын
  • Очень классно изложен материал!

    @dzadzen0@dzadzen02 жыл бұрын
  • Друг, ты просто лучший, материал топ))), спасибо за видео, колокольчик на "Все"!

    @user-ew2pd6fq8j@user-ew2pd6fq8j Жыл бұрын
  • Коротко и по делу, спасибо вам большое!

    @mercurial-flower@mercurial-flower Жыл бұрын
  • Каждый раз пересматриваю , что бы освежить знания перед собесом. Спасибо за ваш труд ))

    @shteker06@shteker0610 ай бұрын
    • Здравствуйте. А на какую позицию устраиваетесь?

      @Daniel-mo1iy@Daniel-mo1iy10 ай бұрын
  • Потрясающе, отличная подача, огромное спасибо. Надеюсь выложите еще что-то по данной теме, например rabbitmq

    @arver1@arver16 ай бұрын
  • Отличное введение в кафку, большое спасибо!

    @onizuka1387@onizuka13872 жыл бұрын
  • Спасибо! Очень хорошее объяснение и наглядная презентация.

    @mallyness9835@mallyness983510 ай бұрын
  • Отличное объяснение, спасибо! Интересно будет ли продолжение ?

    @vvs369@vvs3692 жыл бұрын
  • От души спасибо!

    @ivanstrelka3448@ivanstrelka34482 жыл бұрын
  • Очень классный доклад! Спасибо

    @romalvekasi5307@romalvekasi5307 Жыл бұрын
  • Спасибо, отличная лекция

    @rainbowVax@rainbowVax2 жыл бұрын
  • Супер лучшее видео по Кафка Спасибо!

    @mrDataStream777@mrDataStream777 Жыл бұрын
  • Лучший ролик по основам кафки что я видел. Это было невероятно полезно, и самое главное - Понятно! Качественная подготовка материала, хороший навык объяснения, ну просто чудо. Я готов вас слушать часами, пожалуйста запишите ещё ролики по обучению чему-либо связанному с IT

    @raff199978@raff1999786 ай бұрын
  • Балдеж! У Вас талант докладчика

    @user-sy5jw7us9k@user-sy5jw7us9k Жыл бұрын
  • Отличная лекция! 👍

    @Valder1989@Valder19892 жыл бұрын
  • Доступно и полезно, спасибо :)

    @SegeyK@SegeyK Жыл бұрын
  • Чувак спасибо большое, единственное и нормальное объяснение этой технологии 👍👍

    @user-fg6gg5vb2v@user-fg6gg5vb2v Жыл бұрын
  • Аплодисменты, спасибо за видео!

    @d_m9159@d_m91592 жыл бұрын
  • очень круто - все очень быстро и по сути. автору можно делать успешные онлайн курсы.

    @LeoRcCars@LeoRcCars2 жыл бұрын
  • очень лаконично и понятно! КРУТО!

    @naysav@naysav Жыл бұрын
  • Спасибо за обзор! Интересно. Только как по мне не соглашусь по поводу коммита. Автоматический коммит отлично справляется. Там же еще есть heartbeat - который посылает импульс консюмеру, чтоб балансировка кафки не произошла в ненужный момент. это первый поинт. А второй поинт - что нам мешает создать еще консюмера со своим топиком для сообщения, при обработке которых мы получили ошибку. Затем заранить обработку этих сообщений через какое то время, допустим через час. Это будет уже другой поток, где какой нибудь failureConsumer будет принимать сообщения из failureTopic. Как по мне, любая кастомизация коммита с записью их в БД может только усложнить и увеличить тайм-аут - что противоречит самой философии Кафки.

    @slavailchenko8020@slavailchenko80202 жыл бұрын
  • Спасибо за видео.

    @kaibrakhmanyelubay2671@kaibrakhmanyelubay26712 жыл бұрын
  • Спасибо) все очень понятно👍🏻👍🏻👍🏻

    @user-ww2mt8mh4k@user-ww2mt8mh4k9 ай бұрын
  • Спасибо Добрый человек

    @dmitrynevozhay9825@dmitrynevozhay98254 ай бұрын
  • Чётко, последовательно. Спасибо

    @Das.Kleine.Krokodil@Das.Kleine.Krokodil Жыл бұрын
KZhead