Про Kafka (основы)
ฝัง
- เผยแพร่เมื่อ 19 เม.ย. 2021
- Apache Kafka - популярный распределенный отказоустойчивый брокер сообщений, используемый в высоконагруженных системах и BigData проектах.
На видео мой рассказ про основы Kafka: что, зачем, как и где.
![[TH]FFWS SEA Spring 2024 Knockout Stage - Day 12](http://i.ytimg.com/vi/DVnFpe52UV4/mqdefault.jpg)
Спасибо за видео.
Таймкоды.
1. Что такое кафка? Свойства кафки. История. 0:40 - 3:26
2. Какую задачу решает кафка. 3:27 - 6:13
3. Основные сущности кафки. Перечисление 6:14 - 6:34
4. Broker 6:35 - 7:19
5. Zookeeper 7:20 - 8:38
6. Message (Record) 8:39 - 9:48
7. Topic и Partition 9:49 - 26:50
8. Producer 26:51 - 36:28
9. Consumer, offset 36:29 - 46:05
10. Выводы 46:06
Пожалуй лучшее объяснение которое нашел на Ютубе, супер
жаль что единственное видео на канале по айтишной тематике
нефига. там он запутался конкретно. например, на 12ой минуте говорит что с разных партишнов одновременно считываются данные. а потом где-то начиная с 21ой минуты говорит, что данные можно считать только с лидер партишна
@@labourtimesupport3302 , путаницы нет. Все верно. Одновременно читаем со всех партиций, но только с лидер-реплик этих партиций. Каждая партиция имеет одну leader-реплику и несколько follower-реплик (то есть каждая партиция представлена в нескольких экземплярах для отказоустойчивости, но работаем для согласованности только с одним экземпляром каждой партиции, остальные экземпляры синхронизируется с основным).
@@labourtimesupport3302 хаха, джун попытался покритиковать синьора в его рабочей сфере. П.с. сам как раз на этом моменте запутался.
@@MrRomanvideo Я тут на работе одному пытался объяснить, почему я топик на 16 разделов сделал. Чудак фактор репликации с количеством разделов перепутал и меня еще обвинял, что я мол не по книге сделал. Типа зачем в 16 раз "нагрузку" увеличивать %) И никак не смог убедить.
Владимир, огромное спасибо за столь лаконичный и четкий доклад про Кафку! Словил себя на мысли, что ни разу не перематывал ваш доклад, потому что он так структурирован и подан, что помнишь все термины и благодаря картинкам четко понимаешь все процессы. Присоединяюсь к комментариям выше, было бы просто прекрасно, если бы вы постили побольше видео на темы связанные с IT технологиями.
Присоединяюсь к мнению выше - все четко и по полкам, ранее уже изучал Кафку, писал что-то, но полноценное понимание того,как внутри устроено, пришло только сейчас. Автору большой респект за видео и подачу материала.
А я перематывал назад каждый раз, когда дети орали рядом, но и этот комментарий про позитив - видео подано так, что не хотелось пропустить ни слова
А я нашел данный доклад настолько качественным, что смотрю третий раз подряд его. Нет, не потому что я туповат. Просто тут исключительно полезная информация воды 0. А мозг может мой, а может всех людей, устроен так, что если несколько раз прокрутить одну и ту же информацию, он её запомнит на всю жизнь. Потому что посчитает важной. Теперь меня хоть ночью разбуди, я перескажу доклад.
Кратко, без воды, информативно.
Ждем еще лекций.
Замечательное видео! Огромное спасибо вам за труд) Будет приятно увидеть от вас похожие по содержанию ролики) Не останавливайтесь! У вас талант объяснять)
Владимир, очень ждем еще видео по Kafka и другим областям IT. Великолепная подача материала, грамотная речь и глубокое понимание вопроса! Спасибо!
Отличная подача. Без воды, видно что на основе практического опыта лекция. Спасибо!
Автору огромный респект! Было бы отлично вторую часть, где прям на практике показать, как та или иная настройка отрабатывает.
Огромное спасибо за столько подробное, понятное и доступное изложение материала!
Даёшь больше видео от автора по IT тематике! Самая полезная информация по Kafka которую встречал.
Спасибо огромное! Вы такой талапнтливый преподаватель, и презентация, и объяснение на высшем уровне!
Благодарю за столь плотный и структурированный поток сжатой информации.
Спасибо за то, что, объяснили все человеческим языком!
Владимир у Вас редкий талант объяснить сложное простыми словами. Спасибо Вам!
Очень насыщенная лекция, но очень доступно и понятно.
Автору большое спасибо!
Идеально. Чётко, без воды, по существу, вся визуализация по существу. Такие объяснения -- очень редкий зверь. Спасибо!
Ваша лекция просто огонь!🔥Спасибо😃
Спасибо за видео!
Много полезной информации. Пока все в голову не укладывается. Но буду пересматривать те моменты, которые не запомнил.
Сама структура и подача очень хорошо получилось!
Хорошее начало, хочется продолжения. Хорошо применён принцип просто о сложно.
Владимир, спасибо! Наверное, одно из лучших изложений материала, которое я когда-либо встречала)) Лаконично, без воды, при этом максимально подробно и чётко. Очень интересно и приятно было слушать. Офигенно, 10/10!
Большое вам спасибо за видео! Думал смотреть сначала видосы на английском, но понял, что многое не очень усваивается, а благодаря вам всё разложилось по полочкам.
Владимир, спасибо за абсолютно сухую выжимку без всякой воды, настолько понятно, что дальше некуда просто!
офигенно, спасибо! долго искала кусочками информацию, а тут все в одном месте и понятно.
Четко и по делу без воды. Спасибо!
Большое спасибо! Отличная лекция! Доступное объяснение сложной темы.
правда очень круто.. вы смогли объяснить так, что совсем новичок понял очень много и было действительно интересно. Спасибо большое) лайк))
Поддерживаю комментаторов - четко, полно и с практическими примерами и возможными ошибками\подводными камнями! Чувствуется практический опыт за спиной у автора.
Очень круто! Хочу ещё 50 лекций по кафке от этого автора. Приятно слушать, все быстро чётко логичнои понятно. Просто молодец, дай бог здоровья.
Большое спасибо за столь подробное и понятное «что под капотом» за 50 минут.
Многие "курсы" за 4 часа либо вводят просто базовые термины и их объяснение без погружения в детали, либо погружают в детали так, что ощущение, что я уже должен был все знать про кафку до просмотра.
Очень редкий случай, когда автор доступным языком может объяснить сложные вещи! Потрясающе!
жаль что это не относится к данному автору
@@user-vn2nx1yq9eотносится
Лучшее, что я нашла по кафке, спасибо огромное автору! отличная подача инфы, с картинками лучше все в голове упорядочивается.
The only reason I am somehow a good developer, is because I forced myself to learn russian, years ago. You guys have a way to explain things that are simply impossible in other languages. This talk was amazing!
Where are you from?
Странно, а мы учим английский чтобы получать больше информаций из первоисточников. Парадокс прям какой-то.
@@rustamkadimov5193 imho, knowing both, in a native way was the best thing that happened to me as a developer.
на самом деле в рускоязычном интернете в десятки раз меньше информации для девелоперов. Как дополнительная возможность русский может пригодится, но в основном инфу люди ищут в англоязычном интернете.
Это действительно лучшее поэтапное схематичное объяснение кафки, огромное вам спасибо
Отличная подача материала, все логично, доступно, четко продемонстрировано информативными слайдами и без разного пафоса !!!
Хороший доклад, спасибо. Записывайте еще!
Топ! Лучшее видео по кафке. Автору большое спасибо!
Спасибо большое, продолжайте, пожалуйста
Великолепное видео, все наглядно, просто и понятно! Спасибо)
Огромное спасибо, очень полезная лекция!
Супер. Все доходчиво и понятно, при этом рассказаны как общие принципы, так и различные нюансы
Очень качественно разложено по полочкам! Спасибо!
Послушала с удовольствием, спасибо автору за материал! Давно хотела узнать основную информацию о Kafka.
Низкий поклон Автору! Сложные вещи простыми словами. Всех благ вам :)
Спасибо! Замечательная подача, очень доступно. Было бы здорово увидеть продолжение, возможно с практикой.
Огромное спасибо за ваш доклад! Благодаря этому немного разобрался в инструменте.
Огромное спасибо за интересную лекцию!
Понравилось. Наглядная презентация и объяснение на высоком техническом уровне.
Владимир, Вы голова! Благодарю за материал. И да, остальные Ваши видео тоже познавательные!)
Отличный доклад! Спасибо❤
Спасибо! Просто отличный разбор. Так доходчиво объяснить - браво!!
Владимир спасибо ! Информация подана без воды - отлично, но очень быстро говоришь и без пауз - немного тяжело новичку воспринимать поток данных. Жду ещё видео.
Все по делу и без воды. Супер! Спасибо.
Какое же чудесное видео, рисунки очень помогли в понимании. Спасибо большое !
Огромное спасибо и большущее уважение! Отличный материал и подача, все четко по делу без воды, структурировано!!!
эпохальное видео, безмерная благодарность
Владимир, это просто огонь. Очень классно для концептуального базового понимания. Спасибо за материал!
Отличный доклад! Жалко что больше нет видео по теме
Всё понятно, схемы огонь, спасибо большое
Грамотно, последовательно, что большая редкость в наше время. Кафку я знаю, освежил знания. Все верно рассказано, ничего не пропущено.
Спасибо большое! Очень полезный материал.
Отлично! Еще бы ссылку на саму презентацию.
Спасибо большое за объяснение. Кажется, тут я услышал максимум деталей за менее чем час
Вероятно это самое лучшее объяснение основ про Kafka! Больше спасибо за материал!
отличное FAQ по Kafka. спасибо автору
Отличная лекция. Спасибо.
Замечательный материал! Спасибо)
Огромное спасибо) Давай ещё!!!
Вова, это офигенно) База по Кафка наглядно представлена и обьяснена, спасибо.
Продолжай, пожалуйста)
Очень круто и понятно! Спасибо!
Спасибо большое, очень понятно рассказал, респект!
спасибо.
прекрасная подача материала.
Очень крутое объяснение основ! Спасибо за работу!
Лучшее видео на эту тематику для новичков!
Отдельная благодарность за пояснения на уровне файловой системы.
Очень доступно и хорошо рассказал! Жирный лайк)
Очень классно изложен материал!
Друг, ты просто лучший, материал топ))), спасибо за видео, колокольчик на "Все"!
Коротко и по делу, спасибо вам большое!
Каждый раз пересматриваю , что бы освежить знания перед собесом. Спасибо за ваш труд ))
Здравствуйте. А на какую позицию устраиваетесь?
Потрясающе, отличная подача, огромное спасибо.
Надеюсь выложите еще что-то по данной теме, например rabbitmq
Отличное введение в кафку, большое спасибо!
Спасибо! Очень хорошее объяснение и наглядная презентация.
Отличное объяснение, спасибо! Интересно будет ли продолжение ?
От души спасибо!
Очень классный доклад! Спасибо
Спасибо, отличная лекция
Супер лучшее видео по Кафка
Спасибо!
Лучший ролик по основам кафки что я видел. Это было невероятно полезно, и самое главное - Понятно! Качественная подготовка материала, хороший навык объяснения, ну просто чудо. Я готов вас слушать часами, пожалуйста запишите ещё ролики по обучению чему-либо связанному с IT
Балдеж! У Вас талант докладчика
Отличная лекция! 👍
Доступно и полезно, спасибо :)
Чувак спасибо большое, единственное и нормальное объяснение этой технологии 👍👍
Аплодисменты, спасибо за видео!
очень круто - все очень быстро и по сути. автору можно делать успешные онлайн курсы.
очень лаконично и понятно! КРУТО!
Спасибо за обзор! Интересно. Только как по мне не соглашусь по поводу коммита. Автоматический коммит отлично справляется. Там же еще есть heartbeat - который посылает импульс консюмеру, чтоб балансировка кафки не произошла в ненужный момент. это первый поинт. А второй поинт - что нам мешает создать еще консюмера со своим топиком для сообщения, при обработке которых мы получили ошибку. Затем заранить обработку этих сообщений через какое то время, допустим через час. Это будет уже другой поток, где какой нибудь failureConsumer будет принимать сообщения из failureTopic. Как по мне, любая кастомизация коммита с записью их в БД может только усложнить и увеличить тайм-аут - что противоречит самой философии Кафки.
Спасибо за видео.
Спасибо) все очень понятно👍🏻👍🏻👍🏻
Спасибо Добрый человек
Чётко, последовательно. Спасибо