Школа Больших Данных
Школа Больших Данных
  • 183
  • 529 233
Mage.ai
В этом видео мы расскажем про Mage.ai - современный инструмент для работы с данными, создания и автоматизации пайплайнов, а также тренировки моделей машинного обучения. Вы узнаете о его ключевых преимуществах, возможностях обработки данных, о том как автоматизировать выполнение задач. Мы также рассмотрим практические примеры создания пайплайнов.
По вопросам обучения на курсах по технологиям Big Data, Kafka, Spark, Greenplum, AirFlow, NiFI, Hadoop, Data Science, нейронных сетей и машинного обучения приглашаем в нашу "Школу Больших Данных"
bigdataschool.ru
Обращаться по телефону:
+7 (495) 41-41-121
+7 (995) 100-45-63
Чтобы не пропустить информацию о новых курсах, акциях и других событиях Школы Больших Данных, рекомендуем подписаться на нас в социальных сетях:
Телеграм-канал: t.me/BigDataSchool_ru
Вконтакте: bdschool_mck
Github: github.com/BigDataSchoolRU
LinkedIn: www.linkedin.com/company/bigdataschoolru/
Подписывайтесь и будьте в курсе всех интересных новинок мира Big Data вместе со Школой больших данных - www.bigdataschool.ru
มุมมอง: 43

วีดีโอ

«Модель Dataflow и паттерны управления пайплайнами обработки данных в Apache Beam в Kubernetes"
มุมมอง 23814 วันที่ผ่านมา
По вопросам обучения на курсах по технологиям Big Data, Kafka, Spark, Greenplum, AirFlow, NiFI, Hadoop, Data Science, нейронных сетей и машинного обучения приглашаем в нашу "Школу Больших Данных" bigdataschool.ru Обращаться по телефону: 7 (495) 41-41-121 7 (995) 100-45-63 Чтобы не пропустить информацию о новых курсах, акциях и других событиях Школы Больших Данных, рекомендуем подписаться на нас...
Митап "Модели и паттерны управления приложениями Apache Spark и Apache Flink на Kubernetes"
มุมมอง 216หลายเดือนก่อน
По вопросам обучения на курсах по технологиям Big Data, Kafka, Spark, Greenplum, AirFlow, NiFI, Hadoop, Data Science, нейронных сетей и машинного обучения приглашаем в нашу "Школу Больших Данных" bigdataschool.ru Обращаться по телефону: 7 (495) 41-41-121 7 (995) 100-45-63 Чтобы не пропустить информацию о новых курсах, акциях и других событиях Школы Больших Данных, рекомендуем подписаться на нас...
Анонс"Модель Dataflow и паттерны управления пайплайнами обработки данных в Apache Beam в Kubernetes"
มุมมอง 53หลายเดือนก่อน
"Школа Больших Данных" 12 сентября 2024 года проводит бесплатный митап для архитекторов платформ данных, инженеров данных, разработчиков, DevOps-, DataOps-инженеров и просто интересующихся о модели Dataflow, API Apache Beam, а также паттернах управления приложениями распределенной обработки данных на Kubernetes. Apache Beam - унифицированный API с открытым исходным кодом, реализующий модель Dat...
Анонс митапа «Модели и паттерны управления приложениями Apache Spark и Flink на Kubernetes»
มุมมอง 94หลายเดือนก่อน
ПРИГЛАШАЕМ ВАС ПРИНЯТЬ УЧАСТИЕ 5 СЕНТЯБРЯ В 17.00 В БЕСПЛАТНОМ МИТАПЕ «Модели и паттерны управления приложениями Apache Spark и Apache Flink на Kubernetes» На мастер-классе вы узнаете о моделях и ключевых паттернах управления распределенными приложениями Apache Spark и Apache Flink на Kubernetes. Apache Spark - фрэймворк распределенной обработки больших данных с открытым исходным кодом, реализу...
KEDRO
มุมมอง 902 หลายเดือนก่อน
Cегодня мы поговорим о Kedro, мощном инструменте для управления проектами машинного обучения и аналитики данных. Kedro помогает разработчикам создавать поддерживаемые и воспроизводимые проекты, улучшая качество кода и структурируя рабочий процесс. Kedro - это открытый фреймворк, разработанный QuantumBlack, который предоставляет структуру для создания и управления проектами машинного обучения и ...
Шаблонизация проектов. Cookiecutter
มุมมอง 1642 หลายเดือนก่อน
В данном видео затронем с вами тему шаблонизации проектов. Рассмотрим плюсы использования шаблонизации и где можно применять. Расскажу про альтернативные инструменты и близко познакомимся с одним из самых популярных инструментов шаблонизации проектов - cookiecutter. #Python, #шаблонизация, #cookiecutter шаблонизация проектов По вопросам обучения на курсах по технологиям Big Data, Kafka, Spark, ...
9. Структуры и типы данных в Python. Float
มุมมอง 1253 หลายเดือนก่อน
Девятое видео из цикла по структурам и типам данных посвященное типу данных float. Детально погрузились в внутреннее устройство этого типа данных в CPython, а также рассмотрели популярную проблему сравнивания числе с плавающей запятой. Python, типы данных, структуры данных, CPython, float, double, числа с плавающей запятой По вопросам обучения на курсах по технологиям Big Data, Kafka, Spark, Gr...
8. Структуры и типы данных в Python. Декартово дерево.
มุมมอง 1663 หลายเดือนก่อน
Восьмое видео из цикла по структурам и типам данных посвященное декартовым деревьям. Рассмотрены устройство декартовых деревьев, а также его реализацию в Python. А вы поняли, почему дерево называют декартовым? #Python, #типыданных, #структурыданных , #Декартоводерево, #BST, #heap, #treap, #дуча По вопросам обучения на курсах по технологиям Big Data, Kafka, Spark, Greenplum, AirFlow, NiFI, Hadoo...
7. Структуры и типы данных в Python. Хэш-таблицы
มุมมอง 2944 หลายเดือนก่อน
Седьмое видео из цикла по структурам и типам данных. В этом видео рассматривается структура данных: хэш-таблицы. Сначала немного истории создания, затем подробное описание устройства этой структуры данных, основные операции и их реализация. #Python, #типыданных, #структурыданных, #хэш, #хэш-таблица По вопросам обучения на курсах по технологиям Big Data, Kafka, Spark, Greenplum, AirFlow, NiFI, H...
6. Структуры и типы данных в Python. Бинарное дерево поиска (BST)
มุมมอง 1634 หลายเดือนก่อน
Шестое видео из цикла по структурам и типам данных. На этом занятии подробно рассмотрено устройство такой структуры данных как бинарное дерево поиска. Поговорим про историю создания, как реализовать и где можно использовать #Python, #тип данных, #структуры данных, #бинарные деревья, #BST, #бинарное дерево поиска По вопросам обучения на курсах по технологиям Big Data, Kafka, Spark, Greenplum, Ai...
5. Структуры и типы данных в Python. Связные списки
มุมมอง 1264 หลายเดือนก่อน
Пятое видео из цикла по структурам и типам данных, посвященное связным спискам и их реализации в Python. На этом занятии мы рассмотрим три типа связных списков: односвязный, двусвязный и циклический, обсудим теоретические аспекты, практическую реализацию, область применения, а также сложность операций в них. #Python, типы данных, структуры данных, списки, связный список По вопросам обучения на ...
МИТАП "Apache Spark на Kubernetes своими руками"
มุมมอง 3624 หลายเดือนก่อน
Приносим извинение за первые 13 минут, были сбои в работе электронной площадки. По вопросам обучения на курсах по технологиям Big Data, Kafka, Spark, Greenplum, AirFlow, NiFI, Hadoop, Data Science, нейронных сетей и машинного обучения приглашаем в нашу "Школу Больших Данных" bigdataschool.ru Обращаться по телефону: 7 (495) 41-41-121 7 (995) 100-45-63 Чтобы не пропустить информацию о новых курса...
4. Структуры и типы данных в Python. Кучи и очереди с приоритетом
มุมมอง 2064 หลายเดือนก่อน
Четвертое видео из цикла по структурам и типам данных в Python. На этом занятии подробно рассмотрено устройство такой структуры данных как кучи. А также рассмотрены очереди с приоритетом и область их применения. Python, типы данных, структуры данных, кучи, heap, heapq, очереди с приоритетом. По вопросам обучения на курсах по технологиям Big Data, Kafka, Spark, Greenplum, AirFlow, NiFI, Hadoop, ...
3. Структуры и типы данных в Python. Словарь и целочисленный тип данных.
มุมมอง 2275 หลายเดือนก่อน
Третье видео из цикла про внутреннее устройство типов данных в Python. В этом видео рассматривается внутреннее устройство типов данных dict и int. Python, CPython, словари, hashmap, int, integer, pylongobject По вопросам обучения на курсах по технологиям Big Data, Kafka, Spark, Greenplum, AirFlow, NiFI, Hadoop, Data Science, нейронных сетей и машинного обучения приглашаем в нашу "Школу Больших ...
2. Структуры и типы данных в Python. Управление памятью
มุมมอง 2755 หลายเดือนก่อน
2. Структуры и типы данных в Python. Управление памятью
1. Структуры и типы данных в Python. Строки.
มุมมอง 3445 หลายเดือนก่อน
1. Структуры и типы данных в Python. Строки.
Асинхронность в Python - Курсы "Школы Больших Данных" г. Москва
มุมมอง 2516 หลายเดือนก่อน
Асинхронность в Python - Курсы "Школы Больших Данных" г. Москва
Многопоточность и многопроцессорность в Python - Курсы "Школы Больших Данных" г. Москва
มุมมอง 3416 หลายเดือนก่อน
Многопоточность и многопроцессорность в Python - Курсы "Школы Больших Данных" г. Москва
Инструкция по настройке клиента Pritunl VPN для клиентов "Школы Больших Данных" Yandex Cloud
มุมมอง 2686 หลายเดือนก่อน
Инструкция по настройке клиента Pritunl VPN для клиентов "Школы Больших Данных" Yandex Cloud
Митап "ELT в эпоху Big Data: что такое Data Build Tool и как это работает"
มุมมอง 4717 หลายเดือนก่อน
Митап "ELT в эпоху Big Data: что такое Data Build Tool и как это работает"
3. Пишем свой Telegram bot на Python с встроенным ChatGPT. + Docker "Школа Больших Данных" г. Москва
มุมมอง 1.4K7 หลายเดือนก่อน
3. Пишем свой Telegram bot на Python с встроенным ChatGPT. Docker "Школа Больших Данных" г. Москва
МИТАП "Scala как язык разработки Spark-приложений"
มุมมอง 4788 หลายเดือนก่อน
МИТАП "Scala как язык разработки Spark-приложений"
2. Промпты ChatGPT. Решение математических и IT задач. - Курсы "Школы Больших Данных" г. Москва
มุมมอง 6198 หลายเดือนก่อน
2. Промпты ChatGPT. Решение математических и IT задач. - Курсы "Школы Больших Данных" г. Москва
1. Введение в ChatGPT. История и архитектура сети. Курсы "Школы Больших Данных" г. Москва
มุมมอง 3528 หลายเดือนก่อน
1. Введение в ChatGPT. История и архитектура сети. Курсы "Школы Больших Данных" г. Москва
МИТАП «Clickhouse как основа DWH»
มุมมอง 1.6K9 หลายเดือนก่อน
МИТАП «Clickhouse как основа DWH»
Что такое RabbitMQ и чем он отличается от Apache Kafka за 10 минут
มุมมอง 2.7K11 หลายเดือนก่อน
Что такое RabbitMQ и чем он отличается от Apache Kafka за 10 минут
Практический курс Data Pipeline на Apache Airflow - "Школы Больших Данных" г. Москва
มุมมอง 7Kปีที่แล้ว
Практический курс Data Pipeline на Apache Airflow - "Школы Больших Данных" г. Москва
Kafka в ML задачах, стенд с FastApi и PostgreSql - Курсы "Школы Больших Данных" г. Москва
มุมมอง 1.3Kปีที่แล้ว
Kafka в ML задачах, стенд с FastApi и PostgreSql - Курсы "Школы Больших Данных" г. Москва
Kafka в ML задачах, интеграция модели - Курсы "Школы Больших Данных" г. Москва
มุมมอง 518ปีที่แล้ว
Kafka в ML задачах, интеграция модели - Курсы "Школы Больших Данных" г. Москва

ความคิดเห็น

  • @alexnevidimkins4730
    @alexnevidimkins4730 2 วันที่ผ่านมา

    Очень полезное, спасибо. Особенно когда начинаешь только разбирать airflow. Разбор на примере отличный метод

  • @EvreyNaZarplatke
    @EvreyNaZarplatke 7 วันที่ผ่านมา

    четко, быстро, понятно. Огромное спасибо!!!

  • @omega-center_Khmelnytskyi
    @omega-center_Khmelnytskyi 18 วันที่ผ่านมา

    как сделать, что бы на сервере после перезагрузки, OpenVPN GUI запускался connect автоматически? Буду благодарен за подсказку

  • @SpiratorSpirator
    @SpiratorSpirator 22 วันที่ผ่านมา

    Для настройки Jupyter Notebook для работы с Apache Spark можно использовать findspark, библиотеку, которая позволяет динамически настроить переменные окружения в Jupyter Notebook, указывающие на установку Spark. Это как еще один вариант подружить Jupyter Notebook с Apache Spark.

  • @mariyayurchenko2790
    @mariyayurchenko2790 หลายเดือนก่อน

    Потому что декартовая система координат?

  • @XapoH7
    @XapoH7 หลายเดือนก่อน

    Какой тиллер в хельме? Его уже 4 года как там нет.

    • @sergeysamsonov2567
      @sergeysamsonov2567 หลายเดือนก่อน

      Здравствуйте! На митапе рассматривалась архитектура Helm2. Helm2 предполагает взаимодействие с Tiller. На следующем митапе будет рассматриваться архитектура Helm3, который взаимодействует напрямую с API-сервер Kubernetes.

    • @XapoH7
      @XapoH7 หลายเดือนก่อน

      @@sergeysamsonov2567 Тогда извините, про то, что используется депрекейтед хельм прослушал

  • @BigDataSchool
    @BigDataSchool หลายเดือนก่อน

    Ссылка на регистрацию shkola-bolshih-dannyh.timepad.ru/event/3006816/

  • @BigDataSchool
    @BigDataSchool หลายเดือนก่อน

    shkola-bolshih-dannyh.timepad.ru/event/3006852/ # ссылка на регистрацию

  • @Enerdzizer
    @Enerdzizer หลายเดือนก่อน

    3:44 удаляем сигму матрицу. Да вы чего такое говорите😅 похоже тема svd разложения вам не очень знакома..

  • @ВладимирМихайлов-к5з
    @ВладимирМихайлов-к5з หลายเดือนก่อน

    Чет у меня лог дага пустой и зависает даг на ранинге..

  • @MikeDev-Sooworr
    @MikeDev-Sooworr หลายเดือนก่อน

    Читать я и сам умею.

  • @Leda-xh8ox
    @Leda-xh8ox 2 หลายเดือนก่อน

    Почему вас нет в РуТюбе или ВК? 😏

    • @BigDataSchool
      @BigDataSchool หลายเดือนก่อน

      Добрый день. Мы есть и ВК vk.com/video/@bdschool_mck и на рутуб rutube.ru/channel/24119476/

  • @НатальяПетрова-г2ъ
    @НатальяПетрова-г2ъ 2 หลายเดือนก่อน

    Боже как непонятно

  • @HeliodoroSampaio
    @HeliodoroSampaio 2 หลายเดือนก่อน

    А какие преимущества использования статической типизации в Scala по сравнению с динамической в Python? я сам долго выбирал курсы по IT, рассматривал разные компании, но Skypro помогли найти работу))

  • @aamrzv
    @aamrzv 2 หลายเดือนก่อน

    В таблице было 2 строки откудастолько файлов?

  • @kosee4008
    @kosee4008 2 หลายเดือนก่อน

    если говорить простым языком, это крон на максималках? что такое крон, и почему он простым языком говорится?

  • @Олександр-я5в
    @Олександр-я5в 2 หลายเดือนก่อน

    Спасибо большое !.)

  • @pumbaua
    @pumbaua 2 หลายเดือนก่อน

    Господи, хорошо то как!

  • @Олександр-я5в
    @Олександр-я5в 2 หลายเดือนก่อน

    Здравствуйте спасибо за обзор, подскажите не могли бы вы сделать обзор на Kedro мне кажется он больше подходит для ML.)

    • @ermilovim
      @ermilovim 2 หลายเดือนก่อน

      Спасибо за отзыв! Рассмотрю такую возможность, Kedro действительно интересный инструмент)

  • @evgenykozyrev1333
    @evgenykozyrev1333 3 หลายเดือนก่อน

    21 минута воды

  • @nedotraxxxx
    @nedotraxxxx 3 หลายเดือนก่อน

    Интересный материал и подача, всем мира👍

  • @АннаЧернышова-я6ш
    @АннаЧернышова-я6ш 3 หลายเดือนก่อน

    как вы определяете интервал по звездочкам ?

  • @user-mn6fx7ss7t
    @user-mn6fx7ss7t 3 หลายเดือนก่อน

    М-да.. , понятно объяснять надо уметь конечно

  • @xandrviking1113
    @xandrviking1113 3 หลายเดือนก่อน

    Спасибо за видео 👍👏

  • @АлександрВальвачев-я6ъ
    @АлександрВальвачев-я6ъ 3 หลายเดือนก่อน

    А зачем вы все фичи да фичи? Учите русский язык, потом вещайте истины.

  • @xandrviking1113
    @xandrviking1113 4 หลายเดือนก่อน

    Спасибо за урок 👍🤝

  • @gera4798
    @gera4798 4 หลายเดือนก่อน

    Спасибо)

  • @gera4798
    @gera4798 4 หลายเดือนก่อน

    Спасибо, полезно, перестала бояться слова "AirFlow")))

  • @gera4798
    @gera4798 4 หลายเดือนก่อน

    Спасибо

  • @filogort6852
    @filogort6852 4 หลายเดือนก่อน

    в начеле чернота и пустота

  • @maksonn58
    @maksonn58 4 หลายเดือนก่อน

    вода водой

  • @orelkira83
    @orelkira83 4 หลายเดือนก่อน

    Честно сказать, может для уже знающих людей все просто, но с ходу много чего не поясняется, и нет ссылки на этот блокнот

  • @АлексейАндриянов-э9ъ
    @АлексейАндриянов-э9ъ 4 หลายเดือนก่อน

    Приятное и спокойное объяснение. Спасибо.

  • @romankonovalov2588
    @romankonovalov2588 5 หลายเดือนก่อน

    Топ

  • @romankonovalov2588
    @romankonovalov2588 5 หลายเดือนก่อน

    Топ Видео

  • @hsqlk
    @hsqlk 5 หลายเดือนก่อน

    А почему не привели пример pandas? Он не очень с большими данными, но здесь и не так много

  • @Egorka-vl7ce
    @Egorka-vl7ce 5 หลายเดือนก่อน

    А если однобайтовую строку конткатенировать с двухбайтовой, общая будет уже вся двухбайтовая?

    • @ermilovim
      @ermilovim 4 หลายเดือนก่อน

      Да, конечно

  • @user-tb1ok2wg4s
    @user-tb1ok2wg4s 5 หลายเดือนก่อน

    Класс

  • @suspiciousgoose7904
    @suspiciousgoose7904 5 หลายเดือนก่อน

    У всех видео одинаковые… но никто не говорит как развернуть БД на сервере, организовать ее резервирование или как подключиться к существующей базе на том же сервере. Все учебное, локальное… Хочу свой проект сделать, чтобы я мог им пользоваться прямо с телефона, а не все это локальное блин. Несколько недель в поисках решения

  • @UFOBroCaptain
    @UFOBroCaptain 6 หลายเดือนก่อน

    5:48 - примитивные типы данных он в скале нашел, вот сказочник. ))

  • @DmitryPonomareF
    @DmitryPonomareF 6 หลายเดือนก่อน

    Видосы супер! спасибо огромное. Посмотрел Ваш курс по Streamlit, сейчас начал смотреть вот этот по Fast API. Неприлично малое количество просмотров для такого уровня контента((( Желаю дальнейшего развития!

    • @BigDataSchool
      @BigDataSchool 6 หลายเดือนก่อน

      Благодарим вас Дмитрий о такой высокой оценке работы наших преподавателей. Мы стремимся быть полезными, а не просто "клепать" видео ради контента.

  • @ValerijsJerjomenko
    @ValerijsJerjomenko 6 หลายเดือนก่อน

    Спасибо хорошее видео!! Подскажите как работать с радиусом, например найти все города в радиусе 100 км с индексами.

  • @FloggerDD
    @FloggerDD 6 หลายเดือนก่อน

    Привет! Можно исходный код бот?

  • @ivanl7786
    @ivanl7786 6 หลายเดือนก่อน

    Красивые вещи? Уже 1.5 часа гуглю красивый дашборд на Python и вообще не могу найти.

  • @alexzav1327
    @alexzav1327 6 หลายเดือนก่อน

    Спасибо огромное! Я пол дня потратил пытаясь настроить, это видео невероятно помогло!

  • @NotkaDopa
    @NotkaDopa 6 หลายเดือนก่อน

    Какая то проблема с TIMEZONE = pendulum.tz.timezone(tz)

  • @Ardbot
    @Ardbot 6 หลายเดือนก่อน

    Спасибо!

  • @SaltaMed
    @SaltaMed 7 หลายเดือนก่อน

    Ужасный звук, почти ничего не слышно…. Увы слушать это невозможно

  • @vvitasikm3341
    @vvitasikm3341 7 หลายเดือนก่อน

    Хотел попасть но не попал , спасибо за видео !

  • @Boss-ye3zr
    @Boss-ye3zr 7 หลายเดือนก่อน

    Автор канала еще раз приветствую, у меня сейчас стоит задача передать боту файлы через google api и чтобы он основывая на данных что в папке отвечал на вопросы, если Вам интересна данная задача и Вы бы хотели презентовать ее на своем канале я не против, могли бы мне помочь в доработке кода?