Activity Schema - новая методология? Одна таблица вместо хранилища данных / Николай Голов
ฝัง
- เผยแพร่เมื่อ 29 ส.ค. 2024
- 🔔 Подписывайтесь на канал "Datalearn" чтобы не пропустить остальные части и ставьте лайки!
📕 Записывайтесь и проходите курс Инженера Данных.
⚠️ КУРС БЕСПЛАТНЫЙ!
🔗 Записаться вы можете на нашем портале datalearn.ru/
👍🏻 Запись на курс даст вам возможность не только просматривать видео, но и получить доступ к закрытым материалам, а также возможность выполнять домашние задания и получить сертификат прохождения курса.
🔥 Самые актуальные новости про аналитику в Telegram канале: t.me/rockyourdata
🔥 Телеграм канал DataLearn:
t.me/data_learn
Николая Голова всегда интересно слушать, по архитектуре данных на русском языке мало информации
спасибо большое!
Начал с плоской таблицы, закончил схемой звезда для специального случая потоковых данных. Иногда важно открыть ещё не забытое старое...
Интересно, спасибо огромное! Похоже, что концепция "чем проще - тем лучше" реально работает)))
этому будущему лет двадцать, наверное. В 2010ом работал с большим энтерпрайз решением, где эти активити схемы генерились в рантайме для построения отчетов
По сути плоская таблица (flat file) в 1-ой нормальной форме - основа аналитических наборов данных (analytical dataset) для задач машинного обучения. Правда, надо ещё поработать с признаками (feature engineering). Хорошо и для BI, не нужно связывать таблицу фактов с таблицами измерений. Но большая избыточность и неэффективность при работе с отдельными измерениями.
Интересно узнать название того, что применяешь пару лет. :)
Провокационное название видео :) Но. спасибо. Было интересно
Начали одной таблицей закончили звездой. Очень ограниченный подход к моделированию, где такое можно применить.
Activity schema чем-то похожа на RDF из semantic web
В RDF - «субъект - предикат - объект». А тут разделения на "субъект" и "объект" нет. Что, ИМХО, не всегда удобно. Возможно было бы удобнее разбить колонку "Activity" на три колонки (1) КТО делает, (2) ЧТО делается, (3) с ЧЕМ делает
Ожидал single table design /
Ну незнай-незнаю… пускать Системы Поддержки Принятия Решений, aka бизнес-пользователей с дикими выборками, включающими богатый набор оконных функций прямо на Core DDS слой… на какая-то стрёмная история, имхо. Про Special Data Marts - тут да, согласен.
P.S. - фраза “Does it workS”, конечно убила))) как-так то?))
Похоже, с английскими у вас лучше, чем с русским ;)
@@LossevSergey ))) и с тем, и с другим неплохо)
ну это на DV их пускать стремно, потому вот такие витрины им Николай и собрал, тут уже любой ду... простите аналитик раберется как их кверить
Ужастная схема
Прекрастная схема