Для BI-дашборда нужно спроектировать хранилище, которое будет получать данные из постоянно пополняющегося источника. Пройдя курс, вы разберётесь, как подойти к такой задаче и создать дашборд с ответами на вопросы бизнес-аналитиков.
Данные из Kafka можно загрузить в ClickHouse, а расчёт...
Aноним
Тема
apachespark
data engineering
newprolab
python
большие данные
игорь мосягин
николай марков
Упавшее задание оставляет в хранилище обрывок файла, и отчет считает часть данных дважды. Схема таблицы меняется без предупреждения, таблицы распадаются на тысячи мелких файлов, а данные приходится копировать для каждой команды. Это практическое руководство показывает, как Delta Lake решает...
Aноним
Тема
apachespark
data science
delta lake
базы данных
озера данных
питер
электронная книга
Сделайте ваше озеро данных быстрым, масштабируемым и экономичным. Архитектура Apache Iceberg от создателей!
Выбираете технологическую основу для Data Lake, которая прослужит годы? Apache Iceberg — это не просто ещё один инструмент, а новый стандарт управления табличными данными в объектных...
Aноним
Тема
apache flink и dremio
apache iceberg
apachespark
алекс мерсед
архитектура apache iceberg
джейсон хьюз
как использовать iceberg
томер ширан
Apache Spark и Scala для дата инжиниринга 2.0
Подготовка витрин данных.
Создание real-time приложений. Scala API
Король мира больших данных
Apache Spark стал стандартом для распределенной обработки больших данных
Apache Spark — самый популярный инструмент мира Big Data. Он позволяет...