[Karpov.courses] ClickHouse: эффективная работа с большими данными [Сергей Евсюков]

cybwasp · Четверг в 02:15

Решайте аналитические задачи по работе с данными быстрее и эффективнее

Главная задача курса — углубить свои знания ClickHouse и научиться строить системы, способные справляться с любыми объёмами данных.

ClickHouse — мощный инструмент для работы с большими данными, выходящий далеко за рамки базового SQL.
Полученные навыки помогут вам не только решать задачи быстрее, но и стать экспертом в одном из самых востребованных инструментов на рынке данных

Содержание курса:

Введение в Сlickouse

Понятия OLAP/OLTP
Колоночные/строковые СУБД
Кратко про архитектуру СУБД
Преимущества и недостатки OLAP СУБД

Операторы и синтаксис запросов

Data Definition Language
DML (Data Manipulation Language)
JOIN типы и особенности
Обновление и удаление данных, особенности
Оконные функции

Объекты архитектуры

Таблицы
Представления
Математические представления
Обновляемые математические представления
Словари

Типы данных и функции

Логические, цифровые, строковые типы данных
Дата и время
Объектные типы (массивы, Json)
Функции для работы с данными
Типы ввода и вывода

Табличные движки

MergeTree Family
Log Family
Special
Integrations

Масштабирование и распределение

Партиционирование
Шардирование и репликация
Настройка шардирования при вставке
Партиционирование при записи

Обновление и мутация данных

Мутации обновления данных
Легкое обновление
Обновление в ReplacingMergeTree
Обновление замещением партиций
TTL и жизненный цикл данных в объектах

Оптимизация запросов

Оптимизация производительности
Эффективное партиционирование
Введение в первичные индексы
Избегание NULL

Оптимизация архитектуры

Анализ нагрузки запросов
CTE и подзапросы
Параллельные вычисления
Оптимизация расположения данных

Оптимизация данных

Критичный объем данных
Асинхронная вставка
Компрессия и архивация холодных данных
Избегание мутаций
Принудительная финализация мутаций