практикум

ClickHouse для дата-инженеров

ClickHouse — это не просто ещё одна база данных, а мощный инструмент для аналитики на терабайтах данных в реальном времени. Научись им владеть на практике в индустриальном курсе, разработанном экспертами Yandex Cloud.

темы, которые вы освоите

ClickHouse
Скорость как преимущество
Когда запрос к миллиардам строк выполняется за секунды — это меняет правила игры. ClickHouse — это конкурентное преимущество для продукта, где важна быстрая аналитика.
Экономика больших данных
Выжимает максимум производительности из железа. Эффективное сжатие и column-oriented хранение делают анализ терабайтов данных не только быстрым, но и относительно недорогим.
Мост между инженерией и аналитикой
Дата-инженер с глубоким знанием ClickHouse становится ключевым звеном между командами. Ты строишь не просто конвейер данных, а высокопроизводительную систему для принятия решений.
Вооружён для реальности
Это не учебная СУБД. На нём построены аналитические системы Яндекс, Cloudflare, VK. Знание ClickHouse — это прямой билет в высоконагруженные production-проекты.
Rebrain
— большое сообщество IT-специалистов, создаём
практикумы по инфраструктуре с 2018 года
Почему выбирают наши программы
  • Автоматические проверки — мгновенная обратная связь по заданиям
  • Проверки менторами — DevOps-инжерами с опытом в индустрии от 5+ лет
  • Возможность общаться с опытными практикующими специалистами
  • Свободный темп — проходите без жёстких дедлайнов
  • Прикладные задачи — кейсы, приближенные к реальной работе DevOps-инженера
phone

Кому подойдёт

Дата-инженеры

Вы строите пайплайны, но ваша аналитическая БД — узкое горлышко? Научитесь проектировать и поддерживать высокопроизводительное хранилище, которое не сломается под нагрузкой.

Backend-разработчики

Вам нужно хранить и анализировать горы логов, ивентов или метрик вашего сервиса? Забудьте о медленных вставках и запросах. ClickHouse станет вашим оружием для встроенной аналитики.

Аналитики / BI-разработчики

Вы устали ждать результата запросов по несколько минут? Поймите, как устроен ClickHouse, чтобы правильно структурировать данные и формулировать запросы, летающие на скорости света.

Как проходит
практикум

Команда Rebrain изучает, какие из компетенций требуются на разных уровнях профессий.

программа практикума

Онбординг

  • Входной тест
  • Введение

Основы ClickHouse

  • Кратко о модуле
  • Знакомство с ClickHouse
  • Установка, базовая настройка, управление сервером
  • Подключение и аутентификация
  • Создание таблиц
  • Управление пользователями и доступом
  • Чтение логов
  • Проверьте себя
  • Лабораторная работа № 1
  • Подводим итоги

Структура базы данных

  • Кратко о модуле
  • Основные движки таблиц
  • Лабораторная работа № 2
  • Специализированные движки таблиц
  • Лабораторная работа № 3
  • Типы данных
  • Агрегатные типы данных
  • Лабораторная работа № 4
  • Индексы: теория
  • Индексы: практика
  • Лабораторная работа № 5
  • ZooKeeper в кластерной инсталляции
  • Лабораторная работа № 6
  • Проверьте себя
  • Подводим итоги
  • Обратная связь

Проектирование структуры БД и SQL-запросы

  • Кратко о модуле
  • Изменение данных и структуры БД
  • Лабораторная работа № 7
  • Партицирование таблиц
  • Лабораторная работа № 8
  • Реплицируемые таблицы
  • Лабораторная работа № 9
  • Простые и материализованные представления
  • Лабораторная работа № 10

Проектирование структуры БД и SQL-запросы (Часть 2)

  • Проекции в ClickHouse
  • Лабораторная работа № 11
  • Distributed. Как изменять движки таблиц
  • Как изменять движки таблиц: продолжение
  • Explain
  • Join
  • Лабораторная работа № 12
  • Словари
  • Проверьте себя
  • Подводим итоги
  • Обратная связь

Потоки данных

  • Кратко о модуле
  • Интеграция с внешними источниками
  • Примеры data pipelines
  • Подводим итоги

Настройка и мониторинг

  • Кратко о модуле
  • Системные таблицы и основные метрики для мониторинга: часть 1
  • Системные таблицы и основные метрики для мониторинга: часть 2
  • Диагностика и анализ метрик для создания уведомлений о критических ситуациях
  • Настройка Yandex Cloud Monitoring
  • Управление нагрузкой: квоты и ограничения
  • Проверьте себя
  • Лабораторная работа № 13
  • Подводим итоги
  • Обратная связь

Резервное копирование и обновление кластера

  • Кратко о модуле
  • Обеспечение консистентности данных
  • Резервное копирование и восстановление
  • Техническое обслуживание и обновление кластера
  • Проверьте себя
  • Подводим итоги

Эффективное использование ClickHouse

  • Кратко о модуле
  • Подходы к оптимизации производительности
  • Проектирование
  • Проверьте себя
  • Подводим итоги

Итоги практикума

  • Финишная прямая
  • Итоговый тест
  • Итоги курса
Эксперт практикума
Никита Целищев
Никита Целищев
Консалтинг, ретейл, спикер практикумов Yandex Cloud
Архитектор Data Platform

Ключевые навыки для резюме:

Проектирование и создание высоконагруженных кластеров ClickHouse в Yandex Cloud Managed Service
Глубокое понимание и применение движков таблиц (MergeTree, Replicated, интеграционные) для решения различных задач
Оптимизация производительности через правильное партиционирование, шардирование и построение эффективных индексов (первичных, пропускающих)
Организация репликации данных и распределённых запросов с использованием ZooKeeper и синтаксиса ON CLUSTER
Построение отказоустойчивых Data Pipelines с интеграцией Kafka и PostgreSQL для потоковой и пакетной загрузки
Настройка мониторинга, алертинга и установка квот на основе системных таблиц и метрик ClickHouse
Выполнение резервного копирования, обновления кластера и оптимизации сложных SQL-запросов для достижения максимальной скорости
0
Остались вопросы?
Приходите на бесплатную консультацию с экспертом.

практикум

ClickHouse для дата-инженеров

В стоимость входит:

  • Выполнение задач на настоящей инфраструктуре
  • Сопровождение — менторы, координатор
  • Бессрочный доступ к теоретической части практикума
стоимость
55 000 руб.
Перейти к оплате >>>
0

Файлы куки

При использовании данного сайта, вы подтверждаете свое согласие на использование файлов cookie и других похожих технологий в соответствии с настоящим Уведомлением.

Курс ClickHouse для дата-инженеров | Аналитика больших данных в реальном времени | Rebrain | Rebrain