Инструменты обслуживания и разработки для Yandex ClickHouse, а также другие интересности
Репозиторий содержит полезные скрипты для анализа, разработки и обслуживания баз данных на Yandex ClickHouse.
Материалы по другим темам Вы можете найти на сайте ypermitin.github.io. Последние новости об этой и других разработках, а также выходе других материалов, смотрите в Telegram-канале.
№ | Раздел | Описание |
---|---|---|
1 | Common-Info | Cкрипты общего назначения для просмотра состояния и настроек инстанса и др |
2 | Data-Model-Info | Просмотр модели данных и других связанных объектов |
3 | Databases-Info | Информация о базах данных |
4 | Statistics | Информация о статистиках, вопросах производительности и их анализе |
5 | Indexes | Информация об индексах, вопросах производительности и их анализе |
6 | File-Groups | Информация о файловых группах |
7 | Partitioned-Tables-and-Indexes | Секционирование таблиц и индексов |
8 | Perfomance | Производительность и оптимизация запросов, настроек сервера и поиск узких мест |
9 | Backup-Info | Резервное копирование и восстановление данных |
10 | Maintenance | Обслуживание баз данных и сервера |
11 | Diagnostics | Диагностика работы СУБД |
12 | Data Import & Export | Все, что связано с импортом и экспортом данных |
13 | Replication | Репликация и боль :) |
14 | Security | Безопасность и права доступа |
На GitHub есть интересные проекты, связанные с ClickHouse. Некоторые из них заслуживают поддержки сообщества.
- ClickHouse - непосредственно проект самой СУБД ClickHouse от Yandex.
- clickhouse-backup - инструменты для простой организации бэкапирования баз данных ClickHouse.
- ClickHouse.Client - лучший клиент для ClickHouse на базе платформы .NET.
- ClickHouseMigrator - мощная разработка для быстрой миграции данных в ClickHouse из различных источников.
- Monq.Core.ClickHouseBuffer - .NET-библиотека для буферизации записей с последующей пакетной вставкой данных.
- YY.DBTools - утилиты для различных СУБД, в т.ч. экспорта файлов расширенных событий (Extended Events) в базу данных ClickHouse.
- YY.EventLogExportAssistant - библиотека для экспорта данных журнала регистрации платформы 1С:Предприятие 8.x.
- YY.TechJournalExportAssistant - библиотека для экспорта данных технологического журнала платформы 1С:Предприятие 8.x.
- OneSTools.EventLog - альтернативная реализация экспорта журнала регистрации платформы 1С в базу ClickHouse. Также есть разработка для технологического журнала.
Конечно, это далеко не полный список, т.к. проектов уже очень много!
- Официальная документация - официальный источник информации о столбцовой СУБД.
- Блог компании Altinity - блог компания Altinity, сопровожденца и внедренца ClickHouse.
- Материалы по хранению логов в ClickHouse:
- TESTING CLICKHOUSE AS LOGS ANALYSIS STORAGE - пример хранения логов в ClickHouse и их доставки туда.
- Разрабатываем самый удобный в мире* интерфейс для просмотра логов - пример использования ClickHouse для хранения логов в связке с Graphana для визуализации.
- Как ClickHouse помогает собирать логи Nginx - еще один пример сбора и обработки логов в ClickHouse.
- Использование Clickhouse в качестве замены ELK, Big Query и TimescaleDB
- Переезжаем на ClickHouse: 3 года спустя
- Эффективное использование ClickHouse. Алексей Миловидов (Яндекс)
- Интересные решения для ClickHouse или на базе ClickHouse:
- ClickHouse - репозиторий самой СУБД. Отсюда все и начинается :)
- clickhouse-operator - полезное для создания, настройки и управления кластерами ClickHouse, работающими в Kubernetes.
- Clickhouse Exporter for Prometheus - инструмент для экспорта метрик ClickHouse для Prometheus.
- clickhouse-backup - инструменты для настройки резервного копирования баз ClickHouse.
- tabix - простое клиентское приложение для ClickHouse (визуализация, редактор запросов и кое-что еще).
- Vektor - мощный инструмент для отправки данных и операции с ними, в т.ч. и для ClickHouse.
- Что не так с ClickHouse: 10 главных недостатков - не все же идеально. Некотормые моменты уже не так актуальны, но почитать полезно.
Еще больше материалов можно найти на Habr.com.
Все содержимое репозитория предоставляется "AS-IS". Автор не несет ответственности за использование предоставленного материала.
ClickHouse - потрясающая СУБД для OLAP. Для других целей лучше использовать и другие инструменты:
Всему свое назначение.