ClickHouse: MergeTree veloz em consultas analíticas

Verified Engineer in Engineering

01 de mayo de 2024
Reseña vía trustradius
Verificada

Reseña Original

Uso o ClickHouse como nosso data warehouse principal e a razão é objetiva: as consultas analíticas respondem muito mais rápido do que outras soluções que já testamos. O motor MergeTree faz inserções em massa com desempenho impressionante e sustenta aquele tempo de resposta que permite decidir com dado ao vivo. Abaixo conto como isso funciona no dia a dia, o que a compressão muda na conta e onde a versão Cloud ainda precisa evoluir.

A velocidade de leitura não nasce só do hardware. O MergeTree entrega inserções em massa com desempenho alto, e o jeito como o motor usa as chaves primárias para ordenar os dados e descartar grânulos que não interessam à consulta é o que explica, na prática, a velocidade absurda das consultas analíticas. Percebi isso quando passei a rodar agregações grandes em cima de tabelas volumosas e o retorno continuava rápido, mesmo com pouca capacidade de computação alocada.

A compressão também pesa nessa conta. Como o ClickHouse é escrito em C++, tenho tipos de dado muito granulares, incluindo enum e LowCardinality, que ficam armazenados como valores inteiros e economizam bastante armazenamento. Menos dado lido do disco significa resposta mais rápida e menos custo de infraestrutura. Somei isso às funções nativas, que vão além do que o padrão ANSI exige, e o resultado é um ambiente em que o analista resolve a maior parte das perguntas sem sair do SQL, sem depender de camada extra para cálculos simples do dia a dia.

Antes, cada área tinha sua fonte e cada pergunta exigia uma extração diferente. Com o ClickHouse, consolidamos fontes diversas em um repositório central e unificado, e tanto as soluções de BI quanto os produtos de dados feitos internamente passaram a ler do mesmo lugar. Isso encurtou o caminho entre a pergunta e a resposta e fez diferença direta em fases de MVP, quando a reação rápida a um insight vale mais do que qualquer painel bonito. O ganho maior aparece justamente aí: o time reage a dado ao vivo sem esperar a próxima carga.

Há um detalhe de arquitetura que ajudou muito: os motores de tabela especiais permitem ler dados diretamente de outras origens, como o S3, sem precisar copiar tudo antes. Para nós, isso simplificou a camada de ingestão e eliminou etapa manual. A versão gerenciada na nuvem também liberou um time que antes cuidava da operação on-premise, o que na prática devolveu gente para trabalho de dados em vez de manutenção de servidor.

Quando comparo com Snowflake, Databricks Lakehouse Platform e PostgreSQL, o ClickHouse sai na frente especialmente em custo. A combinação de compressão e indexação é eficiente o suficiente para fazer análises grandes mesmo com pouca capacidade de computação, algo que senti na fatura e não só no cronômetro da consulta.

Nem tudo está resolvido. O SQL Console, que é a forma de rodar consultas pela interface web, ainda deixa a desejar em recursos: sinto falta de ver o plano de execução visualmente e de ter mais informação sobre a consulta que está rodando naquele momento. Quando uma query demora, esse diagnóstico faria diferença para entender se o problema está no dado, na modelagem ou na própria consulta.

A gestão de papéis na versão Cloud também poderia ser mais flexível. Hoje basicamente existem admin e developer, e o developer já vem com leitura liberada sobre tudo por padrão. Eu preferiria o contrário: ter um papel parecido com o de guest e conceder acesso manualmente a quem precisa, em vez de começar com acesso amplo e depois restringir caso a caso.

Falta ainda compatibilidade de SSO com alguns provedores de identidade, como o Okta, principalmente para usuários que são apenas de banco de dados. Em ambientes com muitos analistas, isso vira trabalho manual recorrente e um ponto de atrito com o time de segurança.

Minha recomendação é direta: se o cenário é responder perguntas analíticas sobre volume grande de dados, o ClickHouse é a escolha certa e a velocidade do MergeTree justifica a decisão sozinha. O que não dá é usá-lo como banco transacional, porque nem os motores de tabela foram desenhados para isso. Para nós, que vivemos de insight em tempo real, o ganho em desempenho e custo superou com folga as arestas do console e da gestão de acessos na nuvem.

Ver reseña completa en trustradius
Volver a todas las reseñas

¿Evaluando Click House?

Obtén una cotización personalizada de Click House según tus necesidades.

Hablar por WhatsApp

Simular Ahorros

Calcula tu ahorro potencial al cambiar a Click House.

Simular Ahorros
Click House
Click House

por Click House

Click House é um banco de dados analítico colunar (OLAP) de alta velocidade para análise em tempo real, observabilidade e cargas de dados e IA em escala corporativa.

SoftwareAnalytics
Página del Producto