ClickHouse: MergeTree veloz em consultas analíticas

Verified Engineer in Engineering

01 de maio de 2024
Avaliação via trustradius
Verificada

Avaliação Original

Uso o ClickHouse como nosso data warehouse principal e a razão é objetiva: as consultas analíticas respondem muito mais rápido do que outras soluções que já testamos. O motor MergeTree faz inserções em massa com desempenho impressionante e sustenta aquele tempo de resposta que permite decidir com dado ao vivo. Abaixo conto como isso funciona no dia a dia, o que a compressão muda na conta e onde a versão Cloud ainda precisa evoluir.

A velocidade de leitura não nasce só do hardware. O MergeTree entrega inserções em massa com desempenho alto, e o jeito como o motor usa as chaves primárias para ordenar os dados e descartar grânulos que não interessam à consulta é o que explica, na prática, a velocidade absurda das consultas analíticas. Percebi isso quando passei a rodar agregações grandes em cima de tabelas volumosas e o retorno continuava rápido, mesmo com pouca capacidade de computação alocada.

A compressão também pesa nessa conta. Como o ClickHouse é escrito em C++, tenho tipos de dado muito granulares, incluindo enum e LowCardinality, que ficam armazenados como valores inteiros e economizam bastante armazenamento. Menos dado lido do disco significa resposta mais rápida e menos custo de infraestrutura. Somei isso às funções nativas, que vão além do que o padrão ANSI exige, e o resultado é um ambiente em que o analista resolve a maior parte das perguntas sem sair do SQL, sem depender de camada extra para cálculos simples do dia a dia.

Antes, cada área tinha sua fonte e cada pergunta exigia uma extração diferente. Com o ClickHouse, consolidamos fontes diversas em um repositório central e unificado, e tanto as soluções de BI quanto os produtos de dados feitos internamente passaram a ler do mesmo lugar. Isso encurtou o caminho entre a pergunta e a resposta e fez diferença direta em fases de MVP, quando a reação rápida a um insight vale mais do que qualquer painel bonito. O ganho maior aparece justamente aí: o time reage a dado ao vivo sem esperar a próxima carga.

Há um detalhe de arquitetura que ajudou muito: os motores de tabela especiais permitem ler dados diretamente de outras origens, como o S3, sem precisar copiar tudo antes. Para nós, isso simplificou a camada de ingestão e eliminou etapa manual. A versão gerenciada na nuvem também liberou um time que antes cuidava da operação on-premise, o que na prática devolveu gente para trabalho de dados em vez de manutenção de servidor.

Quando comparo com Snowflake, Databricks Lakehouse Platform e PostgreSQL, o ClickHouse sai na frente especialmente em custo. A combinação de compressão e indexação é eficiente o suficiente para fazer análises grandes mesmo com pouca capacidade de computação, algo que senti na fatura e não só no cronômetro da consulta.

Nem tudo está resolvido. O SQL Console, que é a forma de rodar consultas pela interface web, ainda deixa a desejar em recursos: sinto falta de ver o plano de execução visualmente e de ter mais informação sobre a consulta que está rodando naquele momento. Quando uma query demora, esse diagnóstico faria diferença para entender se o problema está no dado, na modelagem ou na própria consulta.

A gestão de papéis na versão Cloud também poderia ser mais flexível. Hoje basicamente existem admin e developer, e o developer já vem com leitura liberada sobre tudo por padrão. Eu preferiria o contrário: ter um papel parecido com o de guest e conceder acesso manualmente a quem precisa, em vez de começar com acesso amplo e depois restringir caso a caso.

Falta ainda compatibilidade de SSO com alguns provedores de identidade, como o Okta, principalmente para usuários que são apenas de banco de dados. Em ambientes com muitos analistas, isso vira trabalho manual recorrente e um ponto de atrito com o time de segurança.

Minha recomendação é direta: se o cenário é responder perguntas analíticas sobre volume grande de dados, o ClickHouse é a escolha certa e a velocidade do MergeTree justifica a decisão sozinha. O que não dá é usá-lo como banco transacional, porque nem os motores de tabela foram desenhados para isso. Para nós, que vivemos de insight em tempo real, o ganho em desempenho e custo superou com folga as arestas do console e da gestão de acessos na nuvem.

Ver avaliação completa no trustradius
Voltar para todas as avaliações

Avaliando o Click House?

Obtenha uma cotação personalizada de Click House baseada nas suas necessidades.

Falar no WhatsApp

Simular Economia

Calcule sua economia potencial ao migrar para Click House.

Simular Economia
Click House
Click House

por Click House

Click House é um banco de dados analítico colunar (OLAP) de alta velocidade para análise em tempo real, observabilidade e cargas de dados e IA em escala corporativa.

SoftwareAnalytics
Página do Produto