Agregação de indicadores com ClickHouse em menos de 1 segundo

Verified Engineer in Information Technology

02 de agosto de 2021
Avaliação via trustradius
Verificada

Avaliação Original

Uso o ClickHouse para agregação de indicadores em volume alto, o tipo de consulta que o banco tradicional não entrega nem com hardware caro. Na prática, relatórios que levavam mais de 2 minutos passaram a responder em menos de 1 segundo, e a análise em tempo real deixou de ser impossível. A chave foi entender que ele é um banco analítico, feito para agregar uma coluna específica sobre grandes volumes, e não para as consultas tradicionais com múltiplas agregações em várias colunas.

A diferença aparece na modelagem. Antes, os indicadores que exigiam agregação ficavam armazenados na mesma tabela tradicional que guardava todo o resto, e qualquer consulta analítica obrigava o banco a varrer dados que não interessavam. O ClickHouse entra justamente para separar esse trabalho: a agregação roda sobre uma coluna específica dentro de um volume grande, e é aí que ele se destaca. Configurei a replicação de dados sem grande esforço, o que ajudou a manter a análise disponível, e aproveitei os múltiplos engines para adaptar cada caso de uso ao formato de armazenamento que fazia sentido. O ganho não veio de hardware mais avançado, veio de usar a ferramenta certa para a tarefa certa. Com isso, foi possível analisar casos de uso em tempo real, algo que antes era inviável, e os relatórios deixaram de ser um gargalo no meio do dia. A performance alta aqui não é um número bonito de benchmark, é a diferença entre esperar e decidir.

O ClickHouse não entrou como substituto de nada, entrou como a peça que faltava. O sistema de análise já tinha Apache Kafka, MariaDB Platform, Oracle Java SE e MongoDB, e o ClickHouse foi o parceiro escolhido para completar a camada de análise, justamente pelas características que os outros não ofereciam naquele contexto. A comparação com esses componentes nunca foi de concorrência, foi de encaixe: o Kafka traz o fluxo de eventos, o MongoDB e o MariaDB guardam o que precisa ser guardado, e o ClickHouse responde às agregações pesadas que ninguém ali conseguia entregar com conforto. O resultado apareceu nas aplicações, que ficaram mais completas, e nas decisões dos usuários, que passaram a se apoiar em indicadores atualizados em vez de extratos atrasados. Ser open source também pesou na escolha, porque permitiu avaliar o comportamento real antes de ampliar o uso.

A parte que exige atenção é não extrapolar o escopo. Existe uma tentação de achar que, se o ClickHouse é rápido em um caso, ele será rápido em qualquer outro, e isso quase sempre leva a uma modelagem errada. Ele é um banco analítico, então a informação precisa estar armazenada corretamente, os volumes precisam ser realmente grandes e as consultas precisam ser de agregação. Se o cenário é aquele conjunto de consultas tradicionais sobre várias colunas com múltiplas agregações, o ClickHouse não é a solução. Nos pontos técnicos, senti dificuldade na manipulação de dados em Avro, e a consistência com o Kafka exigiu cuidado extra para não gerar leitura desencontrada. Também apareceram erros em operações DDL por causa da configuração de réplica, o que me obrigou a revisar a forma como a replicação estava montada antes de seguir em frente.

Depois de rodar esse desenho por tempo suficiente para ver os indicadores mudarem de patamar, minha leitura segue positiva. O ClickHouse entrega performance alta, é open source, oferece múltiplos engines e a configuração de replicação é simples, desde que o caso de uso seja realmente analítico. Os incômodos com Avro, com a consistência do Kafka e com DDL em réplica existem, mas são pontuais e endereçáveis quando a configuração é revisada com calma. Para quem precisa agregar indicadores em volume alto e não quer depender de hardware mais caro, é a peça que fechou o sistema.

Ver avaliação completa no trustradius
Voltar para todas as avaliações

Avaliando o Click House?

Obtenha uma cotação personalizada de Click House baseada nas suas necessidades.

Falar no WhatsApp

Simular Economia

Calcule sua economia potencial ao migrar para Click House.

Simular Economia
Click House
Click House

por Click House

Click House é um banco de dados analítico colunar (OLAP) de alta velocidade para análise em tempo real, observabilidade e cargas de dados e IA em escala corporativa.

SoftwareAnalytics
Página do Produto