
Este projeto consolidou a maior malha privada de processamento de dados estruturados e textuais da Era Logic. Utilizando o motor FireDB escrito em Rust com indexação Tantivy BM25, unificamos 19,57 milhões de registros ativos no nó Master com 56,08 milhões de registros distribuídos nos nós regionais.
A arquitetura foi desenhada para responder consultas complexas em menos de 1 milissegundo no índice primário e menos de 50 milissegundos em buscas textuais completas, mantendo alta disponibilidade 24/7.
Engenharia de Dados em Escala Continental
Pipeline de ingestão, desduplicação criptográfica e indexação em tempo real distribuído em 12 servidores bare-metal.
- Latência medida em produção de 0.42 ms nas operações de leitura via API REST nativa.
- Zero perda de dados com verificação de integridade por hash e replicação contínua.
Indexação Full-Text BM25 Instantânea
Compatibilidade MySQL Wire Protocol + REST
Escalabilidade Horizontal em 12 Nós Globais
Desafio Técnico & Solução Proprietária
O Desafio
Indexar e consultar mais de 75,6 milhões de processos e documentos complexos sem os custos proibitivos e a lentidão de bancos tradicionais.
A Solução Era Logic
Desenvolvimento do motor proprietário FireDB em Rust com armazenamento híbrido e motor de busca Tantivy embarcado.