Arquitetura e implementação de Elasticsearch para base de dados de grande escala
hoje às 15:06Descrição do Projeto:
Contexto do projeto
Atualmente possuímos uma base de dados já populada, onde uma das tabelas ultrapassa 4 TB de informações. Essa base alimenta consultas analíticas e dashboards que vêm apresentando limitações de performance e escalabilidade.
O objetivo é implementar o Elasticsearch como camada de indexação e análise, garantindo maior eficiência nas consultas, escalabilidade futura e melhor experiência nos dashboards.
Escopo esperado
O profissional será responsável por:
• Analisar a base de dados atual e compreender o padrão de uso das informações
• Planejar e definir a arquitetura ideal do Elasticsearch, considerando:
• Estrutura de índices
• Estratégia de shards e réplicas
• Escalabilidade horizontal
• Crescimento futuro da base
• Definir e implementar o pipeline de ingestão de dados (ETL/ELT), garantindo:
• Consistência
• Performance
• Baixo impacto no banco transacional
• Implementar o cluster Elasticsearch (cloud ou on-prem, a definir)
• Ajustar e otimizar dashboards e gráficos que consomem os dados indexados
• Propor boas práticas de monitoramento, manutenção e governança da solução
Perfil desejado
• Experiência comprovada com Elasticsearch em ambientes de grande volume
• Forte conhecimento em arquitetura de dados e sistemas escaláveis
• Vivência com bases de dados grandes (TBs)
• Experiência com pipelines de ingestão (Logstash, Beats, Kafka, etc.)
• Capacidade de planejamento técnico, não apenas execução
• Perfil analítico e crítico, capaz de propor melhorias e evitar soluções frágeis
Modelo de trabalho
Projeto pontual.
Escopo técnico aberto a sugestões (espera-se visão consultiva).
Comunicação clara e documentação das decisões técnicas.
Habilidades desejadas:
Atividades do cliente nesse projeto:
Última visualização: hoje às 17:17
Tem dúvidas? Faça uma pergunta.
ou
Informações adicionais
| Categoria: | Web, Mobile & Software |
|---|---|
| Subcategoria: | Banco de Dados |
| Orçamento: | Aberto |
| Nível de experiência: | Especialista |
| Visibilidade: | Público |
| Propostas: | 2 |
| Interessados: | 2 |
| Tempo restante: | |
| Valor Mínimo: | R$ 50,00 |
Apoio para conclusão de projetos em Power BI - Boa tarde, Estou em busca de apoio especializado em Power BI para apoiar no desenvolvimento e na conclusão de três projetos. Preciso de suporte tanto na finalização quan...
Aplicativo/planilha de gestão financeira com previsão de caixa - Olá, Preciso de um profissional que saiba criar um aplicativo, de preferência, ou uma planilha completa de gestão financeira. Não quero apenas um registro de entradas e ...
Dashboard Power BI para qualidade no atendimento ao cliente - Preciso de um dashboard interativo em Power BI para apresentação de resultados e análise dos dados, que serão alimentados diariamente com informações de qu...
BI para Omie - gestão financeira - Preciso que seja desenvolvido um BI automático padrão para o Omie de um cliente. Prazo: 1 dia. Omie é de código aberto e várias empresas já oferecem solu...
Criar relatório integrado a dashboard de vendas - Quero que seja criado um relatório que eu possa alimentar com minhas vendas de forma simples e que se conecte a um dashboard integrado para visualização dos dados. O objetivo &...
