Implementação de Datalake para Logs de Ti com Elasticsearch e Kibana

Estamos buscando um profissional ou equipe para projetar e implementar um Datalake robusto para centralizar e gerenciar logs de TI. O objetivo principal é consolidar dados de logs de diversas fontes em um ambiente escalável e eficiente, utilizando Elasticsearch como motor de busca e armazenamento principal. O projeto envolve a configuração completa do ambiente, incluindo a ingestão de dados (preferencialmente com Logstash ou ferramentas similares), otimização para consultas rápidas e a criação de dashboards e visualizações no Kibana para monitoramento e análise. Espera-se que o freelancer tenha experiência comprovada em arquitetura de soluções de Big Data, administração de sistemas Linux, e profundo conhecimento em Elasticsearch, Logstash e Kibana (ELK Stack). A solução deve ser performática, segura e de fácil manutenção. O escopo inclui: Análise e design da arquitetura do Datalake. Configuração e otimização de clusters Elasticsearch. Implementação de pipelines de ingestão de logs de diversas fontes. Criação de índices e mapeamentos eficientes. Desenvolvimento de dashboards e visualizações no Kibana. Documentação da arquitetura e procedimentos de operação. Testes de performance e segurança.