José L.

Projetos (Aguardando Propostas):

• Migração MySQL para Snowflake e implementação com Cortex

  Criação & Integração com IA | Orçamento: Aberto | Publicado: | Propostas: 21

  Olá, procuro um engenheiro de dados com experiência sólida e comprovada em Snowflake para atuar em um projeto de modernização de arquitetura (Data Lakehouse).
  
  O objetivo principal é realizar a ingestão de dados de um banco MySQL (transacional) para o Snowflake e, na sequência, implementar camadas de inteligência utilizando o Snowflake Cortex para processamento de linguagem natural e análise preditiva.
  
  Escopo do trabalho:
  - Ingestão de dados: configurar o pipeline de extração do MySQL para o Snowflake (via Python, stages ou ferramentas de ETL/ELT).
  
  - Arquitetura: estruturar as camadas de dados dentro do Snowflake (Raw/Bronze, Trusted/Silver, Refined/Gold).
  
  - Implementação Cortex: criar funções utilizando Snowflake Cortex (LLM functions) para análise de sentimentos, tradução ou extração de entidades em dados não estruturados de frete e logística.
  
  - Otimização: garantir a performance de queries e a gestão eficiente de custos dos warehouses.
  
  Requisitos obrigatórios:
  - Experiência comprovada com Snowflake (envio de portfólio ou descrição de projetos anteriores é essencial).
  - Domínio de SQL avançado e Python para engenharia de dados.
  - Conhecimento prático em Snowflake Cortex (uso de funções de IA integradas).
  - Experiência com conectores MySQL e pipelines de carga (COPY INTO, Snowpipe ou similares).
  
  Diferenciais:
  - Certificação Snowflake (SnowPro Core).
  - Conhecimento em logística ou setor de transportes (fretes).
  - Experiência com AWS (S3 como área de staging).
  
  Sobre o projeto:
  Este é o primeiro de uma série de 100 ativos que pretendo desenvolver. Busco um parceiro de longo prazo que tenha visão de negócio e preze por uma arquitetura escalável e limpa.