Evaluating bids

Ambiente Lakehouse Fabric.

Published on the October 03, 2025 in IT & Programming

About this project

Open

Estou estruturando um ambiente de lakehouse utilizando arquitetura medalhão, preciso de alguém com conhecimento em ETL usando pyspark para criar scripts em notebooks que transfira dados de tabelas da camada bronze para a camada silver de forma automatizada usando uma tabela de mapeamento para agendamentos dos pipelines e campos necessários para a carga incremental.

Project overview

Preciso de um profissional com experiência em engenharia de dados, com vivência em ambientes cloud e que já trabalhou com PySpark, Fabric e arquitetura medaçhão. Preciso de ajuda para automatizar cargas da camada Bronze para a camada SIlver utilizando notebooks PySpark. Profissional terá que criar um script que faça cargas baseadas em parâmetros de uma tabela de mapeamento de cargas, onde estarão as informações necessárias para as cargas de cada tabela. Caso o profissional prove ter muita experiência e mostre-se eficiente, também fecharei mais uma tarefa da etapa da camada Silver para a camada Gold, e também a revisão da ingestão dos dados na camada bronze.

Category IT & Programming
Subcategory Data Science
Project size Small
Is this a project or a position? Project
Required availability As needed

Delivery term: October 15, 2025

Other projects posted by Alan A. D. S.