[TS] ENGENHEIRO DE PIPELINES DE DADOS (MICROSOFT FABRIC)

Vaga não está no LinkedIn

🔥 10 minutos atrás

🇧🇷 Brasil – Remoto

⏰ Tempo Integral

🟡 Pleno

🟠 Sênior

🚰 Engenheiro de Dados

👻 Score fantasma 25%

O que significa: quão provável esta vaga está aberta sem contratação ativa.Como ler: 60% ou mais significa que achamos que é uma vaga fantasma. Pontuações mais baixas preocupam menos.Como pontuamos: tempo em aberto, republicações, vagas abertas vs tamanho do time, rapidez para fechar vagas, e se o salário está divulgado.Observação: é uma estimativa de dados públicos, não um julgamento da empresa. Vagas reais podem ter pontuação alta, então use como uma dica, não como um fato.

Candidatar-se

Encontrar Vagas Remotas Similares

Configurar Alerta de Email para Novas Vagas

📊 Verifique sua pontuação de currículo para esta vaga

Melhore suas chances de conseguir uma entrevista verificando sua pontuação de currículo antes de se candidatar.

Enviar Currículo

iblue

SiteLinkedInTodas as Vagas

51 - 200 funcionários

Fundada em 2016

💼 Consultoria

🏥 Saúde

🛡️ Seguros

Consulting • Healthcare • Insurance

A iblue é uma consultoria de TI brasileira que acelera a transformação digital para o setor financeiro, incluindo bancos, seguradoras e outros serviços financeiros. A empresa foca em Dados & IA como seu núcleo, oferecendo soluções personalizadas em Big Data & IA, nuvem & segurança, integração de processos e automação, além de squads ágeis & engenharia para melhorar a eficiência e o crescimento. A iblue se posiciona como um parceiro estratégico, oferecendo expertise tecnológica profunda e conhecimento de domínio para transformar desafios operacionais em resultados de negócios mensuráveis.

Descrição

• Configurar e testar a conexão com o SharePoint Online para o escopo delimitado do piloto • Desenvolver componentes de pipeline para ingestão de documentos e metadados selecionados na camada Bronze do OneLake • Implementar padrões de carga incremental, detecção de alterações, novas tentativas, registro de execução e tratamento de exceções • Desenvolver a lógica da camada Silver para limpeza, normalização, eliminação de duplicidades, tratamento de versões e resolução de conflitos • Implementar componentes da camada Gold para preparação de produtos de informação validados conforme as regras de negócio • Apoiar processos de extração de atributos, enriquecimento de informações e validação pelos responsáveis de negócio • Registrar a linhagem entre documentos de origem, execuções dos pipelines, registros transformados e resultados validados • Testar cenários de inclusão, atualização, versionamento, duplicidade, exclusão, exceção e alteração de documentos • Implementar painéis operacionais, alertas, históricos de execução, logs e diagnósticos de suporte • Colaborar com as equipes de SharePoint e arquitetura da informação para compreender estruturas de origem, metadados, permissões e comportamentos de alteração • Documentar restrições técnicas, comportamentos não suportados, soluções alternativas, desempenho e considerações para produção • Empacotar códigos, notebooks, configurações e definições de pipelines utilizando práticas aprovadas de versionamento e releases • Produzir testes, documentação técnica, instruções de implantação e runbooks operacionais • Construir e validar o fluxo de ingestão de documentos, metadados e dados selecionados do SharePoint Online para o OneLake • Atuar sob direcionamento da arquitetura de Fabric e dados, em colaboração com SharePoint, arquitetura da informação, IA e áreas de negócio

🎯 Requisitos

• Experiência prática com Microsoft Fabric, OneLake, lakehouses, notebooks e pipelines de dados • Conhecimento de transformações baseadas em Spark, PySpark ou SQL • Experiência em arquitetura e desenvolvimento de pipelines, cargas incrementais e detecção de alterações • Conhecimento de tratamento de esquemas, qualidade de dados, observabilidade, recuperação e tratamento de exceções • Experiência na integração de APIs REST, arquivos, metadados de documentos ou fontes de dados do Microsoft 365 • Proficiência em SQL e em pelo menos uma linguagem de engenharia de dados, como Python ou PySpark • Conhecimento de arquitetura medallion e organização de dados nas camadas Bronze, Silver e Gold • Experiência com controle de código-fonte, parametrização, configuração de ambientes, implantação e testes • Capacidade de desenvolver testes repetíveis para demonstrar o comportamento real da plataforma • Experiência na criação de documentação técnica, runbooks, procedimentos de implantação e materiais de suporte • Inglês intermediário a avançado (B2 ou superior), com capacidade de comunicação escrita e verbal em ambiente corporativo e técnico • Disponibilidade para atuação no fuso horário Eastern Standard Time (EST) • Pensamento analítico e capacidade de investigação técnica • Rigor na validação de dados, execução de testes e documentação de resultados • Capacidade de solucionar problemas e investigar falhas de integração ou processamento • Organização, atenção aos detalhes e disciplina de engenharia • Colaboração com arquitetos, desenvolvedores e profissionais de negócio • Comunicação clara sobre restrições, riscos, falhas e comportamentos da plataforma • Proatividade e orientação à automação e melhoria contínua • Comprometimento com qualidade, rastreabilidade, observabilidade e sustentabilidade

🏖️ Benefícios

• CLT employment option • Plano de Saúde SulAmerica para você (cobertura nacional, enfermaria e com coparticipação) • Plano de academia TotalPass • Notebook de última geração • Vale Transporte • Vale Refeição: R$ 770,00 (média 22 dias úteis/mês), with option to include values in VR or cartão Flash • Bônus por indicação de candidatos • Convênio Financeira Creditas • Avaliação de desempenho anual com PDI – Plano de Desenvolvimento Individual • Treinamentos na iblue Academy • Treinamento na Udemy • Certificações (AWS, Microsoft; IBM e H20) • Parcerias educacionais (com possibilidade de ajuda de custo atrelado a sua avaliação de desempenho) • Trilha de carreira estruturada Y (você pode escolher o caminho da gestão ou especialista) • Pacotes de benefícios oferecidos pela cooperativa que você poderá escolher de acordo com a sua necessidade • Descanso remunerado de 15 dias, após 12º. mês.