Data Engineer

🕒 Setembro 18

🇺🇸 Estados Unidos – Remoto (EUA)

⏰ Tempo Integral

🟡 Pleno

🟠 Sênior

🚰 Engenheiro de Dados

👻 Score fantasma 10%

O que significa: quão provável esta vaga está aberta sem contratação ativa.Como ler: 60% ou mais significa que achamos que é uma vaga fantasma. Pontuações mais baixas preocupam menos.Como pontuamos: tempo em aberto, republicações, vagas abertas vs tamanho do time, rapidez para fechar vagas, e se o salário está divulgado.Observação: é uma estimativa de dados públicos, não um julgamento da empresa. Vagas reais podem ter pontuação alta, então use como uma dica, não como um fato.

Candidatar-se

Encontrar Vagas Remotas Similares

Configurar Alerta de Email para Novas Vagas

📊 Verifique sua pontuação de currículo para esta vaga

Melhore suas chances de conseguir uma entrevista verificando sua pontuação de currículo antes de se candidatar.

Enviar Currículo

Illumination Works

SiteLinkedInTodas as Vagas

51 - 200 funcionários

Fundada em 2006

💼 Consultoria

📦 Logística

📣 Marketing

Consulting • Logistics • Marketing

A Illumination Works é uma empresa focada em transformação digital e inovação em dados, especializada em solucionar desafios complexos de dados e fornecer insights acionáveis para uma melhor tomada de decisões. A empresa se destaca em engenharia de dados, ciência de dados e engenharia de software e nuvem, oferecendo uma gama de soluções que inclui aprendizado de máquina, processamento de linguagem natural, visualização de dados e analytics preditivo. Ao priorizar o design centrado no usuário e a inovação, a Illumination Works ajuda as organizações a aproveitarem o poder de seus dados para impulsionar a eficiência e desbloquear novas oportunidades de negócio.

Descrição

• Develop, maintain, and enhance data pipelines using Python, SQL, and Databricks • Develop and maintain Databricks notebooks supporting data ingestion, transformation, and delivery • Design and maintain data tables, schemas, and Delta Lake structures for analytics and data science requirements • Work closely with data scientists to understand data requirements and modify pipelines, tables, and data structures as needs evolve • Develop complex SQL queries using joins, aggregations, window functions, and other advanced techniques • Integrate and transform data from multiple structured and semi-structured data sources • Support data quality through validation, troubleshooting, and resolution of data issues • Optimize data pipelines, SQL queries, and data structures for performance • Document data sources, transformations, data flows, schemas, and pipeline configurations • Collaborate with data scientists, engineers, analysts, and business stakeholders to deliver data solutions supporting mission requirements

🎯 Requisitos

• 4+ years of experience as a Data Engineer or in a similar data-focused role • Advanced SQL skills, including complex joins, aggregations, window functions, and transformations • Proficiency with Python for data engineering and transformation • Hands-on experience with Databricks, including development and maintenance of notebooks and data pipelines • Experience developing and maintaining ETL/ELT pipelines and data integration workflows • Experience with Delta Lake • Experience with database design, data modeling, schema development, and data-centric documentation • Experience integrating and transforming data from multiple data source types • Experience troubleshooting data issues and optimizing queries and pipelines • Strong analytical and problem-solving skills • Excellent verbal and written communication skills and ability to collaborate effectively with technical and business stakeholders • Bachelor's degree in Computer Science, Mathematics, Data Science, Engineering, or a comparable academic discipline • Must hold an active Secret clearance with eligibility for Top Secret • U.S. Citizenship required • Must successfully pass required background screening and drug testing • Preferred: Experience supporting data scientists and advanced analytics or machine learning use cases • Preferred: Functional knowledge of Department of Defense, War, or U.S. Air Force data sources and systems • Preferred: Experience working with logistics, supply chain, maintenance, or other operational data • Preferred: CompTIA Security+ certification • Preferred: Top Secret clearance

🏖️ Benefícios

• Market-competitive salary • Generous PTO package • Comprehensive medical insurance • Dental insurance • Vision insurance • Life insurance • 401K • Short-term disability insurance • Long-term disability insurance • Fun and engaging culture • Training opportunities to keep you up to speed on the latest technologies