Engenheiro(a) Sênior de Produtos de Dados

Vaga não está no LinkedIn

🔥 27 minutos atrás

💃 América Latina – Remoto

⏰ Tempo Integral

🟠 Sênior

🧑‍💻 Engenheiro Full-stack

👻 Score fantasma 10%

O que significa: quão provável esta vaga está aberta sem contratação ativa.Como ler: 60% ou mais significa que achamos que é uma vaga fantasma. Pontuações mais baixas preocupam menos.Como pontuamos: tempo em aberto, republicações, vagas abertas vs tamanho do time, rapidez para fechar vagas, e se o salário está divulgado.Observação: é uma estimativa de dados públicos, não um julgamento da empresa. Vagas reais podem ter pontuação alta, então use como uma dica, não como um fato.

Candidatar-se

Encontrar Vagas Remotas Similares

Configurar Alerta de Email para Novas Vagas

📊 Verifique sua pontuação de currículo para esta vaga

Melhore suas chances de conseguir uma entrevista verificando sua pontuação de currículo antes de se candidatar.

Enviar Currículo

NaNLABS

SiteLinkedInTodas as Vagas

51 - 200 funcionários

Fundada em 2013

🚘 Automotivo

💼 Consultoria

🔒 Cibersegurança

Automotive • Consulting • Cybersecurity

A NaNLABS é uma empresa de serviços de engenharia de dados em nuvem e IA B2B que desenvolve pipelines de dados escaláveis, seguros, e em tempo real, arquiteturas de dados e soluções de aprendizado de máquina para empresas que vão desde startups em rápido crescimento até grandes corporações. Eles são especializados em engenharia de dados nativos de nuvem, streaming em tempo real, observabilidade e IA/ML (incluindo engenharia de prompt e RAG), e frequentemente trabalham com clientes nas áreas de veículos elétricos e automotivos, SaaS e cibersegurança. A NaNLABS integra-se estreitamente com as equipes dos clientes para proporcionar propriedade, resolução proativa de problemas e soluções prontas para produção, orientadas por impacto.

Descrição

• Projetar a arquitetura e escalar sistemas distribuídos de web scraping para milhares de fontes na internet • Desenvolver estratégias para lidar com Cloudflare, CAPTCHAs, limitação de taxa, bloqueio de IPs, fingerprinting de navegadores e outros mecanismos anti-scraping • Utilizar pools de proxies, navegadores headless e técnicas adaptativas de crawling para realizar coleta de dados confiável em larga escala • Processar e extrair dados de HTML e JSON • Refatorar e preparar para produção pipelines de coleta de dados em Python • Aprimorar a confiabilidade, a observabilidade, o tratamento de erros, as tentativas automáticas e os alertas • Criar workflows de ingestão agendáveis e conteinerizados usando Airflow ou ferramentas equivalentes • Projetar schemas, views, particionamento e padrões de acesso a dados no PostgreSQL • Trabalhar com serviços da AWS, incluindo S3, EKS, IAM/IRSA, Parameter Store e ECR • Criar e manter a camada de acesso a dados usando GraphQL e Hasura • Colaborar com as equipes de Data Science e SaaS para integrar componentes de ML e definir contratos de API confiáveis • Assumir a responsabilidade pelo produto de dados de ponta a ponta, contribuir para code reviews e promover melhorias técnicas

🎯 Requisitos

• Forte experiência prática com web scraping avançado em larga escala • Experiência em superar mecanismos anti-scraping e de proteção contra bots, incluindo rotação de proxies, navegadores headless, limitação de taxa, bloqueio de IPs, fingerprinting ou desafios semelhantes • Forte experiência com ferramentas de web scraping e parsing de DOM, como Scrapy, Playwright, Selenium, Puppeteer, BeautifulSoup, lxml, XPath ou seletores CSS • Sólida experiência profissional com Python e processamento de dados • Experiência prática com AWS, especialmente S3 e boto3; experiência com EKS, IAM/IRSA, Parameter Store ou ECR será altamente valorizada • Experiência na criação de pipelines de dados confiáveis usando Airflow ou um orquestrador equivalente • Sólidos conhecimentos de PostgreSQL e dos fundamentos de bancos de dados relacionais • Capacidade de assumir a responsabilidade de ponta a ponta por soluções técnicas e trabalhar de forma autônoma • Experiência em contribuir para code reviews e manter altos padrões de engenharia de software • Experiência com GraphQL, Hasura, Redis, Elasticsearch, Docker ou Kubernetes será um diferencial • Experiência com dados de cybersecurity, pipelines de NLP/ML ou ambientes de dados como produto será um diferencial • Inglês nível B2 ou superior, com capacidade de se comunicar efetivamente com equipes técnicas e multidisciplinares

🏖️ Benefícios

• Férias totalmente flexíveis e autogerenciadas • Licença médica e dias para assuntos pessoais • Feriados • Licença-paternidade e licença-maternidade • Licença para estudos • Dias para mudança • Treinamentos sobre boas práticas e tecnologia • Livros e palestras rápidas • Aulas de inglês internas • Feedback contínuo • Sessões individuais de desenvolvimento de carreira • Horário de trabalho flexível • Equipamentos e materiais de trabalho fornecidos • Eventos internos e atividades de integração da equipe • Folga no dia do aniversário • Vagas 100% remotas em toda a América Latina • Modelo de contratação como prestador(a) de serviços, com pagamento em USD