Member of Engineering – Pre-training, Data Engineering

🕒 Janeiro 29

Candidatar-se

Encontrar Vagas Remotas Similares

Receber Emails de Vagas Remotas

📊 Verifique sua pontuação de currículo para esta vaga

Melhore suas chances de conseguir uma entrevista verificando sua pontuação de currículo antes de se candidatar.

Enviar Currículo

poolside

SiteLinkedInTodas as Vagas

51 - 200 funcionários

Fundada em 2023

🤖 Inteligência Artificial

🏢 Corporativo

Artificial Intelligence • Enterprise

Poolside é uma aceleradora projetada especificamente para fundadores e builders de Web3. Ela oferece suporte a projetos de finanças descentralizadas (DeFi), games, governança, infraestrutura e NFTs. Com um ecossistema robusto de 20. 000 membros — incluindo mentores, investidores e builders de Web3 — a Poolside co-lançou e apoiou mais de 110 projetos. A aceleradora proporciona acesso diferenciado a mentoria e expertise técnica para ajudar projetos Web3 a escalar e alcançar lançamentos bem-sucedidos. A Poolside também se engaja com empresas e protocolos líderes para impulsionar o crescimento e a inovação no espaço Web3.

Descrição

• Build and maintain high-performance pipelines for trillions of tokens. • Deliver diverse and high quality datasets for pre-training foundation models. • Closely work with other teams such as Pretraining, Posttraining, Evals and Product to to ensure alignment on the quality of the models delivered.

🎯 Requisitos

• Strong background in building production-grade, distributed data systems for machine learning, with experience in: • Orchestration: Slurm, Airflow, or Dagster • Observability & Reliability: CI/CD, Grafana, Prometheus, etc. • Infra: Git, Docker, k8s, cloud managed services • Batched inference (ex: vLLM) • Performance obsession, especially with large-scale GPU clusters and distributed pipelines • Expert-level python knowledge and ability to write clean and maintainable code • Strong algorithmic foundations • Proficiency with libraries like Polars, Dask, or PySpark • Nice to have: • Experience in building trillion-scale SOTA pretraining datasets • Experience translating research to production at scale • Experience with OCR, web crawling, or evals • Prior experience pre-training LLMs

🏖️ Benefícios

• Fully remote work & flexible hours • 37 days/year of vacation & holidays • Health insurance allowance for you and dependents • Company-provided equipment • Wellbeing, always-be-learning and home office allowances • Frequent team get togethers • Great diverse & inclusive people-first culture