Descrição
A Mars Data Platform Services está contratando um Engenheiro de DataOps para liderar a evolução técnica de seu ecossistema de entrada de dados e zona de aterrissagem. A função desenvolverá e ampliará um mecanismo de ingestão orientado por metadados, manterá zonas de aterrissagem de alto rendimento e salvaguardas de qualidade de dados, automatizará a criação de ativos do Unity Catalog e o arquivamento de longo prazo, e estabelecerá padrões de DataOps por meio de CI/CD, testes, modelos de implantação, monitoramento e manuais operacionais. A posição exige pelo menos quatro anos de experiência em engenharia de dados com Python/PySpark, SQL, Azure Databricks, Delta Lake e arquitetura programática do Unity Catalog e de zonas de aterrissagem.
