Pessoa Arquiteta de Dados / Analytics (Databricks — Otimização de Custos)

Hibrido Mathematical Science Occupations

Resumo: A Ideen está buscando uma pessoa Arquiteta de Dados / Analytics com especialização em Databricks para alocação em um dos nossos clientes: uma grande varejista em processo de reestruturação e busca por maior eficiência tecnológica. O profissional atuará diretamente junto às equipes do cliente, conduzindo um assessment e diagnóstico da plataforma de dados e, em seguida, atuando de forma contínua na otimização de custos e na racionalização do ambiente analítico.

Responsabilidades:

• Realizar assessment e diagnóstico do ambiente de dados/analytics baseado em Databricks (arquitetura, pipelines, clusters, uso e custos).


• Identificar oportunidades de otimização (dimensionamento de clusters, políticas de autoscaling e auto-termination, uso de spot, otimização de jobs e queries, storage).


• Analisar compromissos de consumo (commitments) e padrões de uso, apontando ineficiências e oportunidades de econom...