Engenheiro de Dados Sênior
Descrição da vaga
Conectamos empresas, pessoas e tecnologias contribuindo para que explorem seu máximo potencial, este é o nosso propósito, e ao longo de 34 anos somamos aprendizados e muitas conquistas. A Cultura vivenciada na empresa traduz a essência de quem somos e onde queremos chegar.
Se você é apaixonado pelo que faz e tem muito “gás” para trabalhar, essa vaga é a sua cara!!! Venha fazer parte de uma empresa humana, que acredita que seu maior potencial são as pessoas! 🚀
Responsabilidades e atribuições
Arquitetura e Implementação de Soluções de Dados
- Desenhar e manter pipelines de dados escaláveis, resilientes e otimizados em arquiteturas Lakehouse e Data Mesh
- Implementar soluções end-to-end (ingestão, transformação, qualidade, governança) em múltiplas plataformas cloud (AWS, Azure, GCP, Databricks, Snowflake)
- Otimizar performance de queries e armazenamento com foco em custo-benefício
Projetos de GenAI e Machine Learning
- Atuar como consultor técnico em pipelines de GenAI/ML
- Preparar dados para treinamento de modelos, fine-tuning e inferência em escala
- Otimizar arquiteturas para workloads de machine learning
Liderança Técnica e Consultoria Estratégica
- Atuar como especialista técnico junto a clientes, fornecendo orientações sobre tecnologias emergentes
- Treinar profissionais juniores através de treinamentos e compartilhamento de conhecimento
- Servir como bridge entre times multidisciplinares, traduzindo requisitos em soluções técnicas
- Comunicar recomendações complexas para públicos técnicos e executivos
DevOps e Observabilidade
- Implementar práticas de versionamento, testes automatizados e CI/CD
- Configurar observabilidade e monitoração de pipelines
- Aplicar metodologias Agile e DataOps na entrega
Experiências Mandatórias
- Vivência sólida em engenharia de dados, atuando com autonomia em projetos complexos, desde ingestão até disponibilização de dados para produtos analíticos.
- Experiência aprofundada em ambientes cloud (AWS, Azure ou GCP), incluindo arquitetura, pipelines, segurança e observabilidade.
- Domínio prático em Databricks e/ou Snowflake, com uso de Unity Catalog, Delta Lake, Lakehouse e boas práticas de governança e versionamento.
- Atuação comprovada em consultoria ou squads multi-clientes, conduzindo múltiplos projetos simultaneamente com diferentes stakeholders.
- Participação efetiva em iniciativas de GenAI/ML, incluindo preparação, organização e qualidade de dados para modelos de IA.
- Capacidade de liderar discussões técnicas, definir padrões e orientar times sobre melhores práticas de engenharia e governança de dados.
Expertise com Plataformas Cloud
- AWS: S3, EC2, Lambda, Glue, EMR, Athena, Lake Formation, Redshift, DataBrew, RDS, DynamoDB, SQS, SNS
- Azure: Data Factory, Data Lake Storage, Synapse Analytics, Azure Machine Learning, Cosmos DB, MS Fabric
- GCP: BigQuery, Dataflow, Cloud Composer (Airflow), Pub/Sub
- Migração de dados entre plataformas e avaliação de soluções multi-cloud
Arquitetura e Design de Dados
- Profundo conhecimento de Lakehouse/Delta Lake e Medallion Architecture (Bronze, Silver, Gold)
- Implementação de Data Mesh e domain-driven data architecture
- Modelagem OLAP e OLTP
- Design de soluções para processar terabytes em tempo real e batch
Stack Técnico Essencial
- Apache Spark e PySpark com otimização de workloads distribuídos
- SQL avançado (window functions, CTEs, performance tuning)
- dbt para transformação declarativa
- Apache Airflow ou equivalente para orquestração
- Terraform para infraestrutura como código
- Git e práticas de CI/CD
Requisitos e qualificações
Ferramentas e Stack Técnico
Linguagens de Programação
- Python (avançado: Pandas, NumPy, PySpark, Polars)
- SQL (expert-level: otimização de queries, análise de execution plans)
- Scala ou Java (desejável)
- Bash/Shell scripting
Plataformas de Dados (expertise em pelo menos 2)
- Databricks (notebooks, clusters, jobs, Delta Lake, Unity Catalog, auto-loader)
- Snowflake (arquitetura, performance optimization, time-travel, Iceberg)
- AWS (Redshift, S3, Glue, Athena, Lake Formation)
- Azure (Synapse Analytics, Data Lake Storage, MS Fabric)
- Google BigQuery e Dataflow
Transformação, Orquestração e Processamento
- dbt com expertise em modularização, testes, documentação e CI/CD
- Apache Spark com otimização de performance, particionamento e caching
- Apache Airflow (DAGs, operators, sensors, SLA) ou Dagster/Prefect
Infraestrutura, DevOps e Versionamento
- Terraform (infraestrutura como código multi-cloud)
- CloudFormation (AWS)
- GitHub Actions ou GitLab CI
- Docker e containerização
- Git avançado
Habilidades Técnicas Essenciais
Design e Arquitetura
- Desenho de arquiteturas escaláveis, seguras e resilientes end-to-end
- Compreensão de batch processing vs. real-time streaming
- Design de data contracts e schema governance
- Avaliação de tecnologias apropriadas para cada caso de uso
Performance e Otimização
- SQL complexo: execution plans, indexação, particionamento
- Spark optimization: RDD vs. DataFrames, shuffle, memory management
- Cost optimization em cloud: spot instances, reserved capacity, particionamento
- Troubleshooting de gargalos de performance
Segurança e Compliance
- RBAC e controle de acesso granular
- Criptografia em repouso e em trânsito
- Conformidade com LGPD, GDPR, SOC2
- Data masking e anonymization
- Gestão de secrets (AWS Secrets Manager, Azure Key Vault)
Desenvolvimento Ágil e Colaboração
- Metodologias Scrum, sprints e estimativa de esforços
- Colaboração multidisciplinar com Product, Negócio e Engenharia
- Comunicação clara de requisitos técnicos complexos para públicos não-técnicos
Certificações
Desejáveis
- Databricks Certified Data Engineer Professional
- AWS Certified Data Engineer – Associate ou Solutions Architect Professional
- Microsoft Certified: Azure Data Engineer Associate (DP-203)
- Google Cloud Professional Data Engineer (se aplicável)
Complementares
- Terraform Associate Certification
- dbt Fundamentals ou Advanced
- Apache Airflow Fundamentals
Habilidades Comportamentais
Pensamento Estratégico e Consultivo
- Pensamento estratégico considerando trade-offs (custo, complexidade, performance)
- Mentalidade consultiva: questionar requisitos, propor alternativas, educar clientes
Problem-Solving e Resiliência
- Resiliência e capacidade de debug em ambientes complexos
- Lidar com ambiguidades e gargalos de performance
Liderança e Desenvolvimento
- Mentoria e coaching de profissionais juniores
- Elevação do nível técnico de equipes
- Comunicação executiva traduzindo conceitos técnicos
Contínuo Aprendizado e Ownership
- Aprendizado contínuo acompanhando evolução de plataformas
- Propriedade sobre a qualidade das soluções entregues
- Colaboração efetiva em ambientes multidisciplinares
Diferenciais Competitivos
- Experiência em Machine Learning Engineering e MLOps
- Contribuições a projetos open source (Spark, dbt, Airflow)
- Data quality frameworks de ponta
- Expertise em GenAI/LLM pipelines
- Speaking em eventos técnicos e publicações
- Data contracts e API-first data platforms
- Certificação em Data Governance
- Fluência multilíngue (português + inglês + espanhol)
Informações adicionais
O que oferecemos
- Flash Benefícios (alimentação e refeição)
- Vale-transporte ou fretado
- Plano de Saúde com cobertura para dependentes
- Plano Odontológico
- Seguro de Vida
- Convênio Farmácia
- Aplicativo de telemedicina, tele psicologia, nutrição, educação física e muito mais
- DayOff
- Auxílio Creche
- Auxílio Inclusão
- Programa de Idiomas
- Programa de Previdência Privada
- Programa de Certificações
- Parcerias educacionais
Etapas do processo
- Etapa 1: Cadastro
- Etapa 2: Entrevista com RH e Avaliação Técnica
- Etapa 3: Entrevista com a Gestão da área
- Etapa 4: Contratação
Sobre a Dedalus
A Dedalus é líder em Serviços para empresas que utilizam Cloud Computing e Dados.
Somos uma empresa pioneira no setor e possuímos parceria com os maiores provedores do mundo - AWS, Microsoft, Oracle e Snowflke, para atender às demandas do mercado relacionadas a jornada de transformação digital.
E isso acontece porque somos uma empresa especial.
Temos uma cultura humana, formamos gente e temos como propósito conectar pessoas, empresas e tecnologias para que explorem seu máximo potencial.
Temos um foco incansável pela qualidade, por entregar o melhor em cada projeto, seja simples ou complexo, num cliente maduro ou mesmo iniciante no uso de Cloud e Dados.
Acreditamos que automação e um time de especialistas são elementos essenciais para ter uma cloud segura, sem desperdícios e bem gerenciada. Sempre investindo nos melhores profissionais e tecnologias, possuímos uma equipe altamente capacitada e um portifólio completo de serviços para apoiar empresas em todas as fases da sua jornada, do planejamento, arquitetura, migração até a gestão contínua das operações de nuvem e dados.
Tudo isso sem tirar o foco no relacionamento humano e na evolução das capacidades profissionais de colaboradores, parceiros e clientes com muita empatia e trabalho em equipe.
Evoluímos com coragem, com integridade, ética em busca da excelência nos resultados.
Isto nos torna mais do que uma empresa de Serviços. Nos torna o parceiro ideal de empresas que modernizam seu posicionamento digital.
.png)
Nossos Valores:
Ética – Seguimos um conjunto de valores, princípios éticos e morais.
Empatia – Nos conectamos com compreensão e respeito ao ponto de vista e emoções do outro.
Integridade – A transparência e a verdade permeiam nossa rotina, de maneira correta e honesta.
Evoluir com Coragem – Exercitamos a coragem para nos transformar e transformar o mundo.
Trabalho em Equipe – Buscamos o sucesso da Dedalus e de cada um dos colaboradores através do esforço coletivo.
Excelência com Agilidade – Cumprimos o que foi combinado no prazo determinado.
Focado nas pessoas – Nos preocupamos com o bem-estar de todos os grupos colaboradores, fornecedores, parceiros e clientes.
Encantamento do cliente – Proporcionamos uma experiência ao cliente gerando imensa satisfação.
#VemSerDedalus 💙
Está com dificuldade para realizar a inscrição ou qualquer outro problema com a plataforma da Gupy? Acesse o suporte aqui.
Acompanhe a Dedalus nas mídias sociais