Mid Data Engineer

  • Remote - Brazil

Remote

Data

Mid-level

Job description

Aqui na ília nossas vagas estão sempre abertas para todas as pessoas e não se restringem quanto a gênero, etnia, orientação sexual, fatores sociais, condições físicas ou intelectuais (PCD) etc. Incentivamos a candidatura de integrantes de todos os grupos minoritários!

Sobre a ília

Somos especialistas em tecnologia, dados e design, impulsionando a transformação digital de grandes players do mercado há mais de 10 anos, nos setores financeiro, seguros e mobilidade. Com mais de 450 profissionais, estamos presentes no Brasil e Europa, atendendo aos mercados da América Latina, Europa e América do Norte, desenvolvendo produtos digitais de alta qualidade e com foco em resultados de negócios. Somos uma equipe inovadora, criativa e apaixonada por tecnologia.

Certificada pelo 5° ano consecutivo como Great Place to work aqui na ília acreditamos que pessoas mudam o mundo, e investimos nelas. Nossas awesome deliveries são feitas de pessoas para pessoas, afinal awesome people make awesome deliveries!

#Vempraília!

Sobre a vaga:

Construir um data lake robusto, integrado de forma transparente com as fontes de dados da empresa, complementado por visualizações avançadas de dados e aplicações impulsionadas por IA, projetadas para melhorar os resultados de negócios e a eficiência operacional.

Responsabilidades e Atribuições:

  • Desenvolvimento e orquestração de pipeline:
    • Projetar, construir e manter pipelines de dados eficientes para processamento de dados em lote e streaming.
    • Implementar fluxos de trabalho de orquestração de pipeline usando ferramentas modernas para garantir confiabilidade e escalabilidade.
  • Arquitetura Lakehouse:
    • Contribuir para o desenvolvimento e otimização de uma arquitetura Lakehouse, incluindo princípios da Arquitetura Medallion (camadas bronze, prata, ouro).
    • Lidar com processos de integração, transformação e armazenamento de dados.
  • Armazenamento e otimização de dados:
    • Gerencie formatos de dados estruturados e semiestruturados, como Parquet, CSV e JSON.
    • Garanta o desempenho ideal para consulta e armazenamento de dados.
  • Colaboração e governança de dados:
    • Colabore com equipes multifuncionais para alinhar soluções de dados com objetivos de negócios.
    • Garanta a adesão às melhores práticas de governança, segurança e conformidade de dados.

Requisitos:

  • Inglês e/ou Espanhol Avançado.
  • Sólida compreensão dos principais conceitos de engenharia de dados: arquitetura Medallion, modelagem dimensional, processamento de dados em lote vs. streaming e orquestração de pipeline.
  • Proficiência em Python e SQL para processamento e desenvolvimento de dados.
  • Experiência em projetar e manter pipelines de dados em ambientes de nuvem (AWS, GCP ou Azure).
  • Familiaridade com ferramentas de orquestração de fluxo de trabalho de dados (por exemplo, Apache Airflow, Prefect, Step Functions).
  • Fortes habilidades analíticas e de resolução de problemas.

Diferenciais:

  • Experiência prática com serviços da AWS como Glue, S3 e Athena.
  • Conhecimento de ferramentas de BI e visualização de dados, como AWS Quick Sight, Looker Studio.
  • Familiaridade com práticas de CI/CD e Infraestrutura como Código (por exemplo, Terraform, CloudFormation).
  • Experiência com projetos de Data Lake ou Lakehouse.
  • Explore oportunidades para integrar soluções de IA generativas, particularmente usando AWS Bedrock, para aprimorar fluxos de trabalho de dados e análises.
  • Aplique técnicas de engenharia rápida para personalizar soluções orientadas por IA para casos de uso específicos.
  • Pesquise e contribua para interações potenciais com plataformas de IA do GCP e do Azure como parte de estratégias futuras.

Benefícios e Incentivos:

Nossa contratação é CLT- 40h semanais com jornada flexível, sendo executada de forma remota. Os benefícios da ília são pensados para proporcionar uma experiência AWESOME para cada ílian, abaixo você encontra os benefícios de forma resumida. #vempraília

Para Saúde e bem-estar:

  • Plano de Saúde e Odontológico SulAmérica extensivo a dependentes;
  • Vale Alimentação/Refeição em cartão flexível Picpay benefícios
  • Seguro de Vida;
  • Auxílio Home-Office em cartão flexível Picpay benefícios;
  • Wellhub (Gympass)
  • TotalPass

Para o seu Desenvolvimento:

  • ília University: Universidade Corporativa com mais de 20 mil cursos disponíveis para desenvolvimento pessoal e profissional;
  • Language Academy: Escola de idiomas para ílians;
  • í-talks e Chapter: Momentos e cerimônias em que o time compartilha práticas, estudos, projetos e ideias. Nas chapters ainda se reúnem pessoas com skills similares para compartilhamento de ideias, práticas e experiências;

Gostamos de ir além no cuidado com as nossas pessoas, então dispomos também de alguns benefícios não convencionais:

  • Plano de Saúde PET- Guapeco
  • BYOD- Alugamos o seu notebook pessoal te pagando um valor mensal para que você o use, mas disponibilizamos também máquinas de trabalho para ílians. Você quem decide!
  • Seu Niver, seu bolo!
  • Seu Networking Vale Prêmio- Programa de premiação a indicação de novos funcionários.
Share this job:
Please let ília know you found this job on Remote First Jobs 🙏

Benefits of using Remote First Jobs

Discover Hidden Jobs

Unique jobs you won't find on other job boards.

Advanced Filters

Filter by category, benefits, seniority, and more.

Priority Job Alerts

Get timely alerts for new job openings every day.

Manage Your Job Hunt

Save jobs you like and keep a simple list of your applications.

Search remote, work from home, 100% online jobs

We help you connect with top remote-first companies.

Search jobs

Hiring remote talent? Post a job

Frequently Asked Questions

What makes Remote First Jobs different from other job boards?

Unlike other job boards that only show jobs from companies that pay to post, we actively scan over 20,000 companies to find remote positions. This means you get access to thousands more jobs, including ones from companies that don't typically post on traditional job boards. Our platform is dedicated to fully remote positions, focusing on companies that have adopted remote work as their standard practice.

How often are new jobs added?

New jobs are constantly being added as our system checks company websites every day. We process thousands of jobs daily to ensure you have access to the most up-to-date remote job listings. Our algorithms scan over 20,000 different sources daily, adding jobs to the board the moment they appear.

Can I trust the job listings on Remote First Jobs?

Yes! We verify all job listings and companies to ensure they're legitimate. Our system automatically filters out spam, junk, and fake jobs to ensure you only see real remote opportunities.

Can I suggest companies to be added to your search?

Yes! We're always looking to expand our listings and appreciate suggestions from our community. If you know of companies offering remote positions that should be included in our search, please let us know. We actively work to increase our coverage of remote job opportunities.

How do I apply for jobs?

When you find a job you're interested in, simply click the 'Apply Now' button on the job listing. This will take you directly to the company's application page. We kindly ask you to mention that you found the position through Remote First Jobs when applying, as it helps us grow and improve our service 🙏

Apply