Zup Innovation logo

Zup Innovation

Pessoa Engenheira de Dados Sênior at Zup Innovation

RemotoFull-timeZup InnovationPosted 5 months ago
Apply with Pipeline

About the Role

<p></p> <p>Nosso propósito é criar tecnologias que desafiam as melhores do mundo e mudam o jogo para nossos clientes. Por isso, buscamos profissionais que desejam fazer parte de uma cultura pautada pela excelência e inovação. Se você se identifica com um ambiente de trabalho colaborativo e movido por curiosidade, venha construir o futuro da tecnologia conosco.</p> <p><strong>O que você fará por aqui</strong></p> <ul> <li>Participar do processo de entendimento das necessidades do negócio ,entendendo e garantindo a entrega de valor;</li> <li>Desenhar a arquitetura e avaliar as tecnologias disponíveis para resolver o problema certo;</li> <li>Desenvolver e evoluir pipelines de dados escaláveis e preparados para alimentar modelos de IA Generativa e soluções de RAG;</li> <li>Implementar pipelines de Dados para democratização de dados em uma arquitetura Data Mesh, criando camadas semânticas e dados estruturados para consumo por IA;</li> <li>Combinar a arquitetura e tecnologia para desenvolver e entregar componentes reutilizáveis como conectores, <em>APIs</em>, <em>SDKs</em>, <em>CLIs,</em> integrando com APIs de LLMs (OpenAI, Claude, Gemini)<em>;</em></li> <li>Prototipar agentes inteligentes utilizando frameworks como LangChain, LangGraph e CrewAI, avaliando custo, latência e qualidade das integrações;</li> <li>Testar e automatizar tudo que for possível;</li> <li>Validar e adaptar os componentes de acordo com os <em>feedbacks </em>dos usuários;</li> <li>Colaborar com a qualidade e inovação tecnológica do produto e ambiente de trabalho.</li> </ul> <p><br><strong>O que esperamos que você saiba</strong></p> <ul> <li>Conhecimento em processamento de dados em larga escala, processamento paralelo e distribuído (Apache Spark, Hadoop, Hive, etc);</li> <li>Experiência prática em ELT utilizando dbt, Data Lake/Lakehouse e orquestração com Airflow;</li> <li>Experiência com serviços de Data &amp; Analytics da nuvem AWS (Glue, EMR, Athena, Quicksight);</li> <li>Conhecimento de linguagem de programação Python;</li> <li>Domínio sobre os principais serviços da Cloud AWS (S3, Lambda, SQS, DynamoDB, API Gateway);</li> <li>Proficiência no uso de LLMs, aplicação prática de embeddings, RAG (Retrieval-Augmented Generation) e Bancos Vetoriais (Pinecone, Milvus, pgvector, Qdrant, etc.);</li> <li>Habilidade em Engenharia de Prompts e orquestração com frameworks como LangChain ou LangGraph;</li> <li>Atuação prática consistente com bases de dados relacionais (SQL) e NoSQL (documentos e chave-valor);</li> <li>Domínio de práticas de DevOps e infraestrutura como código (Terraform, CodePipeline, etc).</li> </ul> <p><br><strong>O que seria muito legal se você soubesse</strong></p> <ul> <li>Experiência anterior em iniciativas de democratização de dados com Data Mesh;</li> <li>Experiência em avaliação comparativa entre diferentes LLMs de mercado considerando custo-benefício e latência;</li> <li class="font-claude-response-body whitespace-normal break-words pl-2">Experiência com IA generativa ou ferramentas de automação aplicadas a pipelines de dados, como geração assistida de código, documentação automatizada ou monitoramento inteligente de qualidade de dados;</li> <li>Conhecimentos de Observability (Cloudwatch, CloudTrail, Prometheus, AppDynamics, Splunk, ElasticSearch, Grafana e etc.);</li> <li>Conhecimento em técnicas avançadas de cache para sistemas escaláveis de IA;</li> <li>Ter experiência no desenvolvimento de soluções para instituições financeiras.</li> </ul> <p><strong>O que te oferecemos</strong><strong><br></strong><strong><br></strong>Aqui não é só a sua carreira que importa, queremos que você tenha saúde e bem estar físico e mental para a melhor jornada de experiência profissional e pessoal da sua vida.<br><br><strong><em>Carreira</em></strong></p> <ul> <li>Liberdade para trabalhar de onde quiser&nbsp;</li> <li>Horários flexíveis*</li> <li>Auxílio Educação&nbsp;</li> <li>Ferramenta própria de desenvolvimento de carreira</li> <li>Guildas internas e outros grupos de estudo e interesse</li> </ul> <p><strong><em>Saúde e bem-estar</em></strong></p> <ul> <li>Plano saúde&nbsp;</li> <li>Plano odontológico</li> <li>Parceria na compra de medicamentos</li> <li>Telemedicina: assistência médica disponível 24x7</li> <li>Terapia online gratuita</li> <li>Wellhub</li> <li>Licença maternidade estendida</li> <li>Licença paternidade estendida</li> <li>CAZ – Central de Atendimento a Zuppers</li> </ul> <p><strong><em>Conforto financeiro</em></strong></p> <ul> <li>Vale-refeição e alimentação</li> <li>Seguro de vida</li> <li>Vale-transporte</li> <li>Auxílio home office&nbsp;&nbsp;</li> <li>Auxílio Creche</li> <li>Auxílio plano telefônico</li> <li>Participação em Lucros e Resultado</li> </ul> <p>Se você está pronto para transformar dados em decisões estratégicas e quer fazer parte de um ambiente que valoriza a inovação e o crescimento, venha ser um zupper! 🚀</p>