Engenheiro de dados sênior (plataforma de ingestão de ia)
Remoto LATAM
Esta vaga é 100% remota e está aberta a candidatos de qualquer país da LATAM (Argentina, Bolívia, Brasil, Chile, Colômbia, México, Paraguai, Uruguai). Mesmo que a ficha mencione uma cidade, não é necessário morar lá: a empresa contrata em toda a região.
Software Mind AmericasAmérica Latina (Remoto)
49 pessoas interessadas nesta vaga
Seja um dos primeiros a se candidatar
SalárioSalário não especificado
Jornadafull-time
Modalidaderemote
Publicado10 jul
Verificada atualmente: 10 jul
Estamos procurando um **Senior Data Engineer** especializado em plataformas de ingestão de IA para atuar em **trabalho remoto**, com foco na América Latina. A vaga é **full-time**, mas não há informações sobre salário ou data de publicação.
6+ anos de experiência
Sobre a vaga
Na Software Mind Americas, você vai atuar no desenvolvimento de uma plataforma de assistente de IA privada, isolada por locatário, voltada para o setor imobiliário de títulos e transações. O sistema é baseado em busca de recuperação (RAG) e processa emails históricos, documentos e metadados estruturados, transformando-os em um índice vetorial por locatário. A solução entrega respostas embasadas, citadas e ponderadas por especialistas, através de uma interface de chat com autenticação única e registro completo de auditoria. A arquitetura é nativa da AWS, com backend em Python/FastAPI, frontend em Vue.js, armazenamento vetorial em OpenSearch/Pinecone e modelos de linguagem como OpenAI, Anthropic e Bedrock. Você fará parte de uma equipe sênior e multidisciplinar, baseada na América Latina, onde a experiência prática na entrega de soluções de IA é a base para o trabalho diário.
Responsabilidades principais
Você será responsável por projetar e implementar pipelines completos de ingestão de dados, desde emails históricos até documentos em SharePoint e OneDrive, garantindo acesso restrito por pastas. Isso inclui o desenvolvimento de uma camada de pré-processamento para minimizar PII, além de construir fluxos de indexação para o armazenamento vetorial (OpenSearch/Pinecone), assegurando isolamento por locatário. Você definirá e implementará esquemas de processamento de dados, documentando-os de forma clara e mantendo-os atualizados. Também será necessário criar um orquestrador para roteamento de OCR em documentos escaneados e integrar serviços de extração de texto, além de projetar estratégias de ingestão (push ou pull), desde protótipos iniciais até pipelines incrementais noturnos. Por fim, garantir que todo o pipeline mantenha traçabilidade de dados e logs de auditoria desde o início.
Requisitos indispensáveis
São obrigatórios pelo menos seis anos de experiência em engenharia de dados, com forte domínio em pipelines e desenvolvimento de ETL/ELT. Além disso, é necessário ter proficiência em Python para criação de pipelines de dados, conhecimento em APIs de emails e documentos corporativos, como Microsoft Graph API ou alternativas como M365 e Exchange Online. Também são essenciais experiências com serviços de dados da AWS, como S3, DynamoDB, Glue e processamento baseado em eventos usando Lambda. Além disso, familiaridade com técnicas de detecção e minimização de PII (informações pessoalmente identificáveis), seja através de regex, NER ou bibliotecas específicas, e experiência em indexação de armazenamento vetorial ou pipelines de busca semântica.
Perguntas frequentes
- Que perguntas fazer sobre salário antes da entrevista?
- Como a remuneração não foi detalhada, sugere-se confirmar o valor esperado e se há flexibilidade para negociação. Entenda se o salário oferecido está alinhado com sua experiência e com o mercado para engenheiros de dados sêniores com foco em IA no Brasil. Pergunte também sobre o pacote de benefícios e bonificações, pois eles podem complementar a remuneração base.
- Posso me candidatar com menos experiência?
- A vaga exige um mínimo de seis anos de experiência sólida em engenharia de dados, com foco em pipelines e ETL/ELT. Embora a experiência prática seja valorizada, o requisito de seis anos é explícito. Se sua experiência estiver próxima, pode valer a pena explorar, mas esteja preparado para demonstrar como suas competências compensam uma possível lacuna nos anos de experiência.
- A vaga é totalmente remota?
- Sim, a posição é 100% remota, com atuação para a América Latina. Isso significa que você poderá trabalhar de qualquer localidade, sem necessidade de deslocamento para um escritório. A empresa busca profissionais que possam colaborar efetivamente em um ambiente de trabalho distribuído.
- Que documento ou licença preciso ter antes de me candidatar?
- Não há menção de licenças ou documentos específicos obrigatórios para a candidatura nesta vaga. O foco está na sua experiência técnica com engenharia de dados, Python, AWS e pipelines de IA. Certificações em nuvem ou em ferramentas específicas podem ser um diferencial, mas não são apresentadas como requisito formal no momento da inscrição.