Tecnologias
ent-framework
aos
python
docker
elasticsearch
solr
opensearch
sphinx
amazon-cloudsearch
google-cloud-search
amazon-cloud-search
vespa
golang
rust
java
scala
clojure
terraform
pulumi
ansible
kubernetes
Descrição da vaga
Vaga: Engenheiro(a) de Dados Jr (Coleta e Ingestão) - Legaltech JUIT
A JUIT, legaltech inovadora, busca um(a) Engenheiro(a) de Dados Jr para integrar nossa equipe e impulsionar a estruturação de dados jurídicos do Brasil. Se você busca uma oportunidade para trabalhar com grandes volumes de dados e construir soluções escaláveis, essa vaga é para você!
Nosso time de Engenharia de Dados atua em todo o ciclo de vida do dado, desde a coleta e ingestão até o tratamento, normalização e disponibilização para produtos e APIs.
Responsabilidades:
- Desenvolver soluções de coleta e ingestão de dados de diversas fontes.
- Publicar serviços de dados escaláveis e observáveis em colaboração com a equipe de engenharia.
- Mapear, analisar e coletar dados estruturados e não estruturados.
- Garantir a segurança de dados e compliance em conjunto com a equipe de segurança.
- Desenvolver frameworks de testes para garantir a qualidade dos dados coletados.
- Monitorar e documentar o status de scrapers em produção.
- Implementar métricas de monitoramento (SLA, SLO, SLI) para garantir observabilidade e desempenho.
Requisitos Essenciais:
- Formação superior em áreas de exatas (Ciência da Computação, Engenharia ou áreas afins).
- Experiência sólida em Python (2+ anos).
- Conhecimento em linguagem SQL (+1 ano).
- Experiência com coleta de dados da web (web scraping, web crawling, APIs RESTful, datasets públicos).
- Sólidos conhecimentos em algoritmos e estruturas de dados.
- Conhecimento em desenvolvimento orientado a testes (TDD).
- Conhecimento em Docker.
- Inglês intermediário.
Diferenciais (Serão um Plus):
- Experiência com processamento e extração de dados de documentos (.DOCs, .RTFs, .PDFs, etc.).
- Experiência com motores de busca de texto (Elasticsearch, Solr, OpenSearch, etc.).
- Experiência com desenvolvimento em Golang e/ou Rust (oportunidade para desenvolvedor Rust).
- Experiência com linguagens JVM (Java, Scala, Clojure, etc.).
- Experiência com Infraestrutura como Código (Terraform, Pulumi, Chef, Ansible, etc.).
- Experiência com coleta de dados de mídia (áudio e vídeo) e transcrição.
- Experiência com Kubernetes.
Informações Adicionais:
- Período: Integral
- Modelo de trabalho: Remoto
Candidate-se e faça parte da JUIT, construindo o futuro da pesquisa jurídica!