O Analista de Aquisição de Dados é responsável por adquirir dados diversos de fontes online por meio de webscraping, garantindo a qualidade e a precisão das informações coletadas. Esta posição desempenha um papel fundamental na construção e manutenção dos conjuntos de dados utilizados nos produtos da empresa.
- Manter-se atualizado sobre as melhores práticas e tecnologias relacionadas à aquisição de dados e webscraping.
- Gerar analises de dados baseados em capturas ou em dados disponibilizados nos bancos de dados.
- Realizar o tratamento dos dados capturados e a disponibilização para consumo em bases de desenvolvimento e produção.
- Auxiliar na manutenção e melhoria continua dos fluxos de normalização e disponibilização de dados.
- Realizar analises de desempenho a respeito dos dados que estão sendo capturados e/ou disponibilizados.
- Desenvolver scripts em Python para realizar webscraping de sites específicos, conforme solicitado pelas áreas comerciais ou de negócio.
- Analisar a fila de produção para identificar o próximo site a ser mapeado, criar o script correspondente, testá-lo em ambiente de desenvolvimento e validar os dados coletados.
- Colaborar com outras áreas da empresa para entender as necessidades de dados e garantir que os conjuntos de dados adquiridos atendam aos requisitos estabelecidos.
- Validar os dados adquiridos para garantir a qualidade e a consistência das informações, corrigindo eventuais erros ou inconsistências identificadas.
- Conectar em servidores AWS para realização das capturas.
- Atuar na melhoria contínua dos processos de aquisição de dados, buscando aumentar a eficiência e a qualidade dos dados coletados.
- Manter-se atualizado sobre as melhores práticas e tecnologias relacionadas à aquisição de dados e webscraping.
Localidade: CASCAVEL