Data Engineer Iii

  • Osasco
  • Page Outsourcing Brasil
A  Page  Outsourcing  faz parte do  Page  Group , um dos líderes mundiais em recrutamento especializado! Colaborando com grandes players do mercado brasileiro para potencializar estratégias de desenvolvimento, implementação de sistemas e expansão de operações através do recrutamento e seleção assertiva de profissionais, a  Page  Outsourcing  traz o DNA do  Page  Group  em amplo conhecimento de mercado e papel consultivo para seus parceiros, ampliando-o em processos de contratação em larga escala, com eficiência e assertividade. /n Obrigatório conhecimentos avançados em linguagem de Progaramação (Python, Java, R ou similares); Obrigatório conhecimentos avançados em bancos dados relacionais e linguagem SQL; Obrigatório conhecimento em pelo menos uma das tecnologias: SAS, Teradata, Hive, MapReduce, Hadoop, Spark, Hbase, Kafka, Horton/Cloudera, Databricks; Obrigatório conhecimento em Sistema Operacional Linux/shell script; Desejável conhecimento em arquitetura distribuida para processamento Big Data; Desejável conhecimento de boas práticas de desenvolvimento em cloud, finops, etc.; Desejável conhecimento na esteira de devops (Microserviços, Jira, Bitbucket, Bamboo, Docker); Desejável conhecimento e experiencia com processos ágeis de desenvolvimento; Desejável conhecimentos avançados em ferramentas de Big Data (ex: Spark, Hive, Hbase); Desejável conhecimentos avançados em ferramentas de BI (ex: Power BI, Tableau, Microstrategy); Indispensável conhecimento em desenvolvimento cloud (ex: Azure, GCP, etc.). /n Fazer alinhamentos com o negócio para entender, validar e discutir conceitos em cima dos dados, mapear origens e entender que produto de dados melhor atende às necessidades de negócio; Realiza o mapeamento dos fluxos (AS-iS e TO-BE) das informações identificadas, desde sua origem até o seu consumo, utilizando os padrões de mercado; Utilizar metodologias exploratórias de dados para testar as hipóteses levantadas, auxiliando as as áreas de negócio nas tomadas de decisão para o negócio; Responsável por extrair, carregar, transformar e integrar os dados em diferentes formatos, ambientes e latências (inclusive real-time); Responsável pelo desenvolvimento de produtos de dados que estão consumidos por cientistas, analistas, sistemas ou outros ambientes, seja on premise ou cloud.