Engenheiro de Dados Sr (Home Office) seja o primeiro

Descrição

Experiência com processamento Batch, Python com Spark, podendo uitilizar casos com Scala.

Experiência no ambiente Hadoop Cloudera no on-premisses e na Cloud, serviços e componentes da AWS, como o EMR mas também utilizando PySpark.
Conhecimento em Carga de Dados com Sqoop.
Experiência no armazenamento em HDFS, HBASE, KUDU.
Conhecimento em Estreamsets, SparkStream para NRT e Kafka.
Conhecimento em arquivos Parquet e Metadado em Hive.