Big Data Engineer - Abl

**Reclutador**:Valeria Colin**Ubicación**:Cualquier estado de México**Industria**:Banking**Modalidad de trabajo**:Remota**Tus funciones**:- Diseñar e implementar entornos de producción de big data utilizando tecnologías modernas Construir, validar y optimizar soluciones de big data a gran escala en entornos de datos heterogéneos.Desarrollar y gestionar ETL en lotes Spark y Scala y streaming Apache Flink.
**Conocimientos y experiência necesaria**:- Experiência trabajando con big data Spark es imprescindible Hadoop Hive y/o Kafka (deseable).
- 3 años de experiência trabajando con patrones de diseño de software Scala Spark y TDD.
- Experiência con diferentes estructuras de bases de datos, incluyendo SQL, Postgres, MySQL y NOSQL DynamoDB, DocumentDB, Redis, Elasticsearch.
- Experiência y conocimientos en integración de datos y gestión de datos con grandes volúmenes de datos.
- Experiência con ecosistemas de nube Ecosistema AWS, EMR, EC2, IAM, GLUE, ATHENA S3 CloudFor...