Descripción del puesto
En SoftConsulting S.A. nos encontramos en la búsqueda de un DESARROLLADOR DE BIG DATA (SENIOR).Si cumples con el perfil y te apasiona ser parte de la innovación y soluciones tecnológicas postula o refiere a un profesional de tu red.
Postula a través del siguiente medio detallando la posición a la que aplicas:
[email protected]
Requisitos
Requisitos:
Ing. en sistemas y/o afines
Experiencia +4 años en posiciones similares.
Conocimientos:
Lenguajes y frameworks:
PySpark: Dominio de las APIs de RDD, DataFrame y Spark SQL.
Hive: Conocimiento en creación de tablas, particionamiento, optimización de consultas (e.g., Tez, LLAP).
SQL avanzado: Manipulación de datos, subconsultas, joins complejos, funciones window, CTEs.
Python: Programación estructurada y orientada a objetos, manejo de librerías para ETL y análisis.
Linux/Bash: Navegación de archivos, scripting para automatización de tareas.
Big Data y Ecosistema Hadoop:
HDFS (Hadoop Distributed File System)
Hive Metastore
YARN
recursos de cluster
Hadoop MapReduce como base teórica de Spark Herramientas y entornos
CONTROL M: Orquestación de pipelines de datos.
Git: Versionado de código. Modelado de datos y optimización Manejo de esquemas particionados y bucketing en Hive.
Optimización de jobs:
Spark: particiones, broadcast joins, persistencia, caching. Diseño de pipelines escalables en entornos distribuidos.
Bases de datos y conectividad:
Conexión entre Spark-Hive y bases de datos relacionales (MySQL, PostgreSQL).
Conocimiento en formatos de almacenamiento:
Parquet, ORC, Avro, JSON.
Beneficios
Lo que ofrecemos
• Proyectos desafiantes en analítica empresarial con alta visibilidad ejecutiva.
• Cultura de aprendizaje continuo y certificaciones.
• Esquema de trabajo remoto/híbrido (según proyecto).
• Paquete compensatorio competitivo (a convenir según experiencia).