Job description

Data Engineer - Databricks Mexico, Mexico job at NEORIS. Albuquerque, NM. NEORIS es un acelerador Digital que ayuda a las compañías a entrar en el futuro, teniendo 20 años de experiencia como Socios Digitales de algunas de las mayores compañías del mundo. Somos más de 4,000 profesionales en 11 países, con nuestra cultura multicultural de startup en donde cultivamos innovación, aprendizaje continuo para crear soluciones de alto valor para nuestros clientes. Estamos en búsqueda de Data Engineer - Databricks Principales responsabilidades: • Diseño y Desarrollo de Pipelines de Datos: Construir, optimizar y mantener pipelines de datos escalables para procesar y transformar grandes volúmenes de datos. • Integración de Datos: Trabajar en la ingesta y unificación de datos desde múltiples fuentes, estructuradas y no estructuradas, integrándolas en un sistema de almacenamiento centralizado. • Optimización de Procesamiento de Datos: Mejorar la eficiencia de pipelines de datos utilizando mejores prácticas en Spark y optimizaciones propias de Databricks. • Modelado de Datos: Diseñar modelos de datos eficientes y adecuados para diferentes necesidades de análisis, optimizando consultas en lagos y warehouses de datos. • Implementación de ETL/ELT: Definir y desarrollar procesos ETL (extracción, transformación y carga) y ELT (extracción, carga y transformación) para transformar datos en insights prácticos. • Colaboración con Científicos de Datos y Analistas: Proveer y optimizar datasets para proyectos de Machine Learning, Business Intelligence y Analytics. • Seguridad y Gobernanza de Datos: Garantizar el cumplimiento de normas de seguridad, privacidad y gobernanza de datos en colaboración con equipos de compliance y TI. Habilidades y Conocimientos Técnicos • Databricks: Experiencia en el uso avanzado de Databricks, incluidas las funcionalidades de notebooks, configuración de clústeres, optimización de jobs y conectividad con otros servicios. • Apache Spark: Dominio de Spark para procesar grandes volúmenes de datos y optimización de tareas en tiempo real. • SQL y Bases de Datos: Fuerte conocimiento de SQL para consultas, transformación y análisis de datos en bases de datos relacionales y no relacionales. • Lenguajes de Programación: Dominio de Python, especialmente para escribir scripts en Spark y manejar APIs de datos. • Data Lake y Data Warehouse: Experiencia en diseño y administración de lagos de datos (por ejemplo, Delta Lake) y warehouses (como Azure Synapse o Amazon Redshift). • Herramientas de ETL/ELT: Conocimiento en herramientas de orquestación como Apache Airflow, así como tecnologías específicas de ETL en la nube. • Herramientas en la Nube: Experiencia en plataformas de nube como AWS, Azure o Google Cloud, especialmente en servicios de almacenamiento, procesamiento y bases de datos. • Optimización y Performance Tuning: Conocimientos de técnicas para mejorar el rendimiento en el procesamiento de datos y configuración de recursos en Databricks. Competencias Adicionales • Pensamiento Analítico. • Resolución de Problemas. • Comunicación y Colaboración. Modalidad: Remota Inglés: Intermedio a nivel conversacional Esquema 100% nominal Prestaciones de Ley Vales de despensa Beneficios adicionales Plan de Desarrollo Profesional Colaboración multicultural Te invitamos a conocernos en Facebook, LinkedIn, Twitter o Instagram: @NEORIS. Solicitar este puesto Nombre * Correo electrónico * Introducir manualmente Tipos de archivos aceptados: pdf, doc, docx, txt, rtf URL Perfil de LinkedIn ¿Cuál modelo de trabajo te interesa? * Select... Lugar de residencia * Select... Cuestionario Demográfico MX Invitamos a los solicitantes a compartir sus antecedentes demográficos. Si elige completar esta encuesta, sus respuestas pueden usarse para identificar áreas de mejora en nuestro proceso de contratación. ¿Cómo describirías tu identidad de género? (marque todo lo que corresponda) Select... Al marcar esta casilla, acepto que NEORIS almacene y procese mis datos con el fin de considerar mi elegibilidad en relación con mi actual solicitud de empleo. * Al marcar esta casilla, acepto que NEORIS guarde mis datos para futuras oportunidades de empleo hasta 730 días después de la conclusión del examen de mi solicitud de empleo actual. Al marcar esta casilla, doy mi consentimiento para que NEORIS recopile, almacene y procese mis respuestas a las encuestas de datos demográficos anteriores. #J-18808-Ljbffr NEORIS

Requirements