Sr Data Engineer Databricks y Python

hace 4 semanas

Ciudad de México Multiplica Talent A tiempo completo

**Responsabilidades**:- Diseñar, desarrollar y mantener pipelines de datos eficientes y escalables en Databricks.- Utilizar Python y otras herramientas asociadas para realizar procesamiento y análisis de grandes volúmenes de datos.- Integrar, transformar y cargar datos (ETL) desde diversas fuentes hacia plataformas de almacenamiento (Data Lakes, Data Warehouses).- Colaborar con científicos de datos, analistas de negocio y otros equipos técnicos para entender los requisitos de los proyectos de datos y proporcionar soluciones adecuadas.- Optimizar el rendimiento de los pipelines de datos y garantizar la calidad y consistencia de los datos procesados.- Participar en el diseño y mantenimiento de la infraestructura de datos en la nube, utilizando plataformas como AWS, Azure o Google Cloud.- Implementar pruebas de validación de datos, realizar análisis de calidad de datos y asegurar la integridad de las bases de datos.- Documentar procesos, arquitecturas y procedimientos de integración de datos.- Mantenerse actualizado con las mejores prácticas y las nuevas herramientas relacionadas con ingeniería de datos, incluyendo avances en Databricks y Python.**Requirements**:- Experiência sólida en Databricks, especialmente en la creación de workflows y pipelines de datos.- Amplia experiência en Python para el procesamiento de datos, incluyendo bibliotecas como pandas, numpy, pySpark, entre otras.- Conocimientos sólidos en arquitectura de datos y almacenamiento de datos (Data Lakes, Data Warehouses).- Experiência trabajando con Apache Spark o tecnologías similares.- Familiaridad con la implementación de soluciones ETL (Extract, Transform, Load) en ambientes de producción.- Conocimientos de bases de datos SQL y NoSQL.- Buen nível de inglés (oral y escrito), con capacidad para trabajar en un entorno internacional y comunicarte de manera efectiva con equipos globales.- Conocimiento en la nube (AWS, Azure, Google Cloud) es altamente deseable.- Habilidad para solucionar problemas complejos relacionados con el procesamiento de datos y la optimización del rendimiento.- Experiência trabajando con herramientas de control de versiones (como Git).- Capacidad para trabajar de manera autónoma y en equipo en proyectos colaborativos.**Deseables**:- Conocimiento en herramientas de orquestación de workflows como Airflow o Luigi.- Experiência con tecnologías de contenedores como Docker.- Familiaridad con metodologías ágiles de desarrollo de software (Scrum, Kanban).- Experiência previa en la creación de modelos de Machine Learning o en la integración de datos para proyectos de AI.**Benefits**:- 100 % remoto desde cualquier país de Latinoamérica.- Pagos en dólares (USD)- Acceso exclusivo a un 60% de descuento en cursos de inglés, francés, alemán, portugués e italiano gracias a nuestra colaboración con una reconocida plataforma de aprendizaje.- Descuentos especiales en planes de medicina, psicología, nutrición y entrenamiento físico.- Soporte personalizado de un Account Manager durante todo el proyecto.- Al completar tu primer proyecto, obtendrás acceso a nuestra comunidad de freelancers y una lista de proyectos exclusivos en más de 5 países, incluyendo EE.UU.- Proyecto retador con empresa de tecnologia importante.**Sobre el contrato**:- Contractor/ freelance.- El cliente tiene un proyecto corto (2 meses) con potencialidad de extender a 6 merses y otro que es mínimo 12 meses (1 año)

  • Data Engineer Snowflake

    hace 3 semanas

    méxico Perficient A tiempo completo

    Get AI-powered advice on this job and more exclusive features. Direct message the job poster from Perficient The Data Engineer will be responsible for designing, developing, and maintaining data pipelines and solutions to enable our client to harness the power of the data for further analytics. We’re looking for passionate individuals with knowledge on...

  • Databricks Engineer

    hace 3 semanas

    méxico Everscale Group A tiempo completo

    A global technology company is looking for a Databricks Engineer to design and implement scalable data processing solutions. The ideal candidate is proficient in big data technologies, especially Databricks, with strong coding abilities in Python, Scala, or Java. This role involves collaborating with cross-functional teams to enhance data processing...

  • Databricks Engineer

    hace 3 semanas

    méxico Everscale Group A tiempo completo

    As a Databricks Engineer, you will be responsible for designing, implementing, and maintaining scalable data processing and analytics solutions using Databricks Unified Analytics Platform. The ideal candidate possesses a deep understanding of big data technologies, proficient coding skills, and a strong background in data engineering and analytics....

  • Data Engineer

    hace 12 minutos

    Ciudad de México GSB Solutions A tiempo completo

    Important IT company At the Latin American level, growth requires:**Data Engineer****Job description**:Azure Databricks/Snowflake, Azure, Azure Data Factory, Git hub, SQL, CI/CD, ETL and Data warehousing, Python**ADVANCED CONVERSATIONAL ENGLISH ESSENTIAL**(Will be evaluated).**Job type**: Remote.**Salary**: $88,000 gross.**Benefits**: Excellent superior...

  • Azure Databricks

    hace 12 minutos

    Ciudad de México GSB Solutions A tiempo completo

    Important IT company At the Latin American level, growth requires:**Azure Databricks****Job description**:**_ Technical Requirements: _**- Deep expertise in Databricks platform (Unity Catalog, Delta Lake, Delta Live Tables)- Strong knowledge of Azure Purview and its integration capabilities- Proficiency in Python, SQL, and Scala- Experience with Apache Spark...

  • Sr. Data Warehouse Engineer

    hace 1 semana

    Ciudad de México Trinity Industries A tiempo completo

    **Trinity Industries Corporate IT **is seeking a **Sr Data Warehouse Engineer **in our **Queretaro, MX** office. This role will be part of the Enterprise Data Warehouse team.**What you'll do**:- Design and Implement ETL pipelines- Develop and manage dashboards- Work with business stake holders to understand the business requirements and translate them to...

  • Databricks Engineer

    hace 4 días

    Ciudad de México Cognizant A tiempo completo

    **We’re hiring!** At Cognizant we have an ideal opportunity for you to be part of one of the largest companies in the digital sector worldwide. A Great Place To Work where we look for people who contribute new ideas, experiencing a dynamic and growing environment. At Cognizant we promote an inclusive culture, where we value different perspectives...

  • Advanced Data Engineer

    hace 12 minutos

    Ciudad de México GSB Solutions A tiempo completo

    Important IT company At the Latin American level, growth requires:**Advanced Data Engineer****Job description**:Proficiency In Python, SQL, Databricks, Snowflake Data Modelling, ETL Process, Apache Spark, Pyspark, Data Integration and workflow orchestration, real time data processing experience and frameworks, Azure cloud experience**ADVANCED CONVERSATIONAL...

  • Python Data Engineer

    hace 6 días

    Ciudad de México, Ciudad de México Pyramid Consulting, Inc A tiempo completo

    HelloPlease find below opportunitySkills:Bachelor's degree or foreign equivalent required from an accredited institution.At least 4 years of experience in Information Technology for JL4.Very good communication skills + English Level.Mandatory Skillsets:At least 3 years of project experience in Python and SQL.Good understanding of ETL concepts.Good to...

  • Data Engineer with Databricks Mid-level

    hace 5 días

    Ciudad de México Globant A tiempo completo

    At Globant, we are working to make the world a better place, one step at a time. We enhance business development and enterprise solutions to prepare them for a digital future. With a diverse and talented team present in more than 30 countries, we are strategic partners to leading global companies in their business process transformation. We seek a **Data...