Data Lake Engineer

hace 1 semana

Álvaro Obregón, México Talent Center Institute A tiempo completo

**Vacante para la empresa Talent Center Institute en Álvaro Obregón, Ciudad de México**:
Inegenirías o Licenciaturas en Tecnologías de la Información

Inglés Avanzado

Experiênciade 3 años trabajando con tecnologías AWS IaC Data Lake desde el diseño hasta la implementación.

Manejo de lenguajes de programación como Python, Java o Scala.

Familiaridad con herramientas ETL y plataformas de procesamiento de datos como Apache Spark o Hadoop.

Sólidos conocimientos de bases de datos SQL y NoSQL.

Conocimientos fundamentales de AWS:
Servicios básicos de AWS: Familiaridad con los servicios clave de AWS, como EC2 (Elastic Compute Cloud), S3 (Simple Storage Service), RDS (Relational Database Service), VPC (Virtual Private Cloud), IAM (Identity and Access Management) y Lambda, Cloudformation, DMS, Glue, EMR, Kinesis e Iceberg AWS.

Misión

Contribuir al diseño, la implementación y la gestión de una infraestructura AWS escalable y segura. Implementar las mejores prácticas en materia de seguridad, rendimiento y optimización de costes. Crear automatizaciones y scripts para mejorar la eficiencia operativa. Participar en la configuración de componentes de red como: VPC, subredes y grupos de seguridad. Supervisar el rendimiento de las aplicaciones, las alertas y los registros. Mantener la documentación y elaborar informes de rendimiento.

Responsabilidades Técnicas
- Diseñar y crear arquitecturas de lago de datos escalables y eficientes.
- Integrar diferentes fuentes de datos en el lago de datos utilizando herramientas ETL (extraer, transformar, cargar).
- Garantizar la calidad, integridad y seguridad de los datos en el lago de datos.
- Colaborar con los equipos de análisis y ciencia de datos para proporcionar acceso a los datos necesarios.
- Supervisar el rendimiento del lago de datos y optimizar los procesos para mejorar la eficiencia.
- Documentar los procesos y procedimientos relacionados con el manejo de datos.

**Arquitectura de AWS**: comprensión de los principios de la arquitectura y los patrones de diseño de AWS para crear soluciones escalables y seguras. Infraestructura como código (IaC), CloudFormation, Terraform y AWS CLI. AWS Systems Manager: Familiaridad con para automatizar tareas, gestionar configuraciones y administrar instancias. Scripts de automatización: Capacidad para escribir scripts en Bash, Python o PowerShell para automatizar tareas administrativas y de configuración.

Adicionalmente colabora en procesos: Redes y Seguridad, Supervisión y Mantenimiento, Gestión de Datos, implementación y funcionamiento, mejores prácticas y patrones de arquitectura, solución de problemas, Costos.

Software y Herramientas
- Servicios sin servidor de AWS
- Infraestructura como código (Cloud Formation, Terraform)
- Control de versiones Git (Github, Gitlab)
- Python avanzado
- Ansible

**Nível de educación deseada**:
Superior - titulado

**Nível de experiência deseada**:
Nível Experto

**Función departamental**:
Tecnología / Internet

**Industria**:
Recursos Humanos

  • Data Engineer

    hace 1 semana

    Álvaro Obregón, México KAPITAL A tiempo completo

    **Descripción**: **¡Transforma el futuro de la tecnología con nosotros!** ¿Eres un/a Data Engineer apasionado/a por la innovación y el análisis de datos? En Kapital estamos buscando a alguien como tú para unirte a nuestro equipo. Si te entusiasma trabajar con grandes volúmenes de datos, crear pipelines eficientes y colaborar con equipos para crear...

  • Data Engineer

    hace 2 semanas

    Álvaro Obregón, México GA ENERGY A tiempo completo

    IMPORTANTE EMPRESA DEL SECTOR EN CIBERSEGURIDAD SOLICITA: **DATA ENGINEER** **UBICACIÓN: ALVARO OBREGÓN (TORRE MURANO)** **FUNCIONES**: - ANALISIS ESTADISTICOS CON HERRAMIENTAS PRINCIPALMENTE SQL EN AMBIENTE DE GRAFANA **Requisitos**: - LENGUAJES DE PROGRAMACIÓN PYTHON (INTERMEDIO O AVANZADO) Y PERL (BÁSICO) - BACKGROUND DE ANÁLISIS DE DATOS - MANEJO DE...

  • Data Science Sr

    hace 4 semanas

    Álvaro Obregón, México CONSUBANCO A tiempo completo

    **Institución de Banca Múltiple líder en el mercado mexicano en la colocación de créditos personales con descuento vía nómina en el sector gubernamental, con más de 3,000 colaboradores, por expansión solicita**:**Data Science Sr****Objetivo del puesto**:Diseñar, desarrollar y mantener pipelines de datos complejos y sistemas de almacenamiento para...

  • Data Science Sr

    hace 21 horas

    Álvaro Obregón, México CONSUBANCO A tiempo completo

    **Institución de Banca Múltiple líder en el mercado mexicano en la colocación de créditos personales con descuento vía nómina en el sector gubernamental, con más de 3,000 colaboradores, por expansión solicita**: **Data Science Sr** **Objetivo del puesto**: Diseñar, desarrollar y mantener pipelines de datos complejos y sistemas de almacenamiento...

  • Software Engineer

    hace 4 días

    Álvaro Obregón, México S&P Global A tiempo completo

    **About the Role**: **Grade Level (for internal use)**: 09 S&P Global Mobility Software Engineer **The Team**: **The impact**: **Responsibilities**: Building, analyzing and troubleshooting custom reporting and maintaining a book of assigned cyclical tasks and customer deliverables. Gathering and interpreting business requirements. Query tuning preferably...

  • Cloud DevOps Engineer

    hace 2 semanas

    Álvaro Obregón, México S&P Global A tiempo completo

    **About the Role**: **Grade Level (for internal use)**: 10 S&P Global Automotive Insights **The Role**: Cloud DevOps Engineer **The Impact**: This role is crucial to the business as it directly contributes to the development and maintenance of cloud-based DevOps solutions on the AWS platform. **What’s in it for you**: **Drive Innovation**: Join a dynamic...

  • Ingeniero Data Science Sr

    hace 1 semana

    Álvaro Obregó, Brazil, México Consubanco A tiempo completo

    Institución financiera líder en la colocación de créditos con descuento vía nómina, donde lo más importante es el personal que la integra y la calidad con la que atendemos a nuestros clientes. Con presencia en toda la república mexicana y con más de 2000 colaboradores, te invita a que formes parte de su equipo cómo:INGENIERO DATA SCIENCE...

  • Data Science Sr

    hace 1 semana

    Álvaro Obregó, Brazil, México Consubanco A tiempo completo

    Institución de Banca Múltiple líder en el mercado mexicano en la colocación de créditos personales con descuento vía nómina en el sector gubernamental, con más de 3,000 colaboradores, por expansión solicita: Data Science Sr Objetivo del puesto:Diseñar, desarrollar y mantener pipelines de datos complejos y sistemas de almacenamiento para garantizar...

  • Ai/ml Lead Engineer

    hace 1 semana

    Álvaro Obregón, México S&P Global A tiempo completo

    **About the Role**: **Grade Level (for internal use)**: 11 The Role: AI - Lead **The Team**: The Foreseer team delivers digital transformation solutions at SPGMI for information extraction from structures and semi structured documents and websites. Foreseer is a human in the loop platform that combines latest AI/ML advances with a state of the art UI for...

  • Principal Site Reliabilty Engineer

    hace 2 días

    01000, Álvaro Obregón, CDMX, México S&P Global A tiempo completo

    **About the Role**: **Grade Level (for internal use)**: 11 **The role**: Principal Site Reliability Engineer **The team**: Automotive Insights leverages technology and data science to provide unique insights, forecasts and advisory services spanning every major market and the entire automotive value chain—from product planning to marketing, sales, and the...