Ingeniero de Datos AWS
Austin
Ingeniero de Datos AWS
Tiempo completo • Austin
Puesto: Ingeniero de Datos de AWS
Ubicación: Austin, TX (Híbrido)
Responsabilidades clave:
- Desarrollar y ejecutar una hoja de ruta estratégica para el procesamiento, almacenamiento y análisis de datos alineada con los objetivos organizativos.
- Diseñar, implementar y mantener canalizaciones de datos robustas utilizando Python y Airflow, asegurando un flujo y transformación de datos eficientes para fines analíticos y operativos. Experiencia con Python, Airflow, S3, Spark (Glue, EMR), Kafka (SQS, Event Bridge), integración (AppFlow, APIs), AWS Services, Redshift, EMR, DW Concepts y modelado de datos.
- Utiliza servicios de AWS, incluyendo S3 para almacenamiento de datos, Glue y EMR para el procesamiento de datos, y orquesta flujos de trabajo de datos que sean escalables, fiables y seguros.
- Implementa soluciones de procesamiento de datos en tiempo real usando Kafka, SQS y Event Bridge, abordando necesidades de ingesta y streaming de datos de alto volumen.
- Supervisa la integración de diversos sistemas y fuentes de datos a través de AppFlow, APIs y otras herramientas de integración, garantizando un intercambio y conectividad de datos sin interrupciones.
- Desarrollar soluciones de almacenamiento de datos, aplicando las mejores prácticas en modelado de datos para apoyar el almacenamiento, recuperación y análisis eficientes de datos.
- Monitorizar, optimizar y solucionar problemas continuamente las canalizaciones de datos e infraestructura para garantizar un rendimiento y escalabilidad óptimos.
- Garantizar el cumplimiento de las políticas de gobernanza de datos, privacidad y seguridad, implementando medidas para proteger los datos sensibles y cumplir con los requisitos regulatorios.
Cualificaciones:
- Grado o máster en Informática, Ingeniería o un campo relacionado.
- 8-10 años de experiencia en ingeniería de datos
- Tengo conocimientos de programación en Python y tengo experiencia con Airflow para la gestión de flujos de trabajo.
- Amplia experiencia en servicios en la nube de AWS, especialmente en almacenamiento, procesamiento y análisis de datos (S3, Glue, EMR, etc.).
- Experiencia con tecnologías de streaming en tiempo real como Kafka, SQS y Event Bridge.
- Sólido conocimiento de integraciones basadas en API y familiaridad con herramientas de integración como AppFlow.
- Profundo conocimiento de conceptos de almacenamiento de datos, técnicas de modelado de datos y experiencia en la implementación de soluciones de almacenamiento de datos a gran escala.
- Demostró su capacidad para liderar y orientar equipos técnicos, con excelentes habilidades de comunicación y gestión de proyectos.
Compensación: 50,00 $ - 60,00 $ la hora
Con nuestro centro de innovación construimos productos de primer nivel utilizando tecnologías basadas en IA, ML y la Nube. Combinamos tecnologías emergentes con soluciones de talento que fomentan el crecimiento de nuestros clientes.
Empodera a tu plantilla con equipos creativos y sostenibles que sean escalables, más rápidos y orientados al valor.
(si ya tienes un currículum en Indeed)