Senior Data Ingestion

Hace 2 días

neuquén, Argentina Bluelight Consulting, Llc Jornada completa

LT Data Integration Engineer

En Ready Buscamos un(a) LT Data Integration Engineer con experiencia en el diseño, desarrollo y operación de soluciones de integración de datos empresariales utilizando Informatica Intelligent Data Management Cloud (IDMC) como plataforma principal. Será responsable de construir, optimizar y administrar pipelines de datos para alimentar Databricks Lakehouse, garantizando soluciones escalables, eficientes y alineadas con las necesidades del negocio.

La persona ideal cuenta con experiencia en herramientas ETL/ELT, ambientes cloud (Azure, AWS y deseable GCP) y desarrollo asistido por inteligencia artificial mediante CLAIRE GPT y CLAIRE Copilot.

Responsabilidades

  • Diseñar, desarrollar e implementar pipelines de ingesta, transformación y distribución de datos utilizando Cloud Data Integration (CDI) y Cloud Mass Ingestion (CMI).
  • Construir y optimizar procesos ETL/ELT hacia Databricks Lakehouse utilizando IDMC for Databricks y patrones Delta Lake.
  • Migrar procesos desarrollados en PowerCenter hacia Informatica IDMC mediante metodologías estructuradas y aceleradores de migración.
  • Administrar y mantener la infraestructura de integración (Secure Agents y Runtime Environments), garantizando el cumplimiento de los SLA establecidos.
  • Implementar integraciones mediante Cloud Application Integration (CAI) para APIs, procesos de negocio y microservicios.
  • Aplicar CLAIRE GPT y CLAIRE Copilot para acelerar el desarrollo, depuración y documentación automática de pipelines.
  • Monitorear el consumo de Informatica Processing Units (IPU) y proponer mejoras en costos y rendimiento.
  • Colaborar con equipos multidisciplinarios para garantizar la disponibilidad, calidad y escalabilidad de las soluciones de integración.

Conocimientos Técnicos

  • Informatica IDMC
    • Cloud Data Integration (CDI).
    • Mapping Designer.
    • SQL ELT con Pushdown Optimization.
    • Taskflows.
    • Mapping Partitioning.
    • Dynamic Mappings.
    • Parameterización.
    • File Listeners.
    • Intelligent Structure Models.
    • Performance Tuning.
    • Cloud Mass Ingestion (CMI):
    • Mass Ingestion Databases (CDC).
    • Files.
    • Applications.
    • Streaming.
    • Cloud Application Integration (CAI).
    • Administración de Secure Agents y Runtime Environments.
    • Migración de PowerCenter a IDMC.
  • Databricks
    • Integración de IDMC con Databricks Lakehouse.
    • Delta Lake.
    • Databricks SQL.
    • Databricks Connector (Partner Connect).
    • Conocimiento de Unity Catalog.
    • Orquestación de procesos parametrizados.
  • Desarrollo asistido por IA
    • Experiencia utilizando CLAIRE GPT y CLAIRE Copilot.
    • Conocimiento de CLAIRE Agents (deseable).
  • Cloud
    • Azure
      • Azure Data Factory (ADF).
      • Azure Data Lake Storage Gen2.
      • Azure Key Vault.
      • Azure Databricks.
    • AWS
      • Glue.
      • S3.
      • Step Functions.
      • Redshift.
      • Athena.
      • EventBridge.
    • Deseable GCP
      • BigQuery.
      • Cloud Composer.
  • Infraestructura como Código (IaC) y CI/CD
    • Terraform.
    • CloudFormation.
    • GitHub o Bitbucket.
    • Jenkins.
  • Bases de datos
    • SQL avanzado (Oracle, SQL Server, PostgreSQL, Redshift y Databricks SQL).
    • Deseable experiencia en MongoDB y DynamoDB.
    • Conocimiento de arquitecturas Data Warehouse, Data Lake y Lakehouse.

Otros Requisitos

  • Inglés B2+ o C1 (indispensable).
  • Experiencia en diseño, desarrollo y operación de soluciones de integración de datos utilizando Informatica IDMC.
  • Experiencia implementando soluciones sobre Databricks.
  • Experiencia trabajando en entornos cloud (Azure, AWS y deseable GCP).

Certificaciones

  • Informatica Cloud Data Integration Developer Professional Certification (ICP). (Requerida)
  • Informatica IDMC Foundation / Data Engineering Foundation. (Deseable)
  • Informatica Cloud Application Integration Developer Professional Certification. (Deseable)
  • Databricks Certified Data Engineer Associate. (