Arquitecto Big Data

Objetivo del Cargo:

El objetivo del cargo es cubrir la solicitud del cliente para soportar las iniciativas del frente de soluciones sobre la base de Analítica Avanzada + IA

Funciones y responsabilidades:

1. Diseñar e implementar soluciones de Big Data.
2. Diseñar e implementar soluciones de Inteligencia Artificial basada en los datos.
3. Diseñar e implementar soluciones de inteligencia de negocios (BI).
4. Apoyar y direccionar la codificación y diseño de soluciones de gestión de datos.
5. Crear soluciones que den respuesta a las necesidades técnicas de análisis de big data, incluyendo el flujo de datos, modelos de pronóstico y clasificación, modelos de optimización, modelos de simulación, integración y transformación de datos, bases de datos, datalakehouses y bodegas de información.
6. Apoyar la estandarización del modelo de datos de los proyectos asignados según las directrices tecnológicas de la empresa y las arquitecturas de referencia definidas.
7. Participar en el desarrollo de protocolos y mejores prácticas para poner en práctica las normas sobre gestión de datos.
8. Integración de servicios cognitivos y de AI para tratamiento de imágenes, audio y texto integrados dentro de los procesos de extracción, transformación y procesamiento de los datos.
9. Dominio de arquitecturas de data lakehouse, hadoop, procesamiento de información sobre capas de persistencia teniendo en cuenta criterios de temperatura de los datos, niveles de acceso y disposición.
10. Garantizar el cumplimiento de las normas y directrices para la gestión y aseguramiento de los datos y los sistemas de datos.
11. Aportar en la toma decisiones de arquitectura a nivel de equipo y producto.
12. Diseñar y participar en la creación de modelos que den respuesta a las necesidades técnicas de análisis de big data, incluyendo el flujo de datos, integraciones, bases de datos y almacenes de datos y aplicación de modelos de inteligencia artificial sobre los mismos para obtener resultados disruptivos.
13. Participar en la definición del modelo de gobierno de datos y la arquitectura de datos.
14. Participar en el diseño de entidades de datos y de flujos de información asociados a cada proceso de negocio.
15. Definir de manera conjunta con el cliente los acuerdos de los entregables a generar para cada uno de los servicios entregados de acuerdo con su categoría.
16. Velar por el cumplimiento de atención en los ANS´s establecidos.

Conocimientos requeridos:

1. Python usando Pyspark, Sqlspark
2. RESTful API, OData
3. Azure Synapse Analytics (SQL Pool, Spark Pool)
4. Azure (CDN, Key vault, API Management, Data Factory, AKS y App Services, Storage Account, Data Bricks, Data Explorer, Data Fabric, Data Factory)
5. SQL Server
6. Azure DevOps (Repos y Pipelines)
7. Implementación pruebas unitarias
8. Uso de herramientas para análisis de código estático
9. Uso de herramientas para análisis de código seguro
10. Experiencia en metodología Scrum

Conocimientos deseables:

1. Servicios cognitivos (Azure, AWS, GCP)
2. Servicios de exploración y presentación de datos
3. Plataformas de autoservicio de inteligencia de negocios