CAS CLIENT - DATA

CAS CLIENT – BIG DATA

Architecture

Création et mise en œuvre d’une plateforme Big Data.

Contexte & objectif

  • Explosion des besoins de valorisation de la donnée.
  • Centre de compétence, outillage et processus communs.
  • Ingestion, traitement et exposition multi-sources.
  • Time-to-Market réduit et gouvernance renforcée.
Schéma Architecture Big Data
Architecture logique cible (exemple).

Notre accompagnement

  1. Cadrage, exigences QoS & sécurité.
  2. Design de la plate-forme & datalake.
  3. Modèle CI/CD & automatisation des déploiements.
  4. Observabilité et runbook d’exploitation.
Expertises mises en œuvre
  • Architecte BigData
  • Ingénieur Hadoop
  • ELK / Kafka
  • Spark / Scala
  • Scrum Master
Outils
  • Spark
  • Kafka
  • Elastic
  • Jenkins
  • Scala
  • Python
  • Azure
  • Hortonworks

CAS CLIENT – BIG DATA

Administration

Centre de Service Big Data – MCO/MCS, GDI, GDC.

Contexte & objectif

  • Plateforme Azure + Kafka + Spark en production.
  • Besoin d’un support N2/N3 et d’industrialisation.
  • Procédures d’exploitation & sécurité homogènes.

Notre accompagnement

  1. MCO/MCS : patching, sauvegardes, sécurité.
  2. GDI/GDC : incidents & changements.
  3. Supervision et reporting mensuel.
Outils
  • Kafka
  • Elastic
  • Azure
  • Cloudera
  • Spark

CAS CLIENT – DATA

Data Science

Exploration, data quality, modélisation & déploiement.

Contexte & objectif

  • Analyse d’un volume hétérogène multi-sources.
  • Maintenance & diagnostic croisé des modèles.
  • Chaîne de bout en bout jusqu’à la mise en prod.

Notre accompagnement

  1. Exploration & data quality.
  2. Features, entraînement & évaluation.
  3. Industrialisation (MLOps) & monitoring.
Outils
  • Python
  • Jupyter
  • Spark
  • Grafana
  • Scala
  • Hortonworks

CAS CLIENT – DATA

Data Engineering

Contexte & objectif

  • Intégration temps réel + batch.
  • Data Lake / Lakehouse (Databricks?).

Notre accompagnement

  1. Design pipelines & gouvernance.
  2. CI/CD & tests de données.
Outils
  • Databricks
  • Airflow
  • Delta Lake
  • dbt

CAS CLIENT – DATA

Data Analysis

Contexte & objectif

  • Self-BI & data-viz gouvernée.

Notre accompagnement

  1. Modèles sémantiques & KPI.
  2. Catalogage & partage sécurisé.
Outils
  • Power BI
  • Looker
  • Tableau

CAS CLIENT – DATA

Data Ops

Contexte & objectif

  • Qualité, conformité, observabilité data.

Notre accompagnement

  1. Tests de données & SLA.
  2. Alerting & runbook.
Outils
  • Great Expectations
  • OpenLineage
  • Prometheus

CAS CLIENT – DATA

Data Governance

Contexte & objectif

  • RGPD, catalogue, rôles & responsabilités.

Notre accompagnement

  1. Politiques & glossaire.
  2. Process de qualité & conformité.
Outils
  • Purview
  • Collibra
  • OpenMetadata