Description de l'offre
Description du poste
Votre futur environnement de travail :
Intégré(e) au sein de l'une de nos agences à Bordeaux, vous rejoignez une équipe Data et prenez une part active aux projets délivrés pour le compte d’un grand client.
Votre rôle et vos missions :
Vous intégrez l’équipe d’Intégration de la Donnée, équipe responsable de la gestion des données, garantissant qu’elles sont collectées, préparées et intégrées de manière fiable pour alimenter les analyses et les applications de l'équipe Big Data. Vous jouez un rôle clé dans la transformation des données brutes en informations exploitables.
- Collecte de Données
- Extraction, Transformation et Chargement (ETL)
- Intégration des Données Structurées et Non Structurées
- Gestion des Flux de Données en Continu
- Sécurité des Données
- Gestion des Métadonnées
- Performance et Évolutivité
- Collaboration avec les Autres Équipes
- Planification et Automatisation
- Maintenance et Surveillance
Environnement technologique :
- Plateformes : Cloudera Data Platform et Openshift / Kubernetes
- Ingestion : Kafka, Camel, Benthos
- Orchestration : Airflow/Argo
- Stockage données brutes : Ceph/MinIO, Parquet, Avro, Iceberg
- Stockage données structurées : PostgreSQL, MongoDB, Oracle Database
- Traitements : Spark, Pyspark, Scala, Java
- Exploration : Trino/Dremio, Jupyter, Hive/Beeline, Dataiku
- CI/CD : Gitlab, Harbor
- Datavisualisation : Superset, DigDash, IHM Angular