Data Engineer AWS
Published | September 21, 2023 |
Location | Paris, France |
Category | Default |
Job Type | Full-time |
Description
Frank Recrutement Group, cabinet de niche en recrutement depuis 2006, spécialisé dans les métiers du digital et de l'IT.
Ce dernier est doté d'une forte expertise métier par industrie, qui se traduit en solutions intégrées et innovantes : Data, IA, Blockchain , IOT, Cloud…lui permettant ainsi d'accompagner ses clients dans la définition et la mise en œuvre de leur transformation digitale, de bout en bout.
Responsabilités :
- Conception de l'infrastructure de données :
- Concevoir et mettre en place l'architecture de données sur AWS en utilisant des services tels que Amazon S3, Amazon Redshift, Amazon RDS, etc.
- Élaborer des plans d'archivage, de sauvegarde et de reprise après sinistre pour garantir la disponibilité des données.
- Collecte et ingestion de données :
- Développer des pipelines ETL pour l'extraction, la transformation et le chargement des données à partir de diverses sources.
- Assurer l'intégrité des données et la qualité en mettant en place des contrôles de validation.
- Gestion de données :
- Maintenir et optimiser les entrepôts de données pour répondre aux besoins de l'entreprise en matière de performances et d'évolutivité.
- Gérer les autorisations d'accès aux données conformément aux politiques de sécurité.
- Automatisation et surveillance :
- Automatiser les tâches récurrentes liées à la gestion des données.
- Mettre en place des mécanismes de surveillance pour détecter les problèmes de performances ou de qualité des données.
- Collaboration interfonctionnelle :
- Collaborer avec les équipes d'analyse de données, de développement d'applications et d'architecture pour répondre aux besoins métier.
Compétences requises :
- Connaissance approfondie des services AWS, en particulier ceux liés à la gestion des données.
- Expérience en conception et en gestion d'entrepôts de données.
- Maîtrise des outils ETL tels que Apache Spark, AWS Glue, ou d'autres.
- Compétences en programmation (Python, SQL, etc.).
- Compréhension des principes de sécurité des données et de conformité.
- Bonnes compétences en communication et en résolution de problèmes.
- Capacité à travailler en équipe et à gérer des projets de données complexes.
Qualifications :
- Diplôme en informatique, en informatique décisionnelle, en sciences des données ou dans un domaine connexe.
- Certification AWS
- Expérience professionnelle antérieure en tant qu'ingénieur de données ou dans un rôle similaire.