Offre d'Emploi : DATA ENGINEER H/F chez Apside
Description du poste : Nous sommes à la recherche d'un Data Engineer passionné pour rejoindre notre équipe dynamique. Si vous avez une expertise dans le Big Data, la Data Science, l'analyse de données et l'architecture de données, cette opportunité est faite pour vous. Intégrer notre communauté Data, c’est l’assurance de progresser, innover, partager, vous certifier et rendre service à nos clients.
Vos missions :
- Développement des jobs Spark pour la collecte et la transformation des données comptables disponibles dans les bucket S3.
- Optimisation des jobs Spark.
- Développement des batchs Java et écriture des données au formats comptables.
- Écriture et ordonnancement des DAGs Airflow.
- Support du développement Spark Scala.
- Maintenance applicative.
- Production des événements dédiés à la plateforme de données.
.
Votre rôle, vos compétences :
- Vous maîtrisez au minimum un langage de programmation appliqué à l’analyse de données (SQL, Scala, Python, Java).
- Vous êtes passionné par le Big Data et le Machine Learning.
- Vous concevez et mettez en œuvre des stratégies sécurisées d'acquisition et d'intégration de données.
- Vous configurez des référentiels de données à la pointe de la technologie dans des environnements distribués, majoritairement dans le cloud (Google Cloud Platform, Azure, AWS) et/ou en environnement Hadoop (distribution MapR, Cloudera, Hortonworks).
Environnement technique :
- SQL
- Python/Spark
- Cloud AWS: AWS Glue, AWS Lambda (possibilité de vous former sur AWS)
- Stockage objet (AWS S3)
- Orchestration et scheduling de tâches (Apache Airflow)
- Bases analytiques et bases NoSQL (ElasticSearch, AWS Athena)
Rejoignez-nous et apportez votre touche à l'évolution d'Apside !
Apside s'engage pour l'emploi des personnes en situation de handicap avec Apsid'EA.
Apside : L'expertise technologique avec une touche humaine.
