Posté : 17 avril 2023
Concepteur Développeur BIG DATA – (H/F)
Paris et périphérie
Mission longue
Dès que possible
Selon profil
Basée à Lille, Lyon, Nantes, Grenoble et Bruxelles, Insitoo Freelances est une société du groupe Insitoo, spécialisée dans le placement et le sourcing des Freelances IT et Métier. Depuis 2007, Insitoo Freelances a su s’imposer comme une référence en matière de freelancing par son expertise dans l’IT et ses valeurs de transparence et de proximité. Actuellement, afin de répondre aux besoins de nos clients, nous recherchons un Concepteur Développeur BIG DATA – (H/F) à Paris et périphérie.
Fonctionnement : sur site (3J) + télétravail
L’objectif global de cette mission consiste à la maintenance du bon fonctionnement et le cas échéant à l’évolution de l’application en conformité avec des spécifications fonctionnelles des données et KPI de comptage. Cet objectif global peut se concrétise en 4 volées, à savoir analyse, réalisation, qualification et maintenance.
Les missions attendues par le Concepteur Développeur BIG DATA – (H/F) sont :
Analyse
-
Analyse des spécifications (sources de données, format et contenu associés) avec prise en compte des pratiques actuelle ou à évoluer de la base
-
Etablissement/amendement des spécifications techniques pour les programmes d’équipement des cellules de comptages à venir.
-
Travail en équipe avec l’expert BI et le métier pour la transcription des besoins en briques input/output
Réalisation
-
Réalisation des mises en base et des productions de KPI selon les datamarts du projet spécifiques aux types de comptages
-
Réalisation des rattrapages au besoin
-
Développement/adaptation (bash, hive, spark, etc.) des algorithmes selon l’évolution éventuelle du cahier de charge et/ou de la source de données.
-
Optimisation de ces codes si nécessaire.
-
Rédaction/modification de la documentation correspondant aux datamarts de la base
Qualification : Dans le cas de des évolutions (fonctionnelle/technique)
-
Elaboration de jeux d’essais supplémentaires (tests unitaires et d’intégration)
-
Réaliser des tests
-
Analyse et correction des anomalies
Maintenance
-
Maintenance curative : être en contact avec les utilisateurs pour recenser puis corriger des anomalies/incohérences.
-
Maintenance évolutive : participer avec l’architecte bigdata et des homologues d’autres uses case dans le projet IVC, le cas échéant, à la réflexion et à la réalisation des maintenances évolutives (migration de plateforme, nouvelles fonctionnalités).
Compétences requises :
La mission nécessite des connaissances SI importantes. Une expérience d’au moins 5 ans dont au moins 3 ans en tant que concepteur-développer bigdata est nécessaire, de préférence dans un contexte multi-métiers. Comme la mission s’inscrit dans la continuité d’un projet, la maitrise de ses technologies est primordiale.
-
Maitrise des frameworks bigdata (Hadoop, Hive, Spark, Tez, etc.) et les outils associés d’exploration/de
-
manipulation (Ambari, Zeppelin, HDFS, etc.)
-
Maitrise des langages de programmation suivantes : bash, sed, awk, sql, python/scala
-
Expérience d’un outil de gestion de tiket, de préférence JIRA
-
Solide expérience pour les plateformes HDInsight, AWS et éventuellement databricks
-
Solide expérience de cloud storage Azure Data Lake Storage Gen2 et AWS S3
-
Expériences d’usage d’un outil d’ordonnancement des jobs, de préférence Rundeck
-
Maitrise de différents formats de données SQL (managed/external), Parquet, XML, JSON, CSV, XLSX et éventuellement Delta
Cette mission vous intéresse?
Vous justifiez d’une expérience significative comme Concepteur Développeur BIG DATA – (H/F) ?
Vous êtes rigoureux, méthodique, organisé et vous savez faire preuve d’autonomie et de réactivité ?
Vous êtes à l’aise à l’écrit comme à l’oral ?
Vous maîtrisez les périmètres techniques cités avec les niveaux adéquats ?
Vous aimez évoluer dans un univers où l’autonomie, la prise d’initiatives, le partage et le travail en équipe sont porteurs de la réussite collective ?
Vous pensez que votre profil pourrait correspondre au besoin de notre client ?
N’attendez plus pour déposer votre candidature, nos Ingénieurs d’affaires se feront un plaisir de vous en dire plus !
Afin de ne rien rater de l’actualité Insitoo, abonnez-vous à notre page Linkedin !
Référence : 16-BDATA-NT