Basée à Lille, Lyon, Nantes, Grenoble et Bruxelles, Insitoo Freelances est une société du groupe Insitoo, spécialisée dans le placement et le sourcing des Freelances IT et Métier. Depuis 2007, Insitoo Freelances a su s’imposer comme une référence en matière de freelancing par son expertise dans l’IT et ses valeurs de transparence et de proximité. Actuellement, afin de répondre aux besoins de nos clients, nous recherchons un DATA Engineer Big Data (H/F) à Ville de Paris, Île-de-France, France.

Les missions attendues par le DATA Engineer Big Data (H/F) sont :

=> Conception/Préconisation

• Porteur de la création des nouveaux use cases

• Analyses de besoins métier concernés

• Conception du nouveau use case big Big Data en adéquation avec l’architecture fonctionnelle

Interne

• Vérification et analyse des impacts techniques des solutions retenues (vue logique et vue physique), en lien avec l’architecte de l’infrastructure Big data.

• Analyse de la qualité des données sources et conception des règles de mise en qualité

• Conception de la stratégie de recette (cas de tests, cahier de recette)

• Pour tout nouveau projet/use case ou toute nouvelle technologie, participation à l’étude d’impact sur l’architecture

existante ou prévisionnelle et préconisation des choix techniques en vue d’assurer la cohérence de cette évolution

=> Réalisation

• Participe à la mise en œuvre l’architecture fonctionnelle choisie

• Développe la solution retenue (flux entrant, ingestion des bases, transformation, extraction, flux sortant, etc.) :

scripts de traitement, ordonnancement, tableaux de bord

• Réalise les tests et recettes adéquats

=> MCO

• Maintenance en condition opérationnelle des uses cases

• Réalisation de l’évolution le cas échéant tout en assurant la non-régression des produits proposés.

=> Coordination/Communication

• Coordination des échéances de pour le(s) use-case(s) dont le consultant est responsable.

• Travail en équipe avec le Métier et l’architecture du SI

• Documentation des choix techniques et des fonctionnements des use cases IVC

Compétences :

• Maitrise des frameworks bigdata (Hadoop, Hive, Spark, Tez, etc.) et les outils associés d’exploration/de

manipulation (Ambari, Zeppelin, HDFS, etc.)

• Maitrise des langages de programmation suivantes : bash, sed, awk, hql/sql, python/scala

• Solide expérience pour les plateformes HDInsight, databricks et éventuellement AWS

• Solide expérience de cloud storage Azure Data Lake Storage Gen2.

• Expériences d’usage d’un outil d’ordonnancement des jobs, de préférence Rundeck

• Maitrise de différents formats de données SQL (managed/external), Parquet, XML, JSON, CSV, XLSX et éventuellement Delta

TJM Prix d’achat max pour cette mission à 400€ HT.

Compétences techniques et fonctionnelles attendues :

– Bash – Souhaitable
– Big data – Confirmé – Indispensable
– Hadoop – Confirmé – Indispensable

Cette mission vous intéresse?

Vous justifiez d’une expérience significative comme DATA Engineer Big Data (H/F) ?
Vous êtes rigoureux, méthodique, organisé et vous savez faire preuve d’autonomie et de réactivité ?
Vous êtes à l’aise à l’écrit comme à l’oral ?
Vous maîtrisez les périmètres techniques cités avec les niveaux adéquats ?
Vous aimez évoluer dans un univers où l’autonomie, la prise d’initiatives, le partage et le travail en équipe sont porteurs de la réussite collective ?
Vous pensez que votre profil pourrait correspondre au besoin de notre client ?

N’attendez plus pour déposer votre candidature, nos Ingénieurs d’affaires se feront un plaisir de vous en dire plus !

Afin de ne rien rater de l’actualité Insitoo, abonnez-vous à notre page Linkedin !