Un data ingénieur professionnel est compétent en prise de décision basée sur les données, en collectant, transformant et publiant des données. Il doit être capable de concevoir, construire, opérationnaliser, sécuriser et surveiller des systèmes de traitement de données en mettant particulièrement l'accent sur la sécurité et la conformité ; évolutivité et efficacité ; fiabilité et fidélité; et flexibilité et portabilité
Un data ingénieur doit également être en mesure d'exploiter, de déployer et de modéliser en continu des modèles d'apprentissage automatique préexistants.
L'examen Professional Data Engineer évalue votre capacité à :
• Concevoir des systèmes de traitement de données
• Construire et opérationnaliser des systèmes de traitement de données • Opérationnaliser des modèles d'apprentissage automatique
Microsoft Certified: Azure Data Engineer Associate
Obtenu le 25 Avril 2023
Les candidats à cette certification doivent avoir une expertise en matière d’intégration, de transformation et de consolidation des données provenant de différents systèmes de données structurées, non structurées et de streaming dans un schéma adapté à la génération de solutions d’analytique.
Les Ingénieurs Données Azure aident les parties prenantes à comprendre les données par le biais de l’exploration, et créent et gèrent des pipelines de traitement de données sécurisés et conformes à l’aide de différents outils et techniques. Ces professionnels utilisent différents services et frameworks de données Azure pour stocker et produire des jeux de données nettoyés et optimisés pour l’analyse. Ce magasin de données peut être conçu avec différents modèles d’architecture en fonction des exigences de l’entreprise, y compris l’architecture Entrepôt de données moderne (MDW, Modern Data Warehouse), Big Data ou lakehouse.
Les ingénieurs Données Azure veillent également à ce que les pipelines de données et les magasins de données opérationnels restent très performants, efficaces, organisés et fiables, en fonction d’un ensemble d’exigences et de contraintes métier. Ces professionnels aident à identifier et à résoudre les problèmes opérationnels et de qualité des données. Ils conçoivent, implémentent, surveillent et optimisent également les plateformes de données pour prendre en charge les pipelines de données.
Les candidats à cette certification doivent avoir une solide connaissance des langages de traitement des données, comme SQL, Python et Scala, et doivent comprendre le traitement parallèle et les modèles d’architecture de données. Ils doivent savoir utiliser Azure Data Factory, Azure Synapse Analytics, Azure Stream Analytics, Azure Event Hubs, Azure Data Lake Storage et Azure Databricks pour créer des solutions de traitement des données.
Dans ce certificat professionnel, les apprenants ont développé et perfectionné des connaissances et des compétences essentielles indispensables à l'insertion dans la veille technologique et dynamique de la cybersécurité d'aujourd'hui.
Les apprenants ont développé des connaissances sur les outils d'analyse de la cybersécurité, la protection des données ; protection du matériel (hardware, devices) ; la notion et l'utilisation d'outils SIEM ; les fondamentaux des systèmes et des réseaux ; acquis des connaissances sur les principaux sujets de conformité et de renseignement sur les menaces conséquentes dans le flux actuel de la cybersécurité ; acquis des compétences afin d'apporter des réponses aux incidents et en criminalistique.
Les connaissances et les compétences de l'apprenant ont été testées au moyen de multiples évaluations tout au long des cours, des études de cas de hacking mondial en temps réel sous forme de labs virtuels.
L'apprenant a également obtenu une note de passage à un cours d'évaluation finale couvrant tout le contenu des sept cours précédents.
Direction Stratégique et Opérationnelle : Conduite globale des systèmes d'information et de la stratégie data, définissant la vision à long terme, planifiant les initiatives et assurant leur mise en œuvre opérationnelle en étroite collaboration avec la direction générale.
Migration d'ERP et Systèmes Métiers :
Migration de BLG à Sage X3 : Pilotage complet du projet de migration, incluant l'analyse des données existantes, l'extraction, la transformation et le chargement (ETL) des données pour garantir une transition sécurisée et sans interruption des activités.
Coordination des échanges de données entre les systèmes, assurant intégrité et cohérence lors de la bascule vers le nouvel environnement Sage X3.
Développement de Solutions Métiers :
Génération d'étiquettes automatisées : Conception et développement d'un logiciel Windows pour générer automatiquement des étiquettes logistiques à partir des données métiers, avec une intégration en temps réel via les web services de Sage X3.
Extraction et traitement de documents fournisseurs : Mise en place d'outils automatisés utilisant l'OCR pour extraire et traiter les documents (format blob), convertissant ces informations en données exploitables dans Sage X3 et les logiciels métiers internes existants.
Optimisation et Supervision d'ERP : Mise en place d'extractions quotidiennes, de transformations et de chargements de données pour alimenter les différents services, garantissant la performance et l'adaptation du nouvel ERP aux besoins métiers.
Gestion de l’Infrastructure IT : Rationalisation des coûts et optimisation de l'infrastructure informatique, assurant une performance accrue et une sécurité renforcée des systèmes.
Innovation Technologique : Intégration avancée de solutions d'intelligence artificielle et développement d'un LLM en interne, apportant une réelle pertinence aux données utilisées dans notre base de connaissance interactive technique.
Résilience et Protection des Données : Mise en œuvre de stratégies robustes pour garantir la résilience et la souveraineté des données, assurant la continuité et la sécurité opérationnelle.
Transformation digitale d’entreprise d’éditeur de logiciel d’échange de données informatisées (EDI) en vue d’évoluer en tant que plateforme de dématérialisation partenaire (PDP) de l’état dans le cadre de la réforme Française sur la facturation électronique 2024-2026
Gestion de la transformation structurelle de ARTEVA en PDP:
Préparation à la certification ISO27001 obtenue avec succès;
Gestion et rédaction de la RGPD de l’entreprise en conformité avec les exigences requises.
Gestion du projet de migration des données clients en vue de la préparation à la certification SecNumCloud -Côté juridique et gestion comptable : rédaction de documents de vulgarisation à destination des entreprises à partir des spécificités externes de l’AIFE
Gestion de projet clients:
Mise en place des projets de la création à la mise en application des plans d’action de la conformité des entreprises (ETI et GE) à la réforme facturation électronique (formation, audit, analyses, comptes rendus d’audit,
Modélisation puis définition des plans d’action,
Gestion des équipes data engineer, développeurs, et techniciens du début de leurs réalisations jusqu’à la livraison du projet selon les méthodes mises en place
En tant que data engineer: Réalisation des mappings à partir des jeux d’essais et mappings des clients Modélisation des fichiers de données d’échange (du fichier « Plat », fichier pivot au format structuré de norme EDIFACT, CII, UBL, FacturX, S400, A/4 selon les normes EDI fonctionnelles actuelles
élaboration de la loi Française :
Participation aux groupes de travail GS1,FNFE, Galia, en liaison directe avec l’AIFE et du ministère de l’économie Française en vue d’élaboration, d’amélioration et clarification des lois, décrets, arrêtés liés au CGI et Code du commerce liés à la réforme FE 2024-2026;
Réalisation des supports de communication nationaux à partir des décrets, lois, arrêtés,
Audit du groupe sur l’ensemble des outils de gestion et de facturation en flux entrant et sortants
Formation par groupes des différentes entités à la facturation électronique 2024-2026
Mise en place des projets de la création à la mise en application des plans d’action de la conformité des entreprises (ETI et GE) à la réforme facturation électronique
Modélisation puis définition des plans d’action, (rapport d’audit etc)
Gestion des équipes data engineer, développeurs, et techniciens du début de leurs réalisations jusqu’à la livraison des livrables selon les méthodes validées avec le pôle chef de projet Descours et celui d’Artéva (méthodologie SAFe)
Mise en place du POC de leurs solutions de facturations entrante et sortante niveau siège de solutions majoritairement Onpremises à l’architecture Azure en SaaS (20% environ) et Paas (80%)
**Environnement technique : ** tout est cité dans la liste des compétences
Enjeux en entreprise • Simplifier le travail de l’équipe logistique • Améliorer la traçabilité des actions • Centraliser les données logistique • Améliorer l’approvisionnement en stock • Gérer les processus d’intégration et livraison continue
Enjeux client • Amélioration des délais de réalisations d’installations • Éviter les pénuries en approvisionnement de pièces et produits nomenclaturés • Centraliser les données client afin d’élaborer des tableaux analytiques pertinents • Fournir les outils décisionnels • Améliorer la livraison continue des logiciels d’automatisation issus de Domino (TRIVEC)
Gestion achat et logistique par l’analytique prescriptive et prédictive, mise en place des projets ETL et intégration data, élaboration des rapports OLAP automatisés.
Actions • En interne : Création de la structure pour le Data hub TRIVEC HQ (interne)
Réalisation d’un module en PHP pour Dolibarr (CRM/ERP) afin d’ajouter plusieurs fonctions de référencement du stock national et par agence.
Élaboration des tableaux prévisionnels de gestion logistique, mise en place des indicateurs clés et gestion des achats.
• Ingestion des données SQL serveur du logiciel DOMINO (dev interne TRIVEC), en provenance des bases de données serveurs sites et transformation des données avant exposition dans BigQuery via Composer, Workflow,
• Constructions de pipelines via data Fusion, et de modèles dans Dataflow et Dataproc (lors de l’exécution de Spark, Hadoop …)
• Aide à la mise en place du Data Management et de bonnes pratiques au sein des équipes techniques et formation (national)
• Gestion d’une équipe de formateurs sur le plan national dans le cadre des demandes de data analyse, et demandes d’études de projets en transformations de données.
• Participation à la valorisation en vue de création des pôles de data ingénieur et data analystes suite aux résultats expérimentés chez les clients-pilotes
Résultats
L'entreprise a pu économiser , optimiser le stock et éviter les pénuries fournisseurs au mieux durant la période post-COVID grâce à l'analyse des données.
Augmentation du CA grâce aux prestations d'analyse data
Mise en place de solutions d’encaissement et de contrôle de bar automatisées : Gestion de projets, mise en place de l’envoi de rapport quotidien par e-mail via tableaux OLAP, gestion des bases de données
Contexte++ Trivec est une entreprise proposant un système d'encaissement avec contrôle de bar automatisé. Les principaux clients sont pour la plupart des casinos,restaurants et hôtellerie d'exception, chaines de restaurants.
Actions
installation de systèmes d'encaissement , d'automatisation par réseau échelon création et saisie de la base article, configurations et routing des travaux d'impression, paramétrage des automates et configuration des Nodes échelons
Formation présidentielle et distante.
Support technique en infogérance,
Génération de tableaux OLAP, exportations de données
Réparation du matériel
Extraction des données, réparations de BDD, opérations de maintenances BDD
Formation en présentiel et distanciel sur les principaux logiciels DINO et DOMINO (Softwares TRIVEC)
Bureau d'étude : conception des réseaux d'automatisation et réseaux IP
l'entreprise ACDC est spécialisée en systèmes d'encaissement, vidéosurveillance et monnayeur. Mon rôle était d'intervenir en tant que technicien mais aussi en tant que responsable technique d'une équipe de 3 techniciens.
Actions
Installation, maintenance, réparation. Gestion des planning, gestion des achats, bons d'interventions, garanties et RMA, et certifications et mise en conformité des monnayeurs et matériel de pesage
Contexte L'entreprise JDC, est spécialisée en solutions de systèmes d'encaissements, de monétique, alarme et vidéosurveillance. Ma mission au sein de l'entreprise consistait à effectuer l'ensemble des opérations dès la création du projet jusqu'à leur livraison.
Actions
Installation, réparations, maintenances et entretien, tirage de cables,
Paramétrage et saisies dans les BDD des bases articles clients.
Formation des clients au logiciel, mise en conformité, mise en route.
Participation à la configuration en vue de certification NF525(loi des finances 2018 liées aux systèmes d'encaissements délivrés par l'AFNOR) de logiciels d'encaissements développés par l'entreprise.
Support Hotline en astreinte les Week-end
Environnement technique
Softwares POS : Logiciels KEZIA II (petits magasins) Devlyx (tabac/presse), Nova hospitality (logiciel d'entrée de gamme d'encaissement), logiciels cash systèmes (starvision/esterel manager)
Alarmes et vidéosurveillance : systèmes HIKVISION, Dahua, RISCO SYSTEMS
Monnayeurs : cashdev, Cashdro, Glory
Matériel : PC type POS (Point Of Sale avec OS Linux propriétaire, ou Windows), réseau non managé (simples switch), Bornes Wifi en MESH ou pont réseau wifi Master/slave, alarmes sans fil radio, monnayeur IP, Caméras IP et BNC avec NVR.
Contexte L'activité de Yotasoft est représentrée par :
Actions
La réalisation de séquences animées en imagerie de synthèse 2D et 3D
Réalisation de sites vitrines et E-commerces
Créations d'identité sonores et bandes sons destinés aux séquences réalisées vente, réparation et maintenance de matériel informatique
Gestion administrative (compta, planning, interventions) 3 salariés jusqu'à Juin 2015
Environnement technique
Jingles d'animation : Modélisation : Zbrush, Maya, 3DS MAX Rendus : VRAY - Photoréalisme: Lumion (temps réel) Textures : Photoshop Etalonnage : Davinci Resolve Post prod : After effect+Première pro
Sites web : par CMS : Wordpress, Magento 1 et 2, prestashop. développement web Front end : Frameworks : Bootstrap pour le HTML, un peu de JS et du CSS. PHP : Symfony Bases de données : Mysql/MariaDB ; postgresql ; Nosql IDE : VSCODE, IntelliJ, Xcode
Composition Son MAO : FL STUDIO / Logic Pro X / Protools / Ableton live+ différents VST (compresseurs, instruments, effets)
Contexte ARVATO 3 MEDIA est une entreprise de plateforme téléphonique, mon rôle proposé fût celui de superviseur d'une équipe de 20 à 30 télé-conseillers, formés à la gestion de contrats EDF bleu-ciel (particuliers)
Actions
Briefings de l'équipe sur les objectifs hebdomadaires, l'état d'avancement journalier, les chalenges et les axes d'améliorations,
Mises en situation d'appels spécifiques avec encadrement de jeux de rôles
Contrôles qualités aléatoires (par système de double-écoute lors d'appels)
Classification de chacun des télé-conseillers par résultats selon les critères imposés
Valorisation de l'expérience des télé-conseillers par attribution de services et revalorisation de poste/primes.
Résultats Amélioration sur l'exercices des compétences des télé-conseillers de l'équipe, des performances en appels résolus (ratio efficience temps/résolution incident/contrats proposés/contrats souscrits), augmentation du CA de l'entreprise par le classement plusieurs semaines consécutives
Environnement technique Wrap-up gest, Boite-à-outil EDF, Cybèle etc. (outils sous forme de softwares spécifiques internes) VM Windows 7
Contexte L'entreprise SITEL est une entreprise de plateformes téléphonique, dont l'expérience qui m'a été attribuée consistait à répondre aux sollicitations téléphoniques des utilisateurs professionnels basés en France Métropolitaine des clients SFR Business
Actions
Qualifier les appels et le diagnostic des incidents transférés par l'équipe Niveau 1
Suivre et clôturer les dossiers qui nous sont affectés
Résoudre à distance les incidents et problèmes techniques
Réorienter les appels en escalade (Niveau 3) selon leur nature et leur degré d’urgence aux acteurs adéquats pour assurer un traitement rapide des demandes
Environnement technique Logiciels-outils internes OS : Debian et Windows 7
Président de l'APEL de l'école Saint Juste de Salaise sur Sanne
Avril 2014 -
YOTASOFT - Forum des métiers
(Participant)
Intervenant, présentation de mon activité et ses différents domaines, dans l'objectif d'éclairer et de susciter des vocations aux élèves et visiteurs lors de l'événement