Syntell et Frontmatec – une réussite analytique | Webinaire Gratuit

Dans ce webinaire animé par Louis Cloutier, VP Innovation et Alain Rivet, directeur au développement stratégique, vous aurez l’occasion unique d’entendre Mathieu Hamel, Directeur Innovation et R&D chez Frontmatec, qui nous partage les coulisses d’une transformation analytique réussie — rendue possible grâce à l’expertise de Syntell et aux solutions Microsoft Power BI et Fabric.

Un rendez-vous incontournable pour toute organisation qui souhaite mieux tirer parti de ses données!

Pourquoi se certifier? 

Microsoft offre un catalogue impressionnant de certifications. Mais quelles sont les principales raison de se certifier? Selon cet auteur, la raison principale serait de permettre d’établir sa crédibilité en tant que spécialiste d’une technologie?: 

Les autres raisons énoncées sont?: 

• Faciliter l’évolution de sa carrière 

• Augmenter sa rémunération en accédant à des postes supérieurs ou en obtenant une reconnaissance de la part de son employeur 

• Certaines études indiquent que 37% des personnes ayant obtenu une certification ont vu leur salaire augmenter 

• Dans tous les cas, l’employeur sera en mesure de reconnaître l’effort déployé pour obtenir la certification 

Chez SYNTELL nous avons constaté que la certification est un outil supplémentaire pour s’assurer qu’un candidat ou employé a acquis les connaissance suffisantes pour intervenir sur certains projets. Si vous libérez du temps à un employé pour qu’il se développe dans une nouvelle technologie, n’est-il pas pertinent de vérifier sa progression en lui demander de passer l’examen de certification? 

Durée de validité d’une certification et renouvellement 

Dorénavant, après un an, il est possible de renouveler gratuitement une certification en passant un petit test qui valide que le professionnel a continué de suivre l’évolution du produit. Celui-ci dispose de six (6) mois après la durée normale de la certification pour le faire autrement il devra reprendre l’examen payant. Et Microsoft envoie des courriels de rappel. C’est à livre ouvert et il est possible de refaire plusieurs fois ce test. Bref c’est une manière simple de conserver sa certification pour une année supplémentaire. 

Tous les détails sont ici et ce diagramme permet de visualiser le principe?: 

Informations sur la certification Microsoft Fabric 

Écusson obtenu :

Pour aller plus loin 

Il est possible de se tester via un «?PRACTICE ASSESSMENT?» gratuit de 50 question. En plus de pouvoir valider chacune de vos réponses au fur et à mesure, vous obtiendrez une explication. À la toute fin de la pratique, vous recevrez votre résultat final et pourrez voir toutes vos réponses ainsi que l’explication dans un format facile à imprimer pour révision ultérieure. Par exemple?: 

Vous pouvez le refaire plusieurs fois et les questions vont changer. Bref, un bel outil pour identifier dans quel volet vous devriez consacrer vos études. 

Il y a du contenu pour étudier la théorie sur Microsoft Learn, et la durée estimée pour parcourir le contenu est de 4 jours?: 

Microsoft suggère de faire plusieurs fois la pratique afin d’obtenir un résultat au-dessus de 80% avant de tenter l’examen. 

Comme pour toute certification Microsoft ou autre fournisseur, il y a toujours des offres commerciales ($)pour mieux vous préparer à l’examen. À l’écriture de ces lignes, j’ai pu trouver celles-ci?: 

• UDemy?: Microsoft Fabric – DP-600 Exam Preparation – 19,95 $CAN – En ligne 

• Microsoft Fabric Analytics Engineer (DP-600) – 3285 $CAN – En ligne ou en personne 

D’autres bloggeurs proposent aussi des ressources pour vous préparer, parfois avec des vidéos pour ceux qui préfèrent ce format pour s’instruire?: 

• DP-600 Exam Preparation Study Resources 

• DP-600 Fabric Analytics Engineer Exam: First Impressions and Learning Tips! 

• DP-600 EXAM PREPARATION COURSE | Video 1 of 12 (Introduction) 

Faites ce que je dis … et ce que je fais! 

Dans mon cas, j’ai obtenu ma certification le 18 décembre 2024 avec une note de 875/1000. J’ai pris deux jours et demi (2 ½) pour me préparer mais il est certain que mon expérience avec Power BI a beaucoup aidé. Et j’avais eu la chance de travailler avec des projets ETL avec Fabric. La majorité des questions portaient sur les modèles sémantiques Power BI, le T-SQL dans un contexte BI et les notebook PySpark.  

Mot de la fin 

Vous avez maintenant en main toute l’information nécessaire afin de débuter votre apprentissage si vous souhaitez obtenir cette certification. Bien qu’elle exige des connaissances variées, il est possible que votre parcours professionnel vous ait préparé à relever ce défi qui a le potentiel de propulser votre carrière encore plus loin. 

SYNTELL a une expertise reconnue avec les projets analytiques et la plate-forme Power BI. N’hésitez pas à nous contacter si vous avez besoin d’accompagnement avec votre projet.  

Vous démarrez un projet pilote avec Microsoft Fabric? Votre organisation a déjà déployé Power BI Premium? Vous êtes plutôt à l’étape d’identifier la capacité (SKU) Fabric qui répondra à vos besoins? Quelle que soit votre situation, il est crucial de surveiller l’utilisation d’une capacité Fabric/Premium. En lisant cet article, vous saurez pourquoi il est essentiel de réaliser cette activité, comprendrez les notions de base, saurez par quoi commencer, et obtiendrez des liens pour aller plus loin.

Pourquoi suivre l’utilisation?

Il y a plusieurs raisons pertinentes de suivre l’utilisation d’une capacité Fabric/Premium. Je vais d’abord vous montrer la réponse générée par Copilot, car elle n’est pas mauvaise :

Je ne suis pas une IA générative, mais à mon humble avis, les raisons principales sont :

• Offrir une manière d’évaluer quel SKU acquérir pour réaliser un projet en réalisant une preuve de concept sur un volume de données similaire à la cible et en étudiant l’impact sur la capacité.
  • Il est donc possible de débuter avec un F2 et voir si c’est suffisant.
  • Cet article (anglais) peut vous donner un aperçu d’une manière de vous y prendre.
    
    
• Prévoir le moment où il faudra acquérir une capacité supplémentaire (ex. un autre F2) ou augmenter la capacité actuelle.
  • Être proactif vs réactif, sachant qu’il peut y avoir un délai pour le financement et l’acquisition.
    
    
• Détecter une utilisation inappropriée d’une fonctionnalité qui ralentit toute la capacité.
  • Impact pour tous les utilisateurs.
  • Peut faussement faire croire qu’une capacité supérieure ou supplémentaire est requise.
  • Peut être causé par un outil externe (ex. Analyze in Excel) ou des fonctionnalités des modèles composites sur un modèle sémantique.
    
    
• Identifier les projets (et artefacts) qui consomment le plus de ressources afin d’effectuer un audit.
  • Trop d’actualisations planifiées ou sur demande?
    • Comprendre pourquoi ils le font, suggérer d’actualiser après l’ETL.
  • Temps d’actualisation trop long?
    • Vérifier si l’actualisation incrémentielle, ou une optimisation du Power Query pourrait aider.

Notions de base

Unité de capacité (UC) ou Capacity Unit (CU) en anglais

Lorsqu’on acquiert une capacité Fabric (ou Premium), celle-ci vient avec un nombre d’unités de capacité.

Toute activité Fabric (incluant Power BI et Copilot) consomme des unités de capacité. Chaque engin convertit son utilisation interne en unités de capacités et c’est bien expliqué ici.

Type d’activité: Interactif vs arrière-plan

Il y a deux types d’activités qui consomment des unités de capacités : interactif ou arrière-plan. Par exemple, Data Factory génère toujours des activités de type arrière-plan. Dans Power BI, afficher un rapport est une activité interactive, tandis que l’actualisation d’un modèle sémantique est une activité en arrière-plan. La même page liste le type par activité par engin (extrait) :

Bursting et lissage

Il ne semble pas y avoir de terme français utilisé par Microsoft pour le bursting. Il s’agit d’une capacité intrinsèque à la plateforme d’utiliser plus de CU que la capacité ne le permet… pendant un certain temps. C’est comme si on empruntait des ressources sur le reste de la journée et qu’on devra les rembourser durant la période de 24 heures à défaut de quoi il y aura des limitations (throtting).

Par exemple, plutôt qu’une charge de travail consomme 64 UC pour se compléter en 60 secondes, 256 UC pourraient être utilisés par Fabric pour compléter le tout en 15 secondes. Puis en période calme, on « rembourse » notre emprunt.

Le lissage réduit la probabilité de limitation (bien que la limitation puisse toujours se produire). Il change la façon dont la comptabilisation des unités de capacités est réalisée sans lien avec l’exécution réelle des travaux. Le lissage ne change pas les performances, il répartit simplement la comptabilité du calcul consommé sur une période plus longue, de sorte qu’un SKU plus grand n’est pas nécessaire pour gérer les pointes d’actualisation.

Cette série d’images tirées d’une animation de Microsoft peut vous aider à visualiser le concept.

Limitations (Throttling)

Lorsqu’il y a une utilisation plus grande que ce que la capacité ne le permet pendant une trop grande période, trois types de limitations peuvent être constatées :

• Délais interactifs : les travaux en cours continuent, mais toute nouvelle demande est retardée avant son départ (ex. on attend 20 secondes avant que le rapport Power BI commence à s’afficher).
• Rejets interactifs : la demande est refusée et un message d’erreur est affiché.
• Rejets en arrière-plan : la demande est refusée, il faudra réessayer plus tard.

Cette page documente les détails, et voici un résumé :

Comment suivre l’utilisation?

Feuille de route

Voici les grandes étapes à prévoir :

1. Identifiez les personnes responsables de surveiller l’utilisation de la capacité.
2. Installez et configurez l’application Power BI « Microsoft Fabric Capacity Metrics » à partir de App Source. Voir la section « Pour aller plus loin » de ce blogue.
3. Accordez l’accès à cette application aux personnes responsables de cette activité.
4. Prévoyez de la formation pour ces personnes afin d’être en mesure d’interpréter correctement l’information qui est affichée par les différents rapports.
5. Identifiez des experts qui peuvent auditer les ressources Fabric qui consomment le plus d’unités de capacités.
   1. Il y aura assurément plusieurs experts selon le type d’engin (ex. Data Factory vs Warehouse vs Power BI).
6. En cas de doute sur une consommation excessive, contactez un expert. Par exemple, un spécialiste Power BI pourrait aller auditer la conception d’un modèle sémantique qui consomme anormalement des ressources :
   1. Avec Tabular Editor 2.x, cet expert pourrait aller inspecter le code M du Power Query afin d’identifier des possibilités d’optimisation.
   1. L’outil DAX Studio permet via le module Vertipaq Analyzer, d’identifier les tables et colonnes qui prennent le plus d’espace dans le modèle.
   1. La possibilité d’utiliser l’actualisation incrémentielle pourrait être évaluée en fonction de la volumétrie de la source.
7. Contactez le propriétaire de l’actif afin de l’aider à rectifier la situation.
8. Envisagez l’augmentation de la capacité si tout est légitime, vous êtes probablement victime du succès de l’adoption de Microsoft Fabric dans votre organisation!

Aperçu

L’application de suivi de l’utilisation peut sembler simple à priori, mais il faut prendre le temps de bien comprendre ce qu’elle affiche et quelles interactions sont possibles.

Son utilisation fera peut-être l’objet d’un prochain blogue. Manifestez votre intérêt en laissant un commentaire sur ce blogue. En attendant, je vous mets des références dans la section « pour aller plus loin ».

Mot de la fin

Un peu comme les administrateurs TI devaient suivre l’utilisation des serveurs de votre organisation, il faut aussi le faire avec Microsoft Fabric, même s’il s’agit d’une offre SaaS d’analytique tout-en-un. Autrement vous risquez de vivre des problèmes de performance, d’avoir de la difficulté à les expliquer et dépenserez peut-être inutilement en achetant des capacités supplémentaires.

Vous en savez maintenant plus sur ce sujet important. Analyser des problèmes de performance nécessite souvent une expertise assez pointue alors ne dépensez pas trop d’énergie et faites appel à des experts afin de pouvoir vous concentrer sur les opérations de votre organisation.

SYNTELL a une expertise reconnue avec les projets analytiques et la plateforme Power BI. Contactez-nous si vous avez besoin d’accompagnement avec votre projet.

Pour aller plus loin

• Installez et configurez l’application Power BI en suivant ces liens :
  • Qu’est-ce que l’application Métriques de capacité Microsoft Fabric ?
  • Installer l’application d’indicateurs de performance de capacité Microsoft Fabric
• Comprenez les notions de base :
  • Opérations de Fabric
  • Évaluer et optimiser votre capacité Microsoft Fabric
  • Fabric Capacities – Everything you need to know about what’s new and what’s coming
  • La stratégie de limitation de Fabric
• Apprenez à comprendre les rapports fournis dans cette application :
  • Comprendre la page de calcul de l’application de métriques
  • Comprendre la page de stockage de l’application de métriques
• Installez et familiarisez-vous les outils complémentaires (et gratuits) :
  • DAX Studio
    • Installation
    • Documentation
  • Tabular Editor 2.x
    • Installation
    • Documentation

Microsoft a annoncé plusieurs déclinaisons de son offre Microsoft Copilot. Sérieusement, on dirait qu’il y a un Copilot pour chacun de leurs produits ..! Et plusieurs individus et organisations se demandent lequel correspond à leurs besoins et s’ils ont déjà une licence pour l’utiliser! Cet article vise à vous donner des pistes et à expliquer l’offre spécifique à Power BI.

Cet article de blogue peut vous aider à comprendre l’étendue de l’offre Copilot. Si vous manquez de temps, une image vaut mille (1000) mots :

Vous pouvez même demander à Copilot de vous aider à comprendre cette offre:

Mais il s’est quand même arrêté après trois (3) … Mais bon, il suffit de lui demander d’en lister plus, il est très serviable :

Copilot dans Microsoft Fabric

Même pour Microsoft Fabric, il y a présentement trois (3) produits Copilot ainsi qu’un quatrième qui est prévu dans la feuille de route :

Copilot pour Power BI

La base

• Ce produit est disponible à la fois dans Power BI Desktop et dans le service (http://app.powerbi.com).
• Il nécessite qu’une capacité Power BI Premium P1+ ou Fabric F64+ soit disponible dans le tenant de votre organisation.

Les administrateurs doivent l’activer dans les paramètres du tenant, pour toute l’organisation ou préférablement pour certains groupes d’utilisateurs :

À l’écriture de ces lignes, si votre tenant Power BI est situé à l’extérieur des États-Unis ou de la France, il faudra aussi activer celle-ci, ce qui risque d’être plus difficile (gouvernance et sécurité) :

Vous pouvez consulter cette page pour voir si les termes d’utilisation vous conviennent.

Capacités du produit

• Créer des visuels pour faire ressortir des informations pertinentes (insights)
• Créer des pages de rapports ou même des rapports entiers
• Générer et éditer des formules DAX
• Produire des résumés textuels
• Poser des questions sur les données
• Documenter le modèle sémantique, les mesures DAX

Pour aller plus loin

• Lire les annonces du blogue de Power BI :
  • Copilot in Power BI (preview) is available worldwide
  • Generate measure descriptions with Copilot (preview)
  • Deep dive into DAX query view with Copilot
  • Copilot Updates March 2024
  • Introducing Copilot Pane in Power BI Desktop (preview)

• Consulter la documentation officielle :
  • Overview of Copilot for Power BI (preview)

Write DAX queries with Copilot