Ambient IT

Azure Databricks

Par Ambient IT

Objectifs

  • Bien connaître les spécificités de Azure Databricks
  • Extraire les données avec Azure Databricks
  • Savoir comment transformer et charger ses données
  • Utiliser les dashboards et déployer son processus

Programme

INTRODUCTION

  • Présentation de Databricks
  • Les bénéfices de l’outil
  • Databricks vs Apache Spark
  • Présentation de l’interface
  • Créer son workspace
  • Présentation des notebooks
  • Créer les composants d’Azure Databricks (cluster, job, pool)

EXTRACTION DES DONNÉES

  • Les différentes tables (schemas, databases, tables)
  • Les sources et les destinations
  • Naviguer sur les fichiers système
  • Le dossier Filestore
  • Importer les données depuis son ordinateur
  • Importer les données du web
  • Importer les données avec SQL et Python
  • Connecter ses données Excel, PowerBI et PyCharm

TRANSFORMATION DES DONNÉES

  • Trouver et modifier les valeurs null
  • Supprimer les données dupliquées
  • Supprimer les valeurs extrêmes
  • Mise en cache
  • Compression des données

CHARGEMENT DES DONNÉES

  • Méthodes de sauvegarde
  • Managed vs unmanaged tables
  • Gérer les partitions
  • Connexion avec Azure SQL, Oracle et MongoDB

DASHBOARD ET DÉPLOIEMENT DU PROCESSUS

  • Notebooks de tableaux de bord
  • Créer un travail planifié pour rafraîchir le dashboard
  • Présentation d’un pipeline Azure Databricks CI/CD
  • Développer et valider son code
  • Définir son pipeline de build
  • Définir son pipeline de mise en version

Formations de la même catégories (5)

XXL Formation
Développer des applications et webservices Cloud en .Net et Windows AzurePar XXL Formation

Découvrir Windows Azure, la plateforme Cloud de MicrosoftApprendre et utiliser les outils et technologies disponibles pour développer des applications et les déployer

Dawan
VMware Horizon Cloud Service on Microsoft AzurePar Dawan

Découvrir les fonctionnalités d'Horizon Cloud Service - Dimensionner Azure et estimer les coà»ts - Intégrer Azure Active Directory avec Horizon Cloud Service - Configurer un machine virtuelle et la convertir en une image assignable - Mettre à disposition des postes de travail VDI

IB Formation
Microsoft Azure - Technologies pour les architectesPar IB Formation

Si les premières offres Cloud ont été observées du coin de l’oeil par les entreprises, il semble aujourd’hui que la méfiance ait fait place à la curiosité et que les arguments des anti-Cloud du début sur la confidentialité des données, la disponibilité du service et les coûts réels du Cloud Computing se soient peu à peu dilués dans une mer d’échos positifs. Il ne faut pas pour autant y aller aveuglement. Pour qu’une bascule (même partielle) vers le Cloud fonctionne, il est impératif d’une part de calibrer judicieusement ses besoins et d’autre part de concevoir une architecture cloud répondant précisément aux besoins en question. A défaut, l’expérience risque de virer à l’orage. Réussir cette étape impose naturellement une connaissance très poussée des services proposés par la plate-forme Cloud retenue. C’est précisément l’objet de cette formation avancée destinée aux professionnels devant concevoir des architectures Azure performantes et évolutives.

Global Knowledge
Windows Server 2019 Hybrid and Azure IaaSPar Global Knowledge

Cette formation s'adresse principalement aux professionnels de l'informatique qui ont une expérience de la gestion d'un environnement Windows Server sur site. Son but est de préparer les professionnels à la planification, la mise en œuvre et la gestion d'environnements comprenant des charges de travail basées sur Windows Server hébergées par Azure IaaS. Le cours couvre la manière de tirer parti des capacités hybrides d'Azure, de migrer les charges de travail des serveurs virtuels et physiques vers Azure IaaS, et de gérer et sécuriser les VM Azure exécutant Windows Server 2019.

L’environnement des labs d'apprentissage reste accessible après la formation durant 365 jours. Ceux-ci peuvent être pratiqués de façon illimitée.

Global Knowledge
Microsoft Azure ArchitecturePar Global Knowledge

Cette formation enseigne aux Architectes de Solutions travaillant en environnement Microsoft Azure comment traduire les besoins de l’entreprise en solutions sûres, évolutives et fiables. Les leçons comprennent les considérations de conception liées à la journalisation, à l’analyse des coûts, à l’authentification et à l’autorisation, à la gouvernance, à la sécurité, au stockage, à la haute disponibilité et à la migration. Ce rôle nécessite des décisions dans plusieurs domaines qui affectent une solution de conception globale.

Le plus :

L’environnement des labs d'apprentissage reste accessible après la formation durant 365 jours. Ceux-ci peuvent être pratiqués de façon illimitée.

Cette formation comporte aussi des "Challenge labs" qui proposent des scénariis plus complexes avec un objectif opérationnel pour développer l’autonomie de l’apprenant sur des sujets du cours mais aussi sur des sujets connexes.