35
Gouvernance des données Jean-Pierre RIEHL Practice Manager SQL/BI @AzeoTnT http://azeo.com

Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Embed Size (px)

DESCRIPTION

Maîtriser les données est l'une des clés de la réussite des entreprises. C'est pourquoi l'EIM (Enterprise Information Management) est devenu un challenge dans nos systèmes d'information. Pour cela, il faut des outils et des processus. Pour les outils, SQL Server nous met à disposition SSIS, DQS et MDS qui, ensemble, permettent une bonne gestion des données de l'entreprise. Pour les processus, il faut maintenant adopter une réelle gouvernance pour piloter les usages et garantir la qualité des données. Data Explorer, actuellement en version Preview offre aux utilisateurs le moyen de créer leurs propres mashup de données. Nettoyage, transformation, enrichissement, cet outil permet de préparer facilement ses données avant de les utiliser dans les outils de BI personnelle comme PowerPivot et Power View. Data Explorer est un ETL en mode Self-Service, la brique qui manquait dans la plate-forme SQL Server.

Citation preview

Page 1: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Gouvernance des données

Jean-Pierre RIEHLPractice Manager SQL/BI

@AzeoTnThttp://azeo.com

Page 2: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Jean-Pierre RiehlMembre du Board http://blog.djeepy1.net@djeepy1

Pure-Player Microsoft• Practice Collaboration• Practice SQL/BI• Practice Infrastructure• Practice Développement

MVP SQL ServerMCSA : SQL Server 2012MCITP : Business Intelligence Developer 2008MCITP : Database Administrator 2008MCPD : Enterprise ApplicationMicrosoft Certified Trainer

http://www.azeo.com

Page 3: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Rejoignez la Communauté

Page 4: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Data DelugeExplosion des données, variété des types, vélocité, Big Data, etc.

Capteurs, logs, Open Data, Web 2.0, données géographiques, etc.

Page 5: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

L’importance de la donnée

Données personnelles

Données d’Entreprise

Données de Communautés

Données globales

Valeur

Page 6: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

La réalité du terrain

Trouver

Enrichir

PartagerAccéder

Sécuriser

Nettoyer

Conformer

Qualifier

DédoublonnerPerformances

Offline

Archiver

Page 7: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Pas de compromis

BI d’entreprise• Industrialisée• Contexte d’entreprise• Données

DataWarehouse

BI d‘équipe• Partagée• Données restreintes• Utilisation avancée

BI personnelle• Centrée sur un

document• Créée par un

utilisateur• Réactivité

Page 8: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

EDW

Dashboard & Scorecards

Collaboration d’équipe

Sites projet

Dossiers personnels

My Sites

Devices

Du bon usage…

Contrôle

A la main de l’utilisateur• Pas de contrôle• Personnel / Privé

Durée de vie courte• Partage• Reporting adhoc

Contrôlé• Données gérées• Reporting “Statique”• Contenu Push

Page 9: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Nettoyer Consolider Analyser VisualiserCollecter

SQL ServerReporting Services

Excel

PowerPivotPower View

Tableaux de bordSharePoint

SQL ServerAnalysis Services

Modèles

SQL ServerMaster Data

ServicesMaster Data Management

SQL ServerData

Warehouse

SQL ServerData Quality

ServicesQualité

SQL ServerIntegration Services

ETL

SQL ServerSGBD

SQL ServerStreamInsight

CEP

Une plate-forme pour gérer ?

Page 10: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

« D’ici 2015, les sociétés qui construiront des systèmes de gestion de l’information surpasseront de 20% leurs concurrents » Gartner

Page 11: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

(Utilisateurs + Données ) xOutils

IT= Valeur

Page 12: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Gouverner v. t.

« Diriger la conduite de choses ou de personnes »

Page 13: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

L’OPEN BARApproche #1

Page 14: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Open Bar• Liberté totale• Aucune contrainte

Mais…• Pas de contrôle• Pas de synergie

Page 15: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Pour contrebalancer• Silos• Diviser pour régner• Hub & Communautés

Open Bar

…Principe de subsidiarité

Page 16: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Magasin de donnéesApproche #2

Page 17: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Magasin de donnéesCréer un point d’accès central aux donnéesEnterprise Data Warehouse

Utiliser des patterns existantes• Logistique• Bibliothèque

Page 18: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Data Lifecycle ManagementApproche #3

Page 19: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Data Lifecycle Management

Aquisition

Qualif.Validatio

nAnalyse

Partage

Arc

hiv

age

Traçabilité / Sécurité

Page 20: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

WorkflowsApproche #4

Page 21: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Workflows

CréeDérive

Approuve

Hub de donnéesModèles, OData, Rapports, DWH, MDM, etc.

Publie

Sandox

Améliore

Découverte

Page 22: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

PowerPivot / Power View

Sources : ToutesDérivation : • Autres modèles• Rapports

Edition : PowerPivotSandbox : SharePoint / My SiteApprobation : SharePointNormalisation : SSAS Tabulaire

Reporting Services

Sources : ToutesDérivation : • Autres rapports• DataSet partagés / Report

Parts

Edition : Report BuilderSandbox : SharePoint / My Site Approbation : SharePointNormalisation : BIDS

Workflows : applications

Page 23: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Un Système de Gestion de l’Information

Page 24: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Autres sources

Un Système de Gestion de l’Information

FermeSharePoint

Excel

Site CollectionExcel Servic

es

Power Pivot

Discovery

Workflows

Site Col

SSRS

Addin PowerPivotAddin MDSDQS

MDS

DQS Client

Modèles

DWH

Page 25: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

SELF-SERVICE ETL

Page 26: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Self-Service ETL

Restit. Power

View

Report Builde

rSQLLegacyAzure ?

FaçonnageNettoyageFormatageAgrégationRègles métiers…

Page 27: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

demoDATA EXPLORER (ALPHA)

Page 28: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Synthèse (…et bonnes pratiques)

Page 29: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Synthèse

Une démarche agile– on libère la créativité des utilisateurs– on leur fournit des guides– on surveille ce qu'ils font– on optimise les chemins des données

Page 30: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Mettez à disposition les outils, formez, accompagnez les utilisateurs

Mettez des guides, définissez des process– Faites les respecter– Faites les vivre

Bonnes pratiques

Page 31: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Importance du process de décision– Engagement de toutes les parties – Arbitrage de process Souvent porté par la Direction Générale

Rôle de Data Steward

Bonnes pratiques

Page 32: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Libérez les données, libérez les usages

Page 33: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Optimisez les process en permanence

Surveillez les usages– Sources de données– Utilisation des process

Monitoring, Audit & Scripting

Bonnes pratiques

Page 34: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Donnez votre avis !Depuis votre smartphone, sur : http://notes.mstechdays.fr

De nombreux lots à gagner toutes les heures !!!

Claviers, souris et jeux Microsoft…

Merci de nous aider à améliorer les TechDays

http://notes.mstechdays.fr

Page 35: Gouvernance des données avec SQL Server et ETL en Self-Service avec Data Explorer

Formez-vous en ligne

Retrouvez nos évènements

Faites-vous accompagner gratuitement

Essayer gratuitement nos solutions IT

Retrouver nos experts Microsoft

Pros de l’ITDéveloppeurs

www.microsoftvirtualacademy.com

http://aka.ms/generation-app

http://aka.ms/evenements-developpeurs

http://aka.ms/itcamps-france

Les accélérateursWindows Azure, Windows Phone,

Windows 8

http://aka.ms/telechargements

La Dev’Team sur MSDNhttp://aka.ms/devteam

L’IT Team sur TechNethttp://aka.ms/itteam