Besoin fonctionnel simple mais néanmoins possible, on souhaite par exemple dans une entreprise du secteur assurance automobile éliminer toutes les lignes d’une table des assurés dont le numéro de police, variable alphanumérique, contient au moins une lettre. Cas par exemple des assurances de type x plus.

Le programme SAS ci-dessous vous fournit une des possibilités offerte par la programmation SAS dans une étape DATA.


/* Résultats dans la LOG */
data _null_;
 a="2";
 b="k44k";
 if ifn(a > 0,1,0) then put "a OK !";
 else                   put "a KO !";
 if ifn(b > 0,1,0) then put "b OK !";
 else                   put "b KO !";
run;


/* Contenu de la log */

   a OK !
   b KO !

Le but ici est de vous fournir un programme simple pour vous permettre de rechercher les doublons que vous pourriez avoir dans une de vos table SAS.  

Nous utilisons pour cela la proc SQL de SAS.  

On commence par afficher les informations de la table avec deux petites particularités :  

On regroupe les observations sur un critère que vous devez déterminer, ici on à choisi : « Nom, prenom, ville, region, pays » c’est l’objet de la partie GROUP BY.  

Ensuite on demande à SAS de nous retourner toutes les lignes aggrégées de la table dont le nombre de tuples « Nom, prenom, ville, region, pays » est supérieur à 1. C’est la clause HAVING.   

Le résultat renverra toutes les lignes possédant au moins un doublon, l’ensemble des variables de la table plus le « nombre » d’occurences pour chaque tuple.


/* ****************************************** */
/* Site : http://www.formations-sas.fr - 2010 */
/*                                            */
/* PGM = Détection des doublons sur Table SAS */
/*                                            */
/* Auteur : Pascal MAUBERT                    */
/* ****************************************** */

proc sql;
   title ‘Recherche des doublons’;
   select *, count(*) as nombre
      from table_double_sas
      group by Nom, prenom, ville, region, pays
      having count(*) > 1;
quit;

Avant Propos.

Le but de cet article n’est pas de se substituer à une formation appliquée de SAS SPDE, mais de présenter ce fabuleux produit, même si les techniciens SAS avancés seront surement capable de s’en contenter pour comprendre, assimiler et utiliser SAS SPDE.

Cet article ne prétends pas non plus à se substituer à la documentation officielle de SAS Institute sur SAS SPDE, un lien vers celle-ci (documentation en anglais) se trouve en bas de la page.

Description générale de SAS SPDE

SAS SPDE est un moteur de gestion de données SAS, SAS SPDS est un serveur à part entière de gestion des données et au fonctionnant proche de SAS SPDE. SAS SPDE est intégré au module SAS Base comme moteur de gestion des données .

Aujourd’hui intégré au produit / module SAS Base, son nom à été changé en SAS SPDE.

Ce moteur de données SAS offre des performances exceptionnelles et trouve sa raison d’être dans le besoin de performances accrues lors de requêtes sur des tables de très gros volumes. C’est à dire des tables allant de 512 méga à plusieurs terra octets.

En synthèse, si on souhaite pouvoir lancer une requête contenant plusieurs critères sur une table de plusieurs terra octets et obtenir une réponse en quelques secondes, alors la solution SAS SPDE  est une solution appropriée.

SAS SPDE est donc l’un des procédé d’optimisation, il en existe bien d’autre,  pour l’accès à des données décisionnelles, données d’entreprise, de fortes volumétrie et nécessitant des performances accrues en terme de temps de réponse à des requêtes.

Description technique de SAS SPDE

Pourquoi SAS SPDE est encore plus rapide que SAS Base, qui déjà offre des performance hors du commun ?

Le principe de fonctionnement du moteur SAS SPDE tire profit des architectures SMP (Symmetric Multiprocessing). Dans cette architecture, les processeurs partagent le bus d’accès à la mémoire vive, communiquent entre eux et peuvent travailler en parallèle.

Et enfin ajoutons également une batterie de disque dur rapide sur lesquels seront réparti un partitionnement des grosses table SAS.

Simplification et synthèse :

Pour effectuer une requête sur une table de 4 terra-octets, sur une machine possédant 16 processeurs et 9 disques durs :

SAS SPDE, avec les doigts de l’administrateur partitionne la table (partie donnée) en 6 blocs et implémente chacun de ces blocs sur un disque dur différent, crée un descripteur nommé méta-data sur un autre disque dur, qui contiendra les informations sur la table et enfin utilisera les deux derniers disques durs afin d’y stocker les fichiers d’index.

Un choix de la taille du partitionnement, par exemple 128 Mo, donnera un total de 32 blocs poue cette table de 4 terra-octets, et ces blocs seront répartit sur les 6 disques durs prévue à cet effet via l’allocation faite lors du libname.

Ensuite lors de la requête 1 ou 2 des CPU travailleront sur les fichiers d’index, une dizaine sur les blocs de donnée, 1 sur les méta-data et le reste sur le tri automatique à la volée sur l’éventuelle classification induite par des group by.

SAS SPDE ne nécessite plus l’utilisation de la PROC SORT, en effet, les données sont triées automatiquement à la volée en cas de besoin.

Tout ce petit monde travaillera en parallèle et communiquera ensemble afin de fournir un résultat très rapide et cohérent à l’utilisateur.

Programme SAS d’exemple sur SAS SPDE

Se programme à pour vocation et vous fournir des informations synthétique sur la syntaxe générale à utiliser lors d’un travail sur des données à faire gérer par le moteur de donnée SAS SPDE.

Le programme ci dessous proposé, ne prétend pas vous fournir toutes les informations sur le produit SAS SPDE, mais une base sérieuse afin de vous permettre de commencer à travailler avec SAS SPDE. Attention toutefois, lors de l’utilisation de SAS SPDE, les performances ne peuvent être significative que si votre machine possède plusieurs processeurs et plusieurs disques durs. La connexion à ces derniers via fibre optique est un plus.

Cet exemple de programme SAS, utilise les modules SAS : SAS Base, SAS SPDE, SAS SQL et SAS MACRO.

/* Options d'otimisation et de conte rendu */
options fullstimer bufno=16 bufsize=16384;

/* Exemple d'utilisation du moteur SAS SPDE */
/* définition et mise en place de l'accès via LIBNAME */

libname mon_spde spde "D:\SAS Divers\SAS_SPDE/disk1/metadata"
 datapath  = ("D:\SAS Divers\SAS_SPDE/disk2/userdata"
 "D:\SAS Divers\SAS_SPDE/disk3/userdata")
 indexpath = ("D:\SAS Divers\SAS_SPDE/disk4/userindexes"
 "D:\SAS Divers\SAS_SPDE/disk5/userindexes")
 ;  /* temp=yes; Attention ! Cette option vide les libnames
 de SPDE à la fin de la session SAS. */

/* MACRO itérative pour la création d'une table SAS
 de 400 variables et d'environ 80 000 observations */
options nomprint nosymbolgen;
/* Définition, compilation et stockage temporaire */
%macro test(deb=1,fin=200);
 data mon_spde.test_spde(index=(total /unique)asyncindex=yes partsize=24);
 %do i = &deb %to &fin;
 %do inc = 1 %to 399;
 a&inc = &i * &inc;
 total=sum(of a:);
 output;
 %end;
 %end;
 run;
%mend test;

/* Appel de la macro pour création de la table */
%test ;

/* Requête de création d'une table via une
 selection d'observations sur critères .. */
proc sql;
create table mon_spde.select_spde as
 select * from mon_spde.test_spde
 where total between 400000 and 5000000
 and a1 >= 5 and a1 <= 63;
quit;

/* MACRO Itérative exemple en SAS Base */
options nomprint nosymbolgen;
%macro test(deb=1,fin=200);
 data toto(index=(total /unique));
 %do i = &deb %to &fin;
 %do inc = 1 %to 399;
 a&inc = &i * &inc;
 total=sum(of a:);
 output;
 %end;
 %end;
 run;
%mend test;

%test ;

proc sql;
create table select_toto as
 select * from toto
 where total between 400000 and 5000000
 and a1 >= 5 and a1 <= 63;
quit;

/* Copie  d'une table de SAS base vers SAS SPDE */
proc copy in = work out = mon_spde;
 select toto;
run;
/* Copie  d'une table de SAS base vers SAS SPDE,
 bien plus performant que la PROC COPY */
proc append base=mon_spde.toto(asyncindex=yes partsize=24)
 data=work.toto;
run;

/* Compte rendu du contenu d'une biblithèque SAS SPDE */
proc contents data=mon_spde._all_;
run;

Note :

A noter que la PROC APPEND offres des performances accrues par rapport à la PROC COPY de l’ordre de facteur 10, toutefois pour la copie de beaucoup de table se trouvant sur la même bibliothèque, l’écriture de la PROC COPY est beaucoup plus simple. Mais comme toujours en SAS il existe des solutions à tout problème et ici nous pourrions, par exemple, encapsuler la proc append dans une macro et automatiser le transfert de toutes les tables contenues dans un libname x d’un moteur SAS Base vers un Moteur SAS SPDE.

Documentation :

Pour les longs discours et pour plus de détails sur SAS SPDE, voir la documentation officielle de SAS Institute, version SAS 9.2 : Scalable Data Performance Engine

Copyright de l’article © P.Maubert 2009

Avant propos

Cet article à pour de présenter une démarche d’optimisation pour un traitement de type Transaction pour l’ajout ou la mise à jour de données SAS.

Ce genre de problématique étant récurrent, il m’a semblé utile de vous fournir l’exemple détaillé ci-dessous.

Cet exemple se base sur des faits réels rencontrés lors d’une mission d’optimisation pour le compte du client « La Redoute », lors de mon passage au service Consulting de chez SAS Institute. Le chiffres fournis sont approximatifs et n’engage en rien la responsabilité de qui que ce soit.

Problème :

Redoute : 25 000 000 de lignes de commandes par jour et un temps de traitement sous SAS MVS avoisinant les 22 heures.

Bien sur, panique et demande d’intervention pour un audit d’optimisation.

Étude cynématique : par téléphone, par courrier et par internet réception des lignes de commande stockées dans DB2. La nuit Unload DB2 vers un fichier plat pour incorporation dans SAS. Lecture des lignes de commandes, tentative de mise à jour de la base SAS avec les lignes de commandes et en cas de rejet ajout de celles-ci dans la base SAS. Temps de traitement abominable.

Synthèse des Solutions

Deux cas se présentent :

1. On connait sous DB2 la nature de la transaction « ligne de commande » ajout ou modification
2. On ne la connait pas

Dans ces deux cas une solution performante existe.

La première la plus simple, ne sera pas détaillé dans cet article, simplement on transmet issu de DB2 dans l’unload une variable de type flag avec A pour ajout et M pour mise à jour. Sous SAS on éclate le fichier en deux tables SAS une pour les ajouts qui seront traités par la PROC APPEND et l’autre pour les mises à jour qui seront traités avec une étape DATA / MERGE.

Pour le deuxième cas un peu plus pointu, voici ci-dessous un exemple de programme fournissant une solution optimisée pour ces traitements transactions AJOUT / MAJ.

Plutôt que le programme SAS, je vous fournit le compte rendu d’exécution sur une machine de base et exécuté sous Windows Vista SAS V9.

Machine : Sans marque AMD 7750 x2, RAM 4 Go, HD SATA 500 Go, Windows Vista 64 bits SAS V 9.00.

Attention les temps d’exécution peuvent paraître excellent, mais la machine n’est pas partagée et les tables d’exemple sont petites et surtout elles n’ont que 6 variables, dans la vraie vie c’est plutôt de 200 à 500 variables.

Toutefois, La Redoute avec cette solution à ramenée son temps de traitement de 22 à moins de 3 heures.

Tables d’exemple :

• Base : toto1 – 5 000 000 de lignes et 6 variables
• Transaction : toto2 – 525 000 lignes et 6 variables
• TP – MAJ : maj – 175 001 lignes et 6 variables
• TP – Ajout : add – 349 999 lignes et 6 variables
• Temps d’exécution total réel (elaps) : 9.53 secondes

Extrait de la Log :

379  /* ****************************************** */
380  /* Site : http://www.formations-sas.fr - 2009 */
381  /* SAS V9 : Optimisation                      */
382  /*                                            */
383  /* Comment optimiser un traitement de         */
384  /* transaction en SAS.                        */
385  /*                                            */
386  /* Auteur : Pascal MAUBERT                    */
387  /* ****************************************** */
388
389  options compress=no bufno=8 bufsize=9220 fullstimer msglevel=i;
390
391  /* Création de la table de base exemple */
392  data toto1(index=(i /unique));
393   do i = 1 to 5000000;
394      j=i*2;
395      y=j*3.14;
396      orig='A';
397      k=i*j;
398      total=sum(of i j y k);
399      output;
400   end;
401  run;

Note: La table WORK.TOTO1 a 5000000 observations et 6 variables.
Note: Index simple i défini.
Note: L'étape DATA used (Total process time):
 temps réel                   3.96 secondes
 temps processeur utilisateur 2.48 secondes
 temps processeur système     0.99 secondes
 Mémoire                            68348k

402
403  /* Création de la table de Transaction exemple */
404  data toto2(index=(i /unique));
405   do i = 1500000 to 12000000 - 1 by 20;
406      aj=i*2/2;
407      ay=aj*3.14/3.14;
408      aorig='B';
409      ak=i*aj/aj;
410      total=sum(of i aj ay ak);
411      output;
412   end;
413  run;

Note: La table WORK.TOTO2 a 525000 observations et 6 variables.
Note: Index simple i défini.
Note: L'étape DATA used (Total process time):
 temps réel                   0.32 secondes
 temps processeur utilisateur 0.23 secondes
 temps processeur système     0.09 secondes
 Mémoire                            12940k

414
415  /*  Début du traitement hebdomadaire, chez vous sur les unload DB2 */
416  /*  Création des tables MAJ et ADD */
417  data maj
418       add(rename=(aj=j aorig=orig ay=y ak=k));
419   merge toto1(in=a keep=i)
420         toto2(in=b);
421   by i;
422   if b and a     then output maj;
423   if b and not a then output add;
424   else delete;
425  run;

INFO : Index i sélectionné pour traitement de la clause BY.
INFO : Index i sélectionné pour traitement de la clause BY.
Note:  5000000 observations copiées de la table WORK.TOTO1.
Note:  525000 observations copiées de la table WORK.TOTO2.
Note: La table WORK.MAJ a 175001 observations et 6 variables.
Note: La table WORK.ADD a 349999 observations et 6 variables.
Note: L'étape DATA used (Total process time):
 temps réel                   3.89 secondes
 temps processeur utilisateur 3.58 secondes
 temps processeur système     0.29 secondes
 Mémoire                            268k

426
427  /* Traitement de la table MAJ */
428  data toto1;
429   set maj(drop=aj ay ak); /* Le drop si Variables non MAJ */
430   modify toto1 key=i /unique ;
431   i=i;
432   *j=aj;
433   *y=ay;
434   orig=aorig;
435   *k=ak;
436   if _iorc_=0 then replace;
437   else do; _error_=0; output; end;
438  run;

Note:  175001 observations copiées de la table WORK.MAJ.
Note: Table WORK.TOTO1 mise à jour.  175001 observations recopiées, 0 observations ajoutées et 0 observations supprimées.
Note: L'étape DATA used (Total process time):
 temps réel                   0.90 secondes
 temps processeur utilisateur 0.60 secondes
 temps processeur système     0.26 secondes
 Mémoire                            151k

439
440  /*  Traitement de la table ADD */
441  Proc append data=add base=toto1;
442  run;

Note: Ajout de WORK.ADD to WORK.TOTO1.
INFO : Processus d'ajout rapide d'un moteur en cours d'utilisation.
INFO: la méthode de lecture par bloc du moteur est en cours d'utilisation.
INFO: la méthode d'écriture par bloc du moteur est en cours d'utilisation.
Note:  349999 observations copiées de la table WORK.ADD.
Note: 349999 observations added.
Note: La table WORK.TOTO1 a 5349999 observations et 6 variables.
Note: La procédure APPEND used (Total process time):
 temps réel                   0.46 secondes
 temps processeur utilisateur 0.31 secondes
 temps processeur système     0.15 secondes
 Mémoire                            8639k

443
444  /* ****************************************** */
445  /* Site : http://www.formations-sas.fr - 2009 */
446  /* Auteur : Pascal MAUBERT                    */
447  /* ****************************************** */

Et maintenant selon la formule consacrée : A vos claviers

Les étapes pour réussir votre projet décisionnel.

Sachez que l’accompagnement va jouer un rôle essentiel dans la réussite de votre projet décisionnel.

Après l’acquisition du logiciel SAS, un accompagnement a pour but d’aider les entreprises pendant toutes les étapes d’un projet décisionnel se décline principalement en : conseil, support, formation, etc.

Nous allons vous fournir des explications sur ces étapes de l’accompagnement de votre projet décisionnel SAS.

Introduction.

Le développement et la mise en place d’une application décisionnelle SAS, doit être le fruit d’une véritable réflexion et celle-ci va guider votre choix, sa mise en œuvre et enfin son appropriation par vos utilisateurs.

L’objectif d’un projet décisionnel est de tirer le meilleur parti de ses fonctionnalités, d’optimiser son efficacité et de rentabiliser rapidement l’investissement que vous aurez réalisé. Pour cela, il est particulièrement important de surveiller la qualité de l’accompagnement de votre projet.

Voici, selon nous, les points clés pour réussir la création, le développement et le déploiement de votre projet décisionnel.

Choisissez un prestataire d’accompagnement.

Lors de l’acquisition de votre application décisionnelle, vous devez choisir un prestataire de services pour vous accompagner dans sa mise en œuvre, de préférence un prestataire ayant déjà mené à bien des projets similaires, afin qu’il vous fournisse son expertise et de préférence indépendant de l’éditeur. Il vous accompagnera dans toutes les phases d’un projet : Audit, Conception, Conseil, Assistance et Support, formation, accompagnement et jusqu’au transfert de compétences.

Il vous aidera notamment à élaborer précisément et à valider l’architecture fonctionnelle, applicative et technique de la solution décisionnelle envisagée, à identifier rapidement les risques du projet, comme la compatibilité, le déploiement, l’implication des utilisateurs, la charge machine etc. Et encore à évaluer sa faisabilité technique. Vérifiez à ce titre, que le prestataire de services de votre choix, dispose des méthodologies éprouvées en assistance à maîtrise d’œuvre ou à maîtrise d’ouvrage.

L’équipe qui vous sera proposée doit aussi connaître et comprendre votre métier, votre secteur d’activité, les processus et les indicateurs clés permettant de répondre à votre problématique. Pensez également à lui demander qu’il s’engage sur des normes ou des critères de qualité comme : assurance qualité, best practices.

Exprimez clairement votre besoin et anticipez les évolutions futures

Une des clés principales de la réussite de votre projet décisionnel, est la réalisation d’une définition claire de vos besoins et ce dès le départ de votre projet décisionnel. Les tâches de cette étape sont fondamentales, elles ne doivent pas être négligées et elles nécessitent de bien cerner, évaluer votre problématique métier ainsi que ses flux constituant. Plus les utilisateurs directs seront impliqués tôt dans votre projet et plus vos chances de réussites seront grandes.

Ensuite, parmi les principaux écueils à éviter nous pouvons citer : ne pas être trop généraliste ou vague dans vos définitions des besoins. Au contraire essayez d’être le plus précis et le plus spécifique possible. Prenons un exemple dans le domaine du marketing : « Nous recherchons l’amélioration du taux de transformation des campagnes marketing et à assurer le meilleur R.O.I. de ces campagnes ». La solution correspondante consistera alors à opérer le meilleur arbitrage en fonction du profil et de l’historique client type pour lui adresser une proposition ou un message ciblé et surtout parfaitement adapté.

Dissociez bien les étapes « besoin » et « solution », mêler ces étapes complique et embrouille la vue projet. Laissez le soin à votre prestataire de service de traduire en cahier des charges, vision informaticien, votre besoin et lui laisser aussi la possibilité d’être force de proposition. Cela vous permettra également de vérifier qu’il à bien assimilé votre problématique. Encore une fois, il est primordial de faire participer vos utilisateur à la relecture du cahier des charges. Pensez égalementà vous assurez que vos besoins de personnalisation peuvent être réglés par un paramétrage d’objets comme : tables, programmes, métadonnées … que vous pourrez aisément migrer ou faire évoluer via les outils de l’éditeur.

Impliquez-vous

Prenez le temps, tout au long de la mise en œuvre technique de votre projet décisionnel, d’entretenir la communication et le suivi avec les équipes de votre prestataire. Surtout ne croyez pas que votre rôle s’arrête à la décision d’achat et suivez de près la mise en œuvre de votre projet. Il est même préconisé de prévoir un nombre de jours hommes identique à celui que vous avez négocié pour la phase d’implémentation et de mise en production de votre projet décisionnel.

Organisez des comités de projet opérationnels chargés de faire respecter la qualité des livrables, le respect des objectifs du cahier des charges, les délais du projet et l’implication des comités de pilotage arbitrant, ajustant et réajustant et enfin validant le passage des jalons projet. il est souhaitable que votre organisation reflète la structure de l’équipe projet d’intégration. Votre maîtrise d’ouvrage interne sera l’interlocuteur des consultants fonctionnels, vos responsables IT ceux des consultants techniques, vos administrateurs de système d’information, ceux des consultants ETL et l’ensemble devra être placé sous l’autorité des directeurs de projets.

Cette implication à tous les niveaux et de toutes les personnes, vous permettra de respecter les délais et d’améliorer la qualité de la réalisation, grâce à une circulation de l’information plus fluide. Elle vous offrira également la possibilité d’assurer une bonne coordination des développements spécifiques éventuels et de pouvoir exercer les bons choix entre les diverses options de paramétrage et ou de personnalisation de votre projet. Votre implication n’aura pas le même degré d’intensité tout au long du projet, mais elle sera plus soutenue en amont et en fin à la fin de votre projet décisionnel.

En amont de votre projet, l’attention et la précision que vous apporterez au cahier des charges, la disponibilité pour répondre aux questions de votre prestataire de service, lui permettra de qualifier et de réaliser la solution la mieux adaptée à votre besoin. Au début de votre projet décisionnel, votre participation active aux ateliers fonctionnels et techniques, également à la phase de spécifications sera indispensable à l’élaboration de votre cahier de recette.

Enfin, la phase de qualification réclamera une mobilisation soutenue de l’ensemble de vos équipes, métiers, techniques et infrastructure. Cette participation active de tous vous évitera des mauvaises surprises à l’arrivée et favorisera une adaptation progressive avec votre nouvel environnement décisionnel. Les objectifs sont aussi d’accélérer le pilotage opérationnel en fin de projet.

Testez la conformité à votre besoin

Pour la conformité, réalisez que l’adéquation entre votre besoin et votre projet décisionnel, est déterminée lors des phases de cadrage et de spécifications. Lors de la phase de cadrage, l’équipe d’intégration, analyse votre besoin et votre existant (Audit). L’équipe peut ensuite procéder à une analyse des écarts et tracer un plan de convergence qui fera l’objet des spécifications générales et détaillées. Lors de ces étapes de votre projet, l’adéquation aux besoins est validée afin de vous permettre la rédaction du cahier de recette.

Pendant la phase de recette du projet décisionnel et les tests d’avant mise en production, intervenez et vérifiez la conformité des paramétrages et des différents développements avec les spécifications détaillées. Cette analyse d’écart est une opportunité pour demander les dernières rectifications ou modifications et de vous assurer que l’application est toujours en phase avec vos besoins, vos attentes et celles de vos utilisateurs.

Dune manière générale, la validation des objets livrables, doit faire l’objet de toute votre attention et ceci dans les délais planifiés avec la volonté de lever la moindre ambiguïté. Le respect de cette procédure est un facteur clé de la réussite de votre projet décisionnel. Encore une fois, pensez à associer étroitement les utilisateurs à cette tâche afin de sécuriser au maximum le déploiement de votre projet décisionnel.

Formez vos utilisateurs

La mise en place de votre projet décisionnel, SAS ou autre, bouleversera les habitudes de travail de vos collaborateurs et parfois même changera les processus de l’entreprise. Aussi la phase de formation de vos équipes et le transfert de compétences, constituera donc une étape cruciale.

L’objectif atendu est de garantir l’autonomie. Aussi prévoyez dès le départ des sessions de formation adaptées à chaque profil de vos utilisateurs et encore une fois encouragez fortement leur adhésion à votre projet. Pour cela favorisez leur participation tout au long de celui-ci.

Regardez également avec un oeil bienveillant, les propositions de prestations d’accompagnement à la conduite du changement qu’impliquera votre projet. Les projets décisionnels sont la traduction de votre organisation et, potentiellement de nouveaux processus que vous souhaitez mettre en application et pour lesquels l’adhésion de tous les acteurs de votre entreprise est indispensable. On ne le rappelle toujours, la réussite d’un projet de la mise en œuvre d’un outil décisionnel, repose aussi grandement sur la mobilisation de tout le personnel de l’entreprise concernée !

Nommez des administrateurs en interne

Votre application décisionnelle n’est bien sur pas figée et elle sera susceptible d’évoluer dans le temps, tant dans ses paramétrages et que sa configuration et ce tout au long de son cycle de vie. Envisagez donc un administrateur fonctionnel. Ce dernier aura en charge de qualifier les nouveaux besoins requis auprès des utilisateurs et de paramétrer l’application et éventuelement un administrateur technique responsable du chargement des nouveaux indicateurs selon les spécifications métier de vos utilisateurs.

Dans votre projet décisionnel, la souplesse et l’évolutivité permettent d’envisager ce mode opératoire. A mesure de l’évolution des besoins des utilisateurs et des changements de votre environnement technologique, nommez des responsables internes "applicatifs", ils seront chargés d’administrer les évolutions futures et de veiller au bon fonctionnement quotidien de votre solution décisionnelle. Vous pouvez également sous-traiter ce travail à un prestataire de service spécialisé, afin de tirer le maximum de son expérience et de son potentiel.

Ce prestataire de service à l’aide de ses consultants techniques et ou fonctionnels seront chargé entre autre d’identifier et qualifier les nouveaux besoins, d’estimer l’opportunité des évolutions de votre solution décisionnelle, de vous proposer la meilleure réponse et de mobiliser l’équipe la mieux adaptée. Il à été souvent observé que les actions de ce type d’intervenant, permettent une réduction significative du coût et des délais de réalisation des lots, versions et nouvelles solutions que vous comptez déployer.

Inspiré d’une étude de Lionel Poli, Directeur des Services SAS (SAS Institute).

Formation SAS Enterprise Guide V4 (SAS/SEG)

Le but de cette formation SAS, est d’apprendre à utiliser SAS Enterprise Guide, réaliser des requêtes de sélection et de fusion et à l’aide de ces données requêtes, créer des rapports, de type listing, HTML, RTF, PDF, graphique …

Ces données peuvent se trouver dans des entrepôts de données, dans des SGBD, dans des fichiers bruts de type TXT, dans des fichiers Excel, dans des fichiers accessible par ODBC ou par SAS ACCESS, comme DB2, Oracle … l

SAS Enterprise Guide ne nécessite pas de connaître le langage de programmation SAS, au travers de questions ,de réponses et de paramétrage, dans des boites de dialogues conviviales, le système SAS  Enterprise Guide, construit pour vous les programmes qu’il soumettra au système SAS.

Sur la base des quatre phases BI suivantes :

• Accéder aux données
• Manipuler les données
• Synthétiser les données
• Présenter les données

SAS Enterprise Guide : Définition :

SAS Enterprise Guide, vous permet d’importer vos données quelque soit leurs formats, de stocker vos données dans un projet, de manipuler vos données, de filtrer et de joindre vos données (requêtes), de créer de nouveaux jeux de données, d’exporter ces données, de réaliser des rapports avec ces données, en les habillant d’une présentation personnalisée et dans des formats divers et variés comme : HTML, RTF, PDF …, enfin, d’automatiser vos traitements, d’automatiser les mises à jour des données et d’exécuter vos projets.

Etapes de la formation SAS / SEG :

• Positionnement du produit SAS Enterprise Guide.
• SAS enterprise Guide est un produit client qui s’installe sur des PC sur lesquels il n’est pas nécessaire d’avoir le produit SAS.
• Définition d’un projet SAS Enterprise Guide.
• Présentation de l’interface SAS / SEG.
• Création d’un projet avec SAS Enterprise Guide.
• Présentation de l’architecture de SAS Enterprise Guide.
• Accès aux données et intégration dans un projet SAS / SEG.
• Création de rapports simples.
• Création de requêtes.
• Réaliser des rapports sur les données issues des requêtes.
• Aller plus loin avec les requêtes, jointure de plusieurs tables, sélection de ligne, sélection de colonnes, création de colonnes calculées, joindre les données résultantes d’une requêtes à d’autres tables, utilisation de paramètres …
• Visualisation du code SAS générer par SAS Enterprise Guide, insertion de code SAS.
• Production de rapports et en automatiser les processus.
• Etats statistiques basiques et production de graphiques.
• Création de documents de synthèse.
• Programmer la mise à jour et la plannication de vos projets SAS Enterprise Guide.

LES PRE-REQUIS.

Conditions préalables :

Aucun pré-requis n’est nécessaire pour la formation SAS Enterprise Guide (SEG), si ce n’est d’avoir des notions de ce que sont des fichiers de données et de connaître l’interface MS Windows.

Il est toutefois souhaitable d’avoir une première expérience dans l’utilisation d’un système de requêtage de données.

Durée de la Formation SAS Enterprise Guide :

2 jours.

Formation SAS Macro (MACR).

Automatisation et paramétrage des traitements SAS
Avec le langage SAS Macro.

Le but de cette formation SAS, est l’étude des macro-variables et du langage macro SAS, son mode de fonctionnement, et son débuggage, comment automatiser des étapes SAS, comment générer du code SAS, grâce au langage SAS Macro.

Vous apprendrez comment automatiser des boucles de programmes avec paramétrage et substitution de code grâce au langage SAS MACRO.

La Formation au langage SAS MACRO est essentielle à une bonne prise en main de la programmation SAS, la maitrise de l’automatisation des tâches, la gestion avancée des boucles …

Les principaux point abordés dans la formation SAS MACRO sont :

• Une introduction au langage macro SAS
• Le déroulement d’un programme SAS macro
• Une introduction aux variables macro
• Les macro variables automatiques générées par SAS
• L’appel de macro variables
• Les macro variables de l’utilisateur
• A délimiter les noms de macro variables
• Les princpales fonctions macro SAS
• La définition et l’appel de programme SAS macro
• Les macro programmes avec des paramètres
• Le traitement conditionnel dans les programmes macro SAS
• Le traitement itératif dans les programmes macro
• Etude des tables globale et locale des symboles (variables macro)
• L’interface entre le langage SAS Macro et : l’étape DATA, le langage SQL
• La création de macro variables durant l’étape DATA
• Les références indirectes aux macro variables
• A créer des macro variables avec le langage SAS SQL

PRE-REQUIS.

Avoir préalablement suivie la formation SAS de Base et mis en application lors d’utilisations les concepts acquis. A défaut être à l’aise avec :

• Les instructions : Libname, Filename, LENGTH et RETAIN, Title, options ..
• Savoir créer des étapes DATA, pour lire ou écrire des fichiers externes
• Savoir utiliser les instructions de boucle comme : IF-THEN/ELSE, DO WHILE, DO UNTIL, et DO itératif
• Avoir déjà utilisé des fonctions de caractères telles que SUBSTR, SCAN, INDEX, et UPCASE
• Savoir utiliser les options de tables SAS telles que DROP=, KEEP= et OBS=
• Savoir de former des sous-ensembles de données avec la clause WHERE
• Savoir créer et utiliser des valeurs de date SAS et également des constantes de données SAS
• Savoir coder des appels à des procédures SAS de base telles que : SORT, PRINT, CONTENTS, MEANS, FREQ, TABULATE et CHART

Durée de la Formation :

2 jours.

Le but de cette formation SAS, est la découverte de l’interface de programmation SAS et l’utilisation des fonctionnalités incluses dans le module SAS base.

La formation SAS Base est essentielle pour toute personnes désireuse de programmer en langage SAS afin de : gérer, manipuler, transformer et restituer des données accessible par le Système SAS.

Formation au langage de programmation SAS Base et à ses concepts fondamentaux :

• Présentation des différentes étapes SAS. (DATA, Procédures).
• Création, exécution et correction de programmes, au travers des fenêtres : program editor, journal (compte rendu d’exécution), résultats.
• Découverte de la gestion des données avec le système SAS et des procédures permettant la restitution d’informations.
• Chargement des magasins de données SAS (Librairies), lecture des fichiers non SAS et chargement dans des tables SAS. Sélection des données …

Les principaux points abordés dans la formation SAS BASE sont :

• Les bases et les concepts du langage SAS.
• La création de rapports simple, graphiques et HTML.
• Création de rapport graphiques.
• Création de listes et de rapports agrégés.
• Lecture de fichiers externes bruts (plats).
• La lecture et la manipulation de données SAS.
• La création de variables, de filtres et modification des valeurs dans une table.
• La combinaison de tables (concaténations et fusions).
• Génération de rapports au format HTML via l’Output Delivery System.

LES PRE-REQUIS.

Connaitre MS Windows, avoir une notion de ce qu’est la programmation et ou avoir déjà saisi des requêtes, être un utilisateur des systèmes d’informations et au moins connaître les notions de fichier.

Durée de la Formation SAS Base:

3 jours.

SAS® Web Report Studio propose une interface de reporting web intuitive et performante pour tous les collaborateurs de l’entreprise. Intégré à SAS® Enterprise Business Intelligence Server, il offre à tous un accès simple aux informations de l’entreprise et leur permet de partager leurs rapports facilement et en toute sécurité à l’aide d’un simple navigateur Web, sans nécessiter de longues heures de formation. Il propose :

• un générateur de requêtes et de rapports incluant un assistant pour la création aisée des rapports, même par un utilisateur novice,
• l’accès aux données à travers un dictionnaire de données qui présente les informations avec une organisation et un langage métier
• des possibilités d’organisation des rapports très souples et aisées à personnaliser
• des fonctions de recherche rapide dans les rapports
• le stockage des rapports sous forme privée ou partagée
• des capacités fiables d’impression des rapports (format pdf) et d’export vers Microsoft Excel
• une très grande ouverture par l’utilisation de technologies web standard (J2EE) qui facilitent le déploiement sur des plates-formes hétérogènes et l’intégration avec les solutions existantes.

La gestion des rapports

• Organisation des rapports dans des dossiers hiérarchiques pour une navigation et une consultation plus aisée
• Gestion des mises à jour de rapports avec un maximum de souplesse
• Création de rapports en utilisant les éléments de programmation SAS DATA et SAS Output Delivery System.

L’interaction avec les rapports

• Élaborer des filtres, des tables de classement et des données graphiques.
• Déplacer les éléments de données vers la gauche ou la droite.
• Permuter la totalité d’un tableau croisé.
• Réaliser un tri simple ou composé sur les éléments de données affichés.
• Insérer des totaux et/ou des sous- totaux, calculer des pourcentages du total ou des sous-totaux.
• Réaliser des interactions OLAP
• Imprimer les rapports avec les options habituelles pour les marges, l’orientation des pages, le format de papier et l’étendue des valeurs de regroupement.
• Exporter les tableaux et les graphiques mis en forme ou leurs données vers Microsoft Excel ou en format texte.
• Choisir les paramètres des rapports dans des fenêtres de dialogue.

La création de rapports suivant le profil d’utilisation

• Créer une vue rapide sur les données qui permet de sélectionner la source de données et afficher une vue par défaut en une seule étape.
• Créer des rapports simples à l’aide d’un assistant qui guide les utilisateurs novices ou occasionnels
• Créer des rapports plus sophistiqués en mode Édition, qui procure plus de souplesse et des fonctions additionnelles
• Créer des indicateurs calculés sur mesure, des filtres et des agrégats.
• Utiliser les capacités avancées de mise en page et de formatage
• Lier des rapports
• Sur les tableaux et graphiques, définir des exceptions avec des mises en forme conditionnelles
• Synchroniser des composants du rapport pour afficher un niveau de détail identique ou conserver leur indépendance.
• Créer des modèles de rapports personnalisés.
• Utiliser différents types de graphiques : histogrammes 2D/3D, secteurs, courbes, nuages de points, etc.

L’accès aux données

• Accéder à des données de toutes sources :
  • Bases de données relationnelles telles que Oracle, BD2, SQL Server et Teradata,
  • Systèmes ERP tels que SAP R/3, SAP BW, PeopleSoft, Siebel ou Oracle,
  • Base de données multidimensionnelle SAS OLAP Server.
• Accéder à des données respectant les standards ouverts, comme SQL, MDX, ODBC et OLE DB.
• Les rapports peuvent contenir et joindre des données de sources de données multiples.
• Les rapports peuvent reposer sur des processus d’analyse en temps réel et sur la puissance analytique du serveur de traitement SAS.
• Les accès aux données, les requêtes et les processus d’analyse peuvent être exécutés sur tous les principaux environnements, tels que Linux, AIX, HP/UX, z/OS, Windows, Solaris, Tru64, OpenVMS.

L’administration et la facilité de gestion

• Véritable application Web client léger, facile à déployer et à administrer (uniquement Javascript et HTML envoyés au client).
• Interface centralisée unique d’administration et de configuration de l’environnement de reporting, SAS® Management Console
• Support HTTP/HTTPS pour la diffusion de HTML standard ou encrypté.
• Encryption 128bit pour des envois sécurisés d’informations.
• Personnalisation des apports et de l’application.
• Définition de profils d’utilisateurs par le département informatique, qui disposeront chacun d’un ensemble de fonctionnalités adapté à leurs besoins.
• Architecture ouverte reposant sur une infrastructure J2EE standard, la plate-forme et l’application sont indépendants du serveur.

L’internationalisation

• Interface disponible en 12 langues : Allemand, Anglais, Chinois simplifié, Coréen, Danois, Espagnol, Français standard, Italien, Japonais, Polonais, Russe et Suédois.

Source :  Sas Institute