Nettoyer et transformer ses données avec Openrefine : partie 2Mathieu Saby
2ème partie de la formation Openrefine donnée à l'URFIST de Paris le 25 mai 2018
La version pptx et les données sont disponibles librement sur Open Science Framework : https://osf.io/uqwrb/
BigData_TP1: Initiation à Hadoop et Map-ReduceLilia Sfaxi
Pour accéder aux fichiers nécessaires pour faire ce TP, visitez: https://drive.google.com/folderview?id=0Bz7DokLRQvx7M2JWZEt1VHdwSE0&usp=sharing
Pour plus de contenu, Visitez http://liliasfaxi.wix.com/liliasfaxi !
Nettoyer et transformer ses données avec Openrefine : partie 2Mathieu Saby
2ème partie de la formation Openrefine donnée à l'URFIST de Paris le 25 mai 2018
La version pptx et les données sont disponibles librement sur Open Science Framework : https://osf.io/uqwrb/
BigData_TP1: Initiation à Hadoop et Map-ReduceLilia Sfaxi
Pour accéder aux fichiers nécessaires pour faire ce TP, visitez: https://drive.google.com/folderview?id=0Bz7DokLRQvx7M2JWZEt1VHdwSE0&usp=sharing
Pour plus de contenu, Visitez http://liliasfaxi.wix.com/liliasfaxi !
Pour accéder aux fichiers nécessaires pour faire ce TP, visitez: https://drive.google.com/folderview?id=0Bz7DokLRQvx7M2JWZEt1VHdwSE0&usp=sharing
Pour plus de contenu, Visitez http://liliasfaxi.wix.com/liliasfaxi !
Venez découvrir les méthodes, outils et best practices utilisés par les experts du Support Microsoft pour identifier et corrigier les problèmes de performances sur SQL Serveur ou tout simplement en optimiser les performances. Cette session présentée par nos spécialistes au Support SQL Serveur en France, sera pour vous une occasion unique de les rencontrer ! Avec environ 50% de contenu original pour cesTechdays, nous aborderons entre autre la gestion des index, du columns store ou encore de la compression, nous vous présenterons également les outils utilisés et la manière de les utiliser.
Principes de fonctionnement unix, Tâches différées, Boot et lancement du noyau, Processus init, Services et démons, Services et démons, Les runlevels, Scripts de lancement des services
OPaie-RH, la solution clé en main pour vous simplifier la gestion de la paie et des RH. Dotée d’interfaces conviviales, intuitives et
entièrement personnalisables, notre solution est conçue pour vous faire gagner du temps en simplifiant les opérations récurrentes, en allégeant les saisies et en regroupant les informations. Qu’il s’agisse de gérer la paie ou les ressources humaines, des assistants et des modèles prêts à l’emploi vous aident à optimiser toutes les tâches routinières pour vous concentrer sur la bonne marche de votre entreprise.
OPaie-RH, solution 100% web disponible en 2 modes:
• Mode SaaS, sans frais de licence ni engagement, accessible depuis un simple navigateur Web à partir de tout ordinateur connecté sur Internet.
• Mode classique pour les clients désirant garder leurs données en interne.
Vous gérez un ou plusieurs point(s) de vente ? Une chaîne de magasins ?
Peu importe la nature de votre commerce, le volume d’articles gérés ou encore le nombre de points de vente associés,
Odoo offre un ensemble de solutions simples et entièrement personnalisables pour accélérer le processus de vente aux caisses, augmenter la satisfaction de vos clients et optimiser au maximum la gestion de votre stock et de votre back office
Avec ce module de gestion des Ressources Humaines d'Odoo, centralisez les informations sur votre personnel, votre organigramme, le recrutement, les évaluations, les formations les congés, les notes de frais ou encore la gestion de paie.
Pour accéder aux fichiers nécessaires pour faire ce TP, visitez: https://drive.google.com/folderview?id=0Bz7DokLRQvx7M2JWZEt1VHdwSE0&usp=sharing
Pour plus de contenu, Visitez http://liliasfaxi.wix.com/liliasfaxi !
Venez découvrir les méthodes, outils et best practices utilisés par les experts du Support Microsoft pour identifier et corrigier les problèmes de performances sur SQL Serveur ou tout simplement en optimiser les performances. Cette session présentée par nos spécialistes au Support SQL Serveur en France, sera pour vous une occasion unique de les rencontrer ! Avec environ 50% de contenu original pour cesTechdays, nous aborderons entre autre la gestion des index, du columns store ou encore de la compression, nous vous présenterons également les outils utilisés et la manière de les utiliser.
Principes de fonctionnement unix, Tâches différées, Boot et lancement du noyau, Processus init, Services et démons, Services et démons, Les runlevels, Scripts de lancement des services
OPaie-RH, la solution clé en main pour vous simplifier la gestion de la paie et des RH. Dotée d’interfaces conviviales, intuitives et
entièrement personnalisables, notre solution est conçue pour vous faire gagner du temps en simplifiant les opérations récurrentes, en allégeant les saisies et en regroupant les informations. Qu’il s’agisse de gérer la paie ou les ressources humaines, des assistants et des modèles prêts à l’emploi vous aident à optimiser toutes les tâches routinières pour vous concentrer sur la bonne marche de votre entreprise.
OPaie-RH, solution 100% web disponible en 2 modes:
• Mode SaaS, sans frais de licence ni engagement, accessible depuis un simple navigateur Web à partir de tout ordinateur connecté sur Internet.
• Mode classique pour les clients désirant garder leurs données en interne.
Vous gérez un ou plusieurs point(s) de vente ? Une chaîne de magasins ?
Peu importe la nature de votre commerce, le volume d’articles gérés ou encore le nombre de points de vente associés,
Odoo offre un ensemble de solutions simples et entièrement personnalisables pour accélérer le processus de vente aux caisses, augmenter la satisfaction de vos clients et optimiser au maximum la gestion de votre stock et de votre back office
Avec ce module de gestion des Ressources Humaines d'Odoo, centralisez les informations sur votre personnel, votre organigramme, le recrutement, les évaluations, les formations les congés, les notes de frais ou encore la gestion de paie.
[MÉMOIRE] Améliorer l'image de marque d'une entreprise sur les médias sociaux...Adrien Bourzat
ABSTRACT
La montée en puissance des médias sociaux sur internet a bousculé les modèles traditionnels de communication des entreprises. Le consommateur peut désormais facilement créer, commenter ou relayer des informations sur les marques sur les médias sociaux. Nombreuses sont les entreprises victimes de crise de communication online, affectant de manière durable leur image de marque. Dès lors, comment dans cet espace où elle ne contrôle plus ce qui se dit sur elle, une entreprise peut-elle améliorer son image de marque auprès des consommateurs sur les médias sociaux? Un vrai challenge pour les entreprises d’aujourd’hui qui se doivent de comprendre les spécificités de ces nouveaux médias et d’établir une stratégie de communication efficace. Cette recherche a donc une double visée : d’une part, découvrir l’ampleur de l’adoption des médias sociaux comme outils de communication et, d’autre part, d’ouvrir des pistes de réflexion sur les leviers permettant aux entreprises d’améliorer leur image de marque sur ces nouveaux médias.
Conférence Groupe Dia-Mart 2016 • Et si la prochaine révolution retail était ...Groupe Dia-Mart
La réinvention du retail passe, bien sûr, par le digital, le "data driven marketing" et la technologie. Elle passe surtout par la capacité à inventer de nouvelles formes de relations avec des clients – et pour cela à changer les pratiques de nos entreprises. Les solutions existent : découvrez comment certains les mettent déjà en œuvre.
• Les nouvelles attentes relationnelles des clients Guillaume Antonietti (Directeur de Côté Clients)
• Nespresso : pourquoi et comment même une love brand emblématique doit se remettre en cause -Arnaud Deschamps (Directeur Général de Nespresso France)
• Les nouveaux modes d'interaction et de relation avec les clients. Eric Lebailly (Directeur associé chez Dia-Mart Consulting)
• Les concepts magasins de demain, incarnations de la "révolution clients". Georges Duarte (Directeur associé chez UX in Situ)
• Orientation clients : la transformation d’une grande entreprise de services. Sylvie Joseph (Directrice du programme de transformation interne, La Poste)
• De l'étude à l'écoute, de l'écoute à la culture. Guillaume Antonietti (Directeur de Côté Clients)
• Conclusion par Michel-Edouard Leclerc (Président, E.Leclerc)
• Animation et synthèses : Cédric Ducrocq (PDG du Groupe Dia-Mart)
Need it help in Operating System quiz(computer language) and in some courseDouria Zohbi
Good Day Sir/Madam
Kindly note that i would like to ask if can anybody help me in the below document ( the solution of a quiz in operating system- computer language) and one of PDF who the paragraph has a circle (need it the course with example and detail explain please)
kindly help me in this and send to me the solution on (douriazohbi@gmail.com)
looking forward for your Kind reply
Best Regards
Modern DevOps - kill the bottleneck (part 2/2)Loic Ortola
Most Developers live in Wonderland, a place where resources are unlimited, failures don't happen and where we take naps inside giant mushrooms.
The reality is different. Bottlenecks, failures, latency... take the red pill and come down the rabbit hole with us.
What the common bottlenecks are, how to detect them, the usual optimizations, and a full-scale use-case based on Jawg Maps (part 2)
Need it help in Operating System quiz(computer language) and in some courseDouria Zohbi
Good Day Sir/Madam
Kindly note that i would like to ask if can anybody help me in the below document ( the solution of a quiz in operating system- computer language) and one of PDF who the paragraph has a circle (need it the course with example and detail explain please)
kindly help me in this and send to me the solution on (douriazohbi@gmail.com)
looking forward for your Kind reply
Best Regards
Opérateurs Ensemblistes | SQL Oracle. Telecharger Cours sql oracle gratuit, administration oracle,A la fin de ce chapitre, vous saurez :
Décrire les opérateurs ensemblistes
Utiliser un opérateur ensembliste pour combiner plusieurs requêtes en une seule
Vérifier l'ordre des lignes ramenées
SQL Oracle | Regrouper les Données avec les Fonctions de Groupewebreaker
SQL Oracle | Regrouper les Données avec les Fonctions de Groupe. Telecharger cours sql oracle gratuit. Objectifs du cours... http://www.telechargercours.com
Administration systeme UNIX, Telecharger Cours gratuit d'administration systeme d'exploitation unix, les commandes, linstallation, la gestion, la configuration
Telecharger Cours Systèmes d’exploitation windows: Administration Windowswebreaker
Installation ou mise à niveau de Windows, Configuration de l’environnement Windows, Connexion d’ordinateurs clients Windows à des réseaux, Création et gestion de comptes d’utilisateur, Gestion de l’accès aux ressources à l’aide de groupes, Gestion de données à l’aide du système de fichiers NTFS, Accès aux ressources disque, Surveillance et optimisation des performances dans Windows, Implémentation de la sécurité dans Windows, Configuration de l’impression, Résolution de noms DNS, Services de publication, Service DHCP, Active Directory
Telecharger Cours Systèmes d’exploitation windows: Administration Windows
Examne sybase corrige
1. LPRO-ABD & ABD AVANCEE 2009/2010
Royaume du Maroc
Ministère de l'Education Nationale,
de l'Enseignement Supérieur, de la Formation
des Cadres et de la Recherche Scientifique
Université IBN TOFAIL
Licence professionnelle
Administration des bases de données
Promotion 2009-2010
PARTIE I : QCM MIN 2 / MAX 14.5 Moyenne de la
classe 10/ 25
1- Lors de l’analyse du rapport de SP_SYSMON on remarque que : SPINLOCK CONTENTION = 80%. Quelle(s)
opération(s) doit-on entreprendre ? (2p) chaque partition ou cache ajouté aura sa propre HASH TABLE
Ajouter un buffer pool de 16k
Augmenter la taille des caches de données
Augmenter la taille des devices
Affecter plus de processeurs à ASE
Augmenter la mémoire allouée à l’ASE
X Partitionner les caches existants - Ajouter des caches de données et les alloués aux objets les plus utilisés
2- Quel est le propos de l’option de création de device : dsync? (1p) permet l’écriture directe sur disque sous unix
Synchroniser l’écriture dans les devices et leur miroir
Synchroniser l’écriture dans les bases de données utilisateurs et la base Master
X Contrôler l’écriture vers le système d’exploitation
Contrôler l’écriture lors d’une sauvegarde
3- Quelles actions peuvent causer un verrouillage sur les tables systèmes de la base Master ? (2p)
Exécution d’une transaction avec beaucoup d’insert
Exécution d’une transaction avec beaucoup d’update
X Exécution de plusieurs scripts de création de base de données avec l’allocation des ressources.
Suppression massive de colonnes
4- Sur quel niveau les statistiques table/indexe sont stockées? (1p) sysstatistics contient les statistiques sur les colonnes !!
Sysstatistics
X Systabstats
Indexe leaf level
Page système
5- Comment diagnostiquer un SKEW ? (1p) un SKEW et un balancement non équitable des partitions d’une table
Optdiag
X Sp_help
X Sp_helpartition
Sp_helpsegment
6- Quand on supprime une ligne d’une table DOL, qu’est ce qui est vrai ? (1p) suppression logique d’une ligne dans une
table DOL réclamé automatiquement ou par REORG ou autre technique de défragmention
Les lignes suivantes sont déplacées vers le haut
L’espace reste libre pour une éventuelle insertion
X L’espace ne sera pas réclamé immédiatement mais peut l’être par la suite
L’espace est mis à 0 et sera perdu à jamais
7- La table Tab1 a un indexe créé selon la commande : CREATE INDEX IDX1 ON TAB1 (COL1, COL2 DESC).
Quelle(s) requête(s) n’auront pas besoin d’un tri? (2p) col1 est la clé principale de l’indexe. Et puisque le dernier niveau de l’indexe
est toujours chaîné on peut renverser l’ordre de tri mais jamais l’ordre des colonnes dans la clause ORDER BY
Select * from tab1 order by col1, col2
X Select * from tab1 order by col1, col2 desc
Select * from tab1 order by col2 desc, col1 asc
X Select * from tab1 order by col1 desc, col2 asc
EXAMEN CORRIGE
2. Examen – Administration base de données.
LPRO-ABD & ABD AVANCEE 2009/2010
8- La table Tab1 a 50000 lignes, et un indexe non clustérisé sur col1. Quelle requête utilisera moins d’I/O? (1p)
Min et Max dans la même requête est toujours plus couteuse est déconseillée
Select min(col1) as MINIM, max(col1) as MAXIM from Tab1
X Select MINIM=(select min(col1) from Tab1), select MAXIM=(select max(col1) from tab1)
Aucune différence entre les deux.
9- Une procédure stockée d’UPDATE utilise une jointure entre Tab1 et Tab2. Lors de son exécution on remarque que l’OPTIMIZER, dans des cas
choisit la table Tab1 comme externe, dans d’autre cas il choisit Tab2. Comment réduire ou éliminer les éventuels DEADLOCK ? (1p) faut garder le
même ordre de choix de la table externe et celle interne pour que les requêtes suivent le même chemin de verrouillage de pages
Créer un indexe sur Tab1
X Set force plan
Set sort_merge
Créer une vue sur les deux tables
10- La promotion du verrouillage au niveau serveur est configurée comme suit : Page lock promotion (HWM 200, LWM 100, PCT 60) Row lock
promotion (HWM 1800, LWM 1200, PCT 70). La table DOL Tab1 a 200 pages et 10 lignes par page. Une requête sur Tab1 a besoin de 1400
verrouillages de ligne. Quelle sera la promotion de verrouillage dans ce cas ? (3p) la promotion est toujours vers la table entière
Aucune promotion
Promotion vers le verrouillage de 140 pages
Promotion vers le verrouillage de 140 pages puis un verrouillage de table
X Promotion vers le verrouillage de table
11- Qu’est ce qui faux à propos du partitionnement d’un cache ? (2p)
X Le cache par défaut ne peut pas être partitionné (il peut l’être)
Un cache avec un buffer pool de 16 pages peut être partitionné
X Un cache de 2MO peut être partitionné en 8 partitions (minimum taille de 256 pages)
Un cache relaxé LRU peut être partitionné
X Un cache de 200MO peut être partitionné sur 128 partitions (maximum 64 partitions)
12- Qu’est ce qui est vrai à propos d’un verrouillage au niveau ligne (DOL ROW)? (2p)
Les pages d’indexe sont verrouillées
Aucun verrouillage
Verrouillage de pages ou de table
X Verrouillage de lignes ou de table (soit ligne soit la promotion vers la table entière)
13- Quels sont les solutions pour diminuer le verrouillage sur la dernière page d’une table DOL ? (1p)
Partitionner la table
Créer un indexe clustérisé
Changer le type de verrouillage en DOL ROW
Lier la table à un cache de données nommé
X Aucune de ces actions (la concurrence sur la dernière page est sentie lors de l’insertion alors que dans les tables DOL on
n’a pas ce problème)
14- L’utilisation d’un curseur de modification est avantageuse qu’une commande SQL, car ____? (2p)
Plus rapide (le curseur est plus lent)
X Concurrence optimale côté verrouillage (le fait de COMMITET à chaque ligne modifiée libère la page du verrouillage)
Moins de lignes dans le journal de transaction (produit + de ligne dans le journal car on doit COMMITER à chaque modification)
Meilleur gestion des privilèges utilisateur (les utilisateurs doivent avoir les privilèges)
15- Qu’est ce qui est vrai pour une table DOL avec un cluster ration = 0.9 ? (2p) supérieur à 0.8 pas de fragmentation,
les données sont très bien structurées
La table est mal structurée et doit être optimisée
Les données sont denses ce qui produira un Page-spliting
X Large IO est particulièrement efficace
L’indexe clustérisé est aussi grand que la table
16- Quelle est le nombre maximal de tables de travail pour une jointure? (1p)
10
12
X 14
16
3. Examen – Administration base de données.
LPRO-ABD & ABD AVANCEE 2009/2010
PARTIE II : Question / Réponse MIN 0 / MAX 19 Moyenne de la
classe 9.88/ 25
1. Quelle est la hiérarchie de stockage dans Sybase. (2p)
Device, database fragment, allocation unit, extent, page
2. La requête suivante est exécutée très fréquemment
Select t1.col1, t1.col2, t2.col1, t2.col2, t2.col3 t2.col4
from tab1 t1, tab2 t2 where t1.col1=t2.col1
Dans un souci de performance, quelle technique de dénormalisation peut-on utiliser ? (2p)
Réponses possibles : Joindre la table Tab1 et Tab2 dans une seule table. Placer la colonne Tab1.Col2 dans Tab2
3. Quel est le propos de l’option de création de table exp_row_size. Quelles sont ses conditions?
(2p)
Réserve un espace libre à la fin de ligne pour une éventuelle augmentation de la taille de la ligne ce qui nous permettra
d’éviter le ROW FORWORDING. A Utiliser avec des tables DOL sur des colonnes de longueur variable.
4. Citez 2 raisons pour qu’ASE n’utilise pas un large I/O. (1p)
Réponses possibles : Les pages souhaitées se trouvent déjà sur un buffer pool d’une page. Aucun large buffer pool
n’existe. Les pages souhaitées se trouvent sur le premier extent de l’unité d’allocation. Le Prefetching est désactivé…
5. Donnez l’algorithme d’accès aux données dans Sybase. (2p)
Login
Permission
Proxy
DB User
Alias
Guest
Refus
6. Quand une page est flashée manuellement sur le disque ? (2p)
Après l’exécution manuelle de la commande CHECKPOINT (Autre réponse : après un COMMIT pour les pages du journal)
7. Quel est le propos des THRESHOLD ? (2p)
Procédures stockées utilisateurs exécutées quand l’espace libre (en terme de pages) sur le segment observé à atteint le
seuil configuré.
8. Considérant la partie du rapport de SP_SYSMON suivante :
Cache Turnover
Buffers Grabbed 553.2 997.3 9956979 n/a
Buffers Grabbed Dirty 0.0 0.0 10 0.01 %
………………………………………………………………
………………………………………………………………
Asynchronous Prefetch Activity
APFs Issued 71.9 129.7 1294853 63.7 %
APFs Denied Due To
APF I/O Overloads 0.0 0.0 0 0.0 %
APF Limit Overloads 10 20 20780 10 %
APF Reused Overloads 0.2 0.4 4053 0.2 %
4. Examen – Administration base de données.
LPRO-ABD & ABD AVANCEE 2009/2010
Y a-t-il des problèmes sur ce serveur ? Si oui, lesquels ? Comment peut-on les résoudre ? (4p)
Oui.
1- Buffers Grabbed Dirty > 0 des DIRTY PAGES ont été trouvée dans la zone de vidage à l’extrémité LRU
Solution : revoir la configuration générale des caches et celle de la mémoire de l’ASE.
2- APF Limit Overloads = 10% un nombre important d’APF refusés pour manque de buffers Solution : augmenter
la taille du cache, du pool et la portion des APFs dans le pool.
9. Citez 4 paramètres pris en compte par l’OPTIMIZER lors de l’optimisation des jointures par
fusion. (3p)
Réponses possibles : Set sort_merge on ; présence d’indexe ; Equi-jointure ; aucune colonne LOB ; nombre de table
temp < 14…
10.
A- Ecrivez un script permettant de régénérer tous les triggers de la base de données. (2p)
ddlgen –Usa –P –Sserveur –TTR –Ddb_test –Oscript_trig.sql
Créer un fichier script_trig.bat ayant comme texte l’instruction isql –Usa –P –Snom_serveur –iscript_trig.sql
Autre réponse : Utiliser le mode graphique !!!
B- Ecrivez un script permettant de vérifier et réindexer (en cas d’erreurs) toutes les tables
indexées. (3p)
select distinct('dbcc reindex (' + so.name + ')') from sysindexes si, sysobjects so
where si.id=so.id and si.indid between 1 and 250 and so.type='U'
Créer un fichier script_reindex.bat ayant comme texte l’instruction isql –Usa –P –Snom_serveur –iscript_reindex.sql
EXAMEN /20 (50%)
TP et TD CLASSE
/20 (25%)
TP et Appréciation
/20 (25%)
Moyenne Générale
/20 (NOTE FINALE)*
MIN 0.80 8 0 4
MAX 13 20 20 18
Moyenne
6.36 13.78 10.14 9.72
Validation 14 Rattrapage 15
* : NOTE FINALE = ((NOTE TP TD CLASSE + APPRECIATION) x 0.25)
+
((NOTE TP + APPRECIATION) x 0.25)
+
(NOTE EXAMEN x 0.5)
+
MAJORATION