Sql azure performance et montee en charge (1)

Azure Camp spécial SQL Azure 14/12/2011

La communauté AzureLe site www.zecloud.frLes Azure Campshttp://Zecloud.codeplex.com Tout le code source produit lorsdes Azure Camps en licence MS-PLL’azure user group :www.azureusergroup.com/group/frenchusergroupTwitter ZeCloud twitter.com/zecloudEt page Facebook ZeCloud Devenez Fan !!

Programme- Présentation de la communauté Azure- Introduction- Pattern dimplémentation- Performance & Throttling- Montée en Charge & Fédération- Questions Réponses- Code

Performance et Montée En Charge avec SQL Azure Hervé Roggero MVP SQL Azure Blue Syntax Consulting

A mon sujetComment me contacter Twitter: @hroggero E-mail: hroggero@bluesyntax.net Website: www.bluesyntax.netContributions Blue Syntax Consulting PRO SQL Azure (APress) Trainings Azure (Wednesday) Consulting Azure President du Azure Florida Association (linked-in)Floride…

AgendaPerformance Considérations Pertes de connexion et mécanismes de limitationMontée en Charge Sharding Fédération Projet open source: Enzo

Performance

ConsidérationsRegroupement de ConnexionsLogique de perte de connexionCacheEntity Framework (lazy loading)Chatty vs. Chunky (bavard vs massif) [mais je laisseraisles termes technique en anglais]

Topologie

Raisons de perte de connexion Serrures excessives (1 million de serrures) Transactions non commises (<20% du log file) Transactions bloquant le système (max: 20 secondes) Taille du log file (1Go par transaction) Utilisation de TempDB (5Go par session) Utilisation mémoire (>16Mb pendant 20+ secondes) Taille de la base de donnée Connexions inactives (30 minutes)

Raisons de perte de connexion (2) Durée d’une transaction (24 heures) DoS (éviter les attaques avec le pare-feu) Problèmes avec le réseau Problèmes avec la répartition des charges Autres raisons (CPU, I/O…)

Mécanisme de Limitation (throttling)Erreurs de connexion 40501 : le service est actuellement occupé. Réessayez la demande après 10 secondes. ID de lincident : %ls. Code : %d. 40544 : la base de données a atteint son quota de taille. Partitionnez ou supprimez des données, supprimez des index ou consultez la documentation afin de rechercher des solutions possibles. ID de lincident : %ls. Code : %d. 40545 : le service rencontre un problème actuellement en cours danalyse. ID de lincident : %ls. Code : %d

Décodage des codes de raison 131075 modulo 4 = 3http://msdn.microsoft.com/fr-fr/library/4cff491e-9359-4454-bd7c-fb72c4c452ca#bkmk_throt_errors

Modes de LimitationCode du Description Types d’instructions Instructions qui peuventmode de rejetees etre traiteeslimitation0 Aucune limitation Aucune Toutes1 Rejeter les mises a INSERT, UPDATE, DELETE, DROP TABLE & jour (insert) CREATE TABLE & INDEX, TRUNCATE INDEX2 Rejeter toutes les INSERT, UPDATE, SELECT ecritures DELETE, CREATE, DROP3 Rejeter tout Toutes Aucune

Traiter les Pertes de Connexion Réduction Exponentielle; peut s’appliquer aux chargeshttp://geekswithblogs.net/hroggero/archive/2011/05/26/cloud-lesson-learned-exponential-backoff.aspx

Traiter Les Erreurs Temporaires Transient Condition Handling Frameworkhttp://windowsazurecat.com/2010/10/best-practices-for-handling-transient-conditions-in-sql-azure-client-applications/

Exemple: Backup pour SQL Azure Algorithme adapte pour rester sous la Connexion courbe de En parallele Prepare les limitation de SQL commandes SQL Azure Connexion Code d’adaptation Ouvre connexion represente 30% du code backup En parallele Execute une Charges commande SQL Connexion Sauve donnees dans fichier

Exemple: Copier des donneesX: Size du batch; Y: Temps d’Execution

Montée en charge

ShardingDistribution des données Horizontalement VerticalementRessources non-partagéesDifférent modèlesObjectif de la montée en charge: Expérience du client #1 est la même que celle du client #1000

Shard Linéaire (linear)Une base de donnée par clientEmbarquement simpleInvestissement linéaire

Shard Compressé (compressed)Optimisation de stockage & réduction de coutsImplémentée avec: database schemas data fédération

Shard étendu (expanded)Traite les bases comme une unité de stockage logiquePas de relations entre les bases et les clientsUtilise les INSERTs round-robin

Revue des Modèles

Fédération avec SQL Azure

Accéder au RootUSE FEDERATION ROOT WITH RESETSELECT * FROM configuration_table

Accéder a un MembreUSE FEDERATION customers (cid=10) WITH RESET, FILTERING=OFFSELECT * FROM customers

Accéder a un EnregistrementUSE FEDERATION customers (cid=10) WITH RESET, FILTERING=ONSELECT * FROM customers

DifficultésChanger le contexte avec USE FEDERATIONDifficile d’accéder aux données reparties (FAN OUT) Sur plusieurs membres d’une fédération Sur plusieurs fédérations SELECT * FROM customers SELECT * FROM customers WHERE cid NOT IN (select cid FROM sales)

Projet Open-Source: EnzoPlatforme sharding unifiee Compressee, étendue, lineaire SQL Azure Federation

Enzo: Mode APIRootDatabase root_db = new RootDatabase(“connectionstring");root_db["customers"].DefaultExecutionContext.Mode =ShardCore.ShardOperationMode.FAN_OUT;root_db["customers"].ExecuteDataTable("select * from customer");

Enzo: Mode SQL DistribuéeRootDatabase root_db = new RootDatabase(“connectionstring");string sql = @“SELECT * USING (select * from customer) FEDERATED ON (customers)";root_db.ExecuteDataTable(sql);

Enzo: Mode SQL Distribuée (2)RootDatabase root_db = new RootDatabase(“connectionstring");string sql = @“SELECT * USING (select * from customer) FEDERATED ON (customers) WHERE cid NOT IN (select cid from sales where storeid = 2) FEDERATED ON (sales)";root_db.ExecuteDataTable(sql);

Enzo: Cache Cache les résultats localement Utilisé avec les commandes SQL distribuéesstring sql = @“SELECT * USING (select * from customer) FEDERATED ON (customers) CACHED FOR 30";

Demo / Questions

http://www.zecloud.fr	1256
http://localhost	43
http://zecloudv3.cloudapp.net	7
http://eabd65c28fed4e7292dfab948c95e7da.cloudapp.net	6
http://127.0.0.1	3
http://dd799d4d0515450eb4681521cc3cef1a.cloudapp.net	2
http://www.zecloudstore.com	2
http://ec77c8a2906b4fadb08e8e3d5939d9af.cloudapp.net	2
http://3dc1af71657940fa93128415a33d52f6.cloudapp.net	2
http://561ac356a8084a52bf2f54545ce260b8.cloudapp.net	1
http://af1b003cdc814832b2fb5f9be3869115.cloudapp.net	1
http://mail.zecloud.fr	1
http://editor.abtasty.com	1

Sql azure performance et montee en charge (1)

by Aymeric Weinbach on Jan 03, 2012

Accessibility

Tags

Upload Details

Usage Rights

13 Embeds 1,327

Statistics

Sql azure performance et montee en charge (1) — Presentation Transcript