IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

MS SQL Server Discussion :

update large table et verrous


Sujet :

MS SQL Server

  1. #1
    Candidat au Club
    Profil pro
    Inscrit en
    Juillet 2005
    Messages
    3
    Détails du profil
    Informations personnelles :
    Localisation : Suisse

    Informations forums :
    Inscription : Juillet 2005
    Messages : 3
    Points : 4
    Points
    4
    Par défaut update large table et verrous
    bonjour.

    Comment améliorer les performance d'un update sur une table de 20 millions de records en utilisant les options de lock ?

    Aucun autre accès ne fait des mises à jour.
    La table REF ne contient que 10 lignes.

    Cela prend une heure pour un update du style.

    UPDATE STG_PRESTATIONS WITH (TABLOCK)
    SET
    IDDestination_facture = ref.IDDestination_facture
    FROM
    STG_PRESTATIONS stg,
    REF_FLSF ref
    WHERE
    stg.flsf = ref.flsf

    Merci à tous.

  2. #2
    Rédacteur
    Avatar de WOLO Laurent
    Homme Profil pro
    Architecte de base de données
    Inscrit en
    Mars 2003
    Messages
    2 741
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 47
    Localisation : Congo-Brazzaville

    Informations professionnelles :
    Activité : Architecte de base de données
    Secteur : Finance

    Informations forums :
    Inscription : Mars 2003
    Messages : 2 741
    Points : 4 414
    Points
    4 414
    Par défaut
    Pourquoi ne pas utiliser la notion de transaction sérialialisable ?

  3. #3
    Membre régulier
    Profil pro
    Inscrit en
    Juillet 2003
    Messages
    74
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Juillet 2003
    Messages : 74
    Points : 84
    Points
    84
    Par défaut
    hello,

    J'ai plus ou moins le mm problème .. (avec 600 000 lignes sur 2 serveurs distribués)

    heu apaprement la trnasaction serializable est ce qui "mange" le plus de ressources mais bon je l'utilise dans mon update car c'est tt mm bcp plus sécurisé qu'un lock..
    je vais essayer en baissant le niveau de la transaction mais je voudrais bien eviter : (

    si quelqu'un a des optimisations classiques à proposer pour ce genre de chose je suis preneur aussi : )

    je cherche pour l'instant..

  4. #4
    Rédacteur

    Avatar de SQLpro
    Homme Profil pro
    Expert bases de données / SQL / MS SQL Server / Postgresql
    Inscrit en
    Mai 2002
    Messages
    21 911
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Var (Provence Alpes Côte d'Azur)

    Informations professionnelles :
    Activité : Expert bases de données / SQL / MS SQL Server / Postgresql
    Secteur : Conseil

    Informations forums :
    Inscription : Mai 2002
    Messages : 21 911
    Points : 51 666
    Points
    51 666
    Billets dans le blog
    6
    Par défaut
    Bien au contraite, si vous voulez des perf, il faut descendre le verrouillage ! pas le monter en TABLOCK !!!!!

    laissez faire l'optimiseur et pissez un requête la plus simple possible et avec des JOIN :

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    UPDATE STG_PRESTATIONS
    SET    IDDestination_facture = ref.IDDestination_facture
    FROM   STG_PRESTATIONS stg
           INNER JOIN REF_FLSF ref 
                 ON stg.flsf = ref.flsf
    Les colonnes stg.flsf et ref.flsf sont-elles indexées ? J'espère que oui ! Sachez que MS SQL Server n'index pas automatiquement les clef étrangères.

    La colonne STG_PRESTATIONS est-elle indexée ? J'espère que non.

    Dans le cas ou vous ne vous souciez pas de l'intégrité d'instant de l'exécution de l'update, alors veuillez procéder par lot de ligne. Cherchez le nombre moyen de ligne dont le volume correspondra à l'extent de stockage.

    exemple; si la longueur moyenne de la ligne cible de la table visée est de 200 octets, alors procédez par lots de 320 lignes (un extent = 8 pages de données, soit 8 * 8 Ko).

    Dès lors procédez comme suit :

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
     
    DECLARE @IDMIN INT, @IDMAX INT
     
    WHILE EXISTS (SELECT *
                  FROM   STG_PRESTATIONS stg
                         INNER JOIN REF_FLSF ref 
                               ON stg.flsf = ref.flsf
                  WHERE  stg.IDDestination_facture <> ref.IDDestination_facture)
    BEGIN
      --> sélectionnez TOP 320 lignes à mettre à jour dans l'ordre de la clef et retenez l'id max
      --> appliquez l'update restreint à la tranche :
     
       UPDATE STG_PRESTATIONS
       SET    IDDestination_facture = ref.IDDestination_facture
       FROM   STG_PRESTATIONS stg
              INNER JOIN REF_FLSF ref 
                    ON stg.flsf = ref.flsf
       WHERE  stg.id BETWEEN @IDMIN AND @IDMAX-1
     
       --> alimentez @DIMIN avec @IDMAX   
       SET @IDMIN = @IDMAX
     
    END

    A +

  5. #5
    Rédacteur/Modérateur

    Avatar de Fabien Celaia
    Homme Profil pro
    Administrateur de base de données
    Inscrit en
    Octobre 2002
    Messages
    4 224
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 54
    Localisation : Suisse

    Informations professionnelles :
    Activité : Administrateur de base de données
    Secteur : Service public

    Informations forums :
    Inscription : Octobre 2002
    Messages : 4 224
    Points : 19 566
    Points
    19 566
    Billets dans le blog
    25
    Par défaut
    Assurez-vous qu'un index existe sur stg.flsf, que les deux colonnes
    stg.flsf et ref.flsf soient exactement de même type et queles statistiques soient à jur. Au besoin, exécutez un update statistics + sp_recompile sur votre grosse table (attention : à faire de nuit ou le we, hors traitements batch)

Discussions similaires

  1. ERROR: insert or update on table "ecole" violate
    Par doulel dans le forum PostgreSQL
    Réponses: 1
    Dernier message: 17/04/2006, 21h24
  2. ERROR:insert or update on table "ecol" violates fo
    Par doulel dans le forum Langage SQL
    Réponses: 3
    Dernier message: 16/04/2006, 10h19
  3. [Oracle 9i] Triggers sur les updates de tables
    Par zestrellita dans le forum Oracle
    Réponses: 12
    Dernier message: 07/12/2005, 11h32
  4. [update]deux tables dans la requete
    Par thief dans le forum Oracle
    Réponses: 2
    Dernier message: 02/09/2005, 16h45
  5. UPDATE multi-tables sous SQL Server
    Par Cybernet dans le forum Langage SQL
    Réponses: 8
    Dernier message: 25/03/2004, 15h34

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo