IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

Développement SQL Server Discussion :

SQL SERVER 2005 - SSIS - time out et index de tables


Sujet :

Développement SQL Server

  1. #1
    Membre du Club
    Profil pro
    Inscrit en
    Juillet 2006
    Messages
    95
    Détails du profil
    Informations personnelles :
    Localisation : France, Gard (Languedoc Roussillon)

    Informations forums :
    Inscription : Juillet 2006
    Messages : 95
    Points : 66
    Points
    66
    Par défaut SQL SERVER 2005 - SSIS - time out et index de tables
    Bonjour,

    Via un lot SSIS, je souhaite alimenter une table sql server qui contient 8 champs, dont le premier champ est un champ compteur
    Les données récupérées le sont sur AS400 via un connecteur ODBC I - Series.
    Je suis censé récupérer 10 occurrences dans ma table destination.

    Si ma table destination ne dispose d'aucun index, ce traitement se fait en un claquement de doigt.
    Si ma table ne contient qu'un seul index (par exemple une primary key sur mon champ compteur), je déclenche des time out ou, si je force les time out à 0 sur mes connexions, mon lot ne fini jamais sur un serveur quadri processeur !

    Je dois louper un truc gros comme une maison, mais je vois pas trop là...

    MErci pour votre aide

  2. #2
    Rédacteur

    Avatar de SQLpro
    Homme Profil pro
    Expert bases de données / SQL / MS SQL Server / Postgresql
    Inscrit en
    Mai 2002
    Messages
    21 772
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Var (Provence Alpes Côte d'Azur)

    Informations professionnelles :
    Activité : Expert bases de données / SQL / MS SQL Server / Postgresql
    Secteur : Conseil

    Informations forums :
    Inscription : Mai 2002
    Messages : 21 772
    Points : 52 737
    Points
    52 737
    Billets dans le blog
    5
    Par défaut
    Pourquoi utilisez vous SSIS pour un truc aussi simple ? Allez-vous acheter vos clopes avec une formule 1 ???

    Créez un serveur lié et faites une requête :
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    INSERT INTO MaTable 
    SELECT MonServeurLié.MaBase.MonSchema.MaTable
    WHERE ...
    A +
    Frédéric Brouard - SQLpro - ARCHITECTE DE DONNÉES - expert SGBDR et langage SQL
    Le site sur les SGBD relationnels et le langage SQL: http://sqlpro.developpez.com/
    Blog SQL, SQL Server, SGBDR : http://blog.developpez.com/sqlpro
    Expert Microsoft SQL Server - M.V.P. (Most valuable Professional) MS Corp.
    Entreprise SQL SPOT : modélisation, conseils, audit, optimisation, formation...
    * * * * * Expertise SQL Server : http://mssqlserver.fr/ * * * * *

  3. #3
    Membre du Club
    Profil pro
    Inscrit en
    Juillet 2006
    Messages
    95
    Détails du profil
    Informations personnelles :
    Localisation : France, Gard (Languedoc Roussillon)

    Informations forums :
    Inscription : Juillet 2006
    Messages : 95
    Points : 66
    Points
    66
    Par défaut
    Je donne l'exemple de la table la plus simple qui a cette erreur.

    Pour info, j'ai d'autres lots ssis pour lesquels j'ai atteind la limite de taille possible d'un lot ssis (près de 40 tables sources parfois, sans compter les transformations au passage) qui ont aussi cette erreur là, mais qui serait bien plus long à décrire.

    Les petits ssis comme les gros sont tous nécessaires à mon traitement et planifiés dans un ordre précis

  4. #4
    Rédacteur

    Avatar de SQLpro
    Homme Profil pro
    Expert bases de données / SQL / MS SQL Server / Postgresql
    Inscrit en
    Mai 2002
    Messages
    21 772
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Var (Provence Alpes Côte d'Azur)

    Informations professionnelles :
    Activité : Expert bases de données / SQL / MS SQL Server / Postgresql
    Secteur : Conseil

    Informations forums :
    Inscription : Mai 2002
    Messages : 21 772
    Points : 52 737
    Points
    52 737
    Billets dans le blog
    5
    Par défaut
    Avez vous forcé les identity ?

    A +
    Frédéric Brouard - SQLpro - ARCHITECTE DE DONNÉES - expert SGBDR et langage SQL
    Le site sur les SGBD relationnels et le langage SQL: http://sqlpro.developpez.com/
    Blog SQL, SQL Server, SGBDR : http://blog.developpez.com/sqlpro
    Expert Microsoft SQL Server - M.V.P. (Most valuable Professional) MS Corp.
    Entreprise SQL SPOT : modélisation, conseils, audit, optimisation, formation...
    * * * * * Expertise SQL Server : http://mssqlserver.fr/ * * * * *

  5. #5
    Membre du Club
    Profil pro
    Inscrit en
    Juillet 2006
    Messages
    95
    Détails du profil
    Informations personnelles :
    Localisation : France, Gard (Languedoc Roussillon)

    Informations forums :
    Inscription : Juillet 2006
    Messages : 95
    Points : 66
    Points
    66
    Par défaut
    Merci pour votre aide.

    Si vous voulez dire par "forcer les identités" de faire un "SET IDENTITY_INSERT ...ON" avant mon transfert de données, la réponse est non car le champ compteur est demandé par les développeurs et je ne sais pas, dans la requête initiale, avoir une valeur incrémentée par le select a chque occurrence trouvée.

    Je veux bien essayer si vous connaissez une possibilité de select (je testerai qu'elle soit reconnue par mon driver odbc "i series / as 400").

    Pour faire celà, je peux aussi faire un script qui augmente de +1 le contenu d'une variable avant insertion mais j'ai peur que ce soit long (du moins, sur mes tables où il y a 3 millions d'occurrences).
    Qu'en pensez vous ?

  6. #6
    Rédacteur

    Avatar de SQLpro
    Homme Profil pro
    Expert bases de données / SQL / MS SQL Server / Postgresql
    Inscrit en
    Mai 2002
    Messages
    21 772
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Var (Provence Alpes Côte d'Azur)

    Informations professionnelles :
    Activité : Expert bases de données / SQL / MS SQL Server / Postgresql
    Secteur : Conseil

    Informations forums :
    Inscription : Mai 2002
    Messages : 21 772
    Points : 52 737
    Points
    52 737
    Billets dans le blog
    5
    Par défaut
    Non, je me demandais si vous n'aviez pas activé dans SSIS une option qui dit qu'il forcera les IDENTITY, mais comme il ne les trouve pas... il attend.

    Mettez en place une trace du profileur avec filtre sur cette connexion pour voir les requêtes passer.

    A +
    Frédéric Brouard - SQLpro - ARCHITECTE DE DONNÉES - expert SGBDR et langage SQL
    Le site sur les SGBD relationnels et le langage SQL: http://sqlpro.developpez.com/
    Blog SQL, SQL Server, SGBDR : http://blog.developpez.com/sqlpro
    Expert Microsoft SQL Server - M.V.P. (Most valuable Professional) MS Corp.
    Entreprise SQL SPOT : modélisation, conseils, audit, optimisation, formation...
    * * * * * Expertise SQL Server : http://mssqlserver.fr/ * * * * *

  7. #7
    Membre du Club
    Profil pro
    Inscrit en
    Juillet 2006
    Messages
    95
    Détails du profil
    Informations personnelles :
    Localisation : France, Gard (Languedoc Roussillon)

    Informations forums :
    Inscription : Juillet 2006
    Messages : 95
    Points : 66
    Points
    66
    Par défaut
    J'ai trouvé
    J'ai graté autour de votre idée des "identity" et me suis rendu compte que sur mes connexions de destination, la case "table lock" était cochée par défaut.

    Or, mes lots sont définis avec des alimentation parallèles (source as400 différentes, donc requêtes différentes, mais destination identique sur sql serveur)
    Ce paramètre "table lock" générait des dead lock à partir du moment ou ma table disposait d'index.

    Savez vous à quoi je m'expose en enlevant ces dead lock, sachant que les données ne sont pas accessibles par les utilisateurs (serveur indisponible) pendant la synchronisation des données ?

    En tous les cas, merci pour votre aide

  8. #8
    Rédacteur

    Avatar de SQLpro
    Homme Profil pro
    Expert bases de données / SQL / MS SQL Server / Postgresql
    Inscrit en
    Mai 2002
    Messages
    21 772
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Var (Provence Alpes Côte d'Azur)

    Informations professionnelles :
    Activité : Expert bases de données / SQL / MS SQL Server / Postgresql
    Secteur : Conseil

    Informations forums :
    Inscription : Mai 2002
    Messages : 21 772
    Points : 52 737
    Points
    52 737
    Billets dans le blog
    5
    Par défaut
    Killer un process en deadlock revient à un ROLLBACK.

    A +
    Frédéric Brouard - SQLpro - ARCHITECTE DE DONNÉES - expert SGBDR et langage SQL
    Le site sur les SGBD relationnels et le langage SQL: http://sqlpro.developpez.com/
    Blog SQL, SQL Server, SGBDR : http://blog.developpez.com/sqlpro
    Expert Microsoft SQL Server - M.V.P. (Most valuable Professional) MS Corp.
    Entreprise SQL SPOT : modélisation, conseils, audit, optimisation, formation...
    * * * * * Expertise SQL Server : http://mssqlserver.fr/ * * * * *

+ Répondre à la discussion
Cette discussion est résolue.

Discussions similaires

  1. Sql Server 2005, SSIS
    Par hel22 dans le forum MS SQL Server
    Réponses: 5
    Dernier message: 14/11/2012, 23h30
  2. [SQL SERVER 2005]SSIS : sqldumper_errorlog.log
    Par Negaton dans le forum Développement
    Réponses: 8
    Dernier message: 19/07/2010, 17h08
  3. [SQL SERVER 2005 - SSIS] - Execute SQL Task
    Par sandF dans le forum MS SQL Server
    Réponses: 0
    Dernier message: 28/01/2008, 15h02
  4. Réponses: 6
    Dernier message: 28/03/2007, 09h02
  5. [SQL Server 2005] Tables système et indexes
    Par Tips dans le forum MS SQL Server
    Réponses: 2
    Dernier message: 04/04/2006, 09h01

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo