Discussion :

[jlm22]

Bonjour,

Je fait un programme de copie de base Oracle, j'execute le programme tout les soir grâce à une tâche planifier.

Problème : les copies sont très longue et les tables très grosses.

J'aimerais savoir s'il y a une méthode plus optimisé que celle que j'ai :

En gros je crée une connection sur les 2 bases, (pour l'instant c'est dans une base access que j'envoie mes données c'est pour les test)

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
 
Dim LDaOracle As OleDbDataAdapter
        Dim LDtOracle As New DataTable
        Dim LDrOracle As DataRow
        Dim cmd, cmd2 As New OleDb.OleDbCommand
        P_cnOracle = New OleDbConnection("Provider=MSDAORA.0; Data Source=Base1;User Id=****;Password=*****;")
        P_cnAccess.ConnectionString = "Provider=Microsoft.Jet.OLEDB.4.0;Data Source= C:\mabase2.mdb;"
        P_cnAccess.Open()
        If P_cnOracle.State = ConnectionState.Broken Then P_cnOracle.Close()
        If P_cnOracle.State = ConnectionState.Closed Then
            Try
                P_cnOracle.Open()
            Catch
                MsgBox("Impossible de se connecter à la base : Base1", vbAbort, "ERREUR")
            End Try
        End If
        cmd.Connection() = P_cnAccess
        LDaOracle = New OleDbDataAdapter("SELECT * FROM tablebase1", P_cnOracle)
        LDaOracle.Fill(LDtOracle)
 
        If LDtOracle.Rows.Count > 0 Then
            For Each LDrOracle In LDtOracle.Rows
 
                cmd.CommandText = "INSERT INTO TableBase2Access (colonne1, colonne2, colenne3, colonne4,colonne5, colonne6, colonne7, colenne8, colonne9, colonne10, colonne11, colonne12, colonne13, colonne14, colenne15) VALUES " & _
                                   "('" & LDrOracle("colonne1").ToString & "'" & _
                                   ", '" & LDrOracle("colonne2").ToString & "'" & _
                                  ", '" & LDrOracle("colonne3").ToString & "'" & _
                                   ", '" & LDrOracle("colonne4").ToString & "'" & _
                                    ", '" & LDrOracle("colonne5").ToString & "'" & _
                                    ", '" & LDrOracle("colonne6").ToString & "'" & _
                                    ", '" & LDrOracle("colonne7").ToString & "'" & _
                                   ", '" & LDrOracle("colonne8").ToString & "'" & _
                                    ", '" & LDrOracle("colonne9").ToString & "'" & _
                                    ", '" & LDrOracle("colonne10").ToString & "'" & _
                                    ", '" & LDrOracle("colonne11").ToString & "'" & _
                                    ", '" & LDrOracle("colonne12").ToString & "'" & _
                                    ", '" & LDrOracle("colonne13").ToString & "'" & _
                                    ", '" & LDrOracle("colonne14").ToString & "'" & _
                                    ", '" & LDrOracle("colonne15").ToString & "')"
                cmd.ExecuteNonQuery()
            Next
        End If
    End Sub

Imaginez ce code pour 50 tables de ma base 1, c'est un peu lourd (un peu )
Peut être y'a t-il mieux à faire ?

En faite j'ai ma première base qui est purger tout les 2 mois pour que les requêtes soit plus rapide pour les utilisateurs, et pour avoir un historique il faut avoir une base qui est une fourchette de donnée d'environ 3 ans, il faut donc que tout les jours j'envoie les données d'une base vers l'autre ( c'est envoie doit être planifier vers 00h)

Merci d'avance

[orafrance]

T'as regardé du coté de streams ? Cela permettrait de faire de la réplication différentielle parce que là le souci c'est que tu réinjectes toutes les lignes tous les soirs au lieu de ne faire que ce qui a changé

[jlm22]

Salut,

Justement je pensait à une sauvegarde incrémentale mais je n'est aucune idée du moyen pour réaliser ça, en plus ça prendrait beaucoup moins de temps que de supprimer et de tout remettre.

[orafrance]

La sauvegarde incrémentale ne t'aidera pas puisque lorsque tu purgeras les lignes, elles ne seront plus dans ta sauvegarde

Non, faut faire de la réplication logique... après ça peut aussi passer par une colonne identifiant la dernière réplication faite et une autre permettant de connaitre l'action à mener.
Quand tu mets à jour une ligne, tu stockes la date à laquelle c'est fait ou un identifiant de situation et tu écris UPDATE dans la colonne action. Lors de la réplication tu fais un truc du genre :
- UPDATE [ligne locale] WHERE action_distante = 'UPDATE' AND id_replication > (SELECT max (id_replication) FROM table_log) PK_locale = PK_distance AND data = data distante
- INSERT into locale SELECT * FROM distante where action_distante = 'INSERT' AND id_replication > (SELECT max (id_replication) FROM table_log)
- DELETE FROM locale WHERE PK_locale NOT IN (SELECT PK_distante FROM distante)
- INSERT INTO table_log SELECT MAX(id_replication) + 1, sysdate, 'OK' FROM table_log

Désolé, c'est pas forcément clair mais j'espère que tu saisiras le principe

[jlm22]

En faite tu crée une table qui regroupe l'historique des actions sur toutes les tables de la base ? (enfin je crois)

sinon j'ai regarder Oracle streams mais sa me parait compliquer a mettre en place à mon niveau ^^ Je n'ai pas d'archivelog sur ma base source sa pose problème pour stream ?

[orafrance]

En faite tu crée une table qui regroupe l'historique des actions sur toutes les tables de la base ? (enfin je crois)

Non, cette info sera dans chaque table à répliquer, je crée juste une table pour savoir quand les données ont été modifiées. Lors de la 1er répli, tu crées une ligne avec une séquence et la date. Cette séquence sera stockée sur chaque ligne traitée de chacune de tes tables, comme ça le coup d'après, tu ne prends en compte que les lignes modifiées (numéro de séquence nul ou inférieur à celui en cours).