Discussion :

[lmplmp]

Bonjour à tous,


Je suis amené dans le cadre de mon travail à traiter de gros fichiers (notamment Excel) et mon PC a du mal lorsqu'on dépasse un certain volume ou lorsque les tableaux sont accompagnés de beaucoup de fonctions.

J'hésite du coup à acheter un SSD externe afin de pouvoir travailler sans plantage sur mes fichiers.

Est-ce que c'est une solution appropriée ?


Merci pour vos lumières

[JML19]

Bonjour

Cela dépend surtout du PC que tu utilises.

[lmplmp]

Bonjour,

J'utilise un HP Pavilion 8G de RAM, 4 Intel Core i5-6300HQ 2.30GHz. Windows 10, 64bits.

[JML19]

Dans ce cas il vaudrait mieux mettre le SSD dans le PC.

[sevyc64]

Changer le disque ne t’apportera pas grand chose, normalement, au niveau traitement. Le traitement ça se fait en mémoire et par le processeur. Le disque ne fait que du stockage.
Si ton traitement plante, sauf à avoir un disque défectueux, ce n'est sans doute pas à cause de lui. Changer le disque te permettra, tout au plus de charger plus vite ton ficher.

De manière générale, passer au SSD pour le système accélèrera de manière générale la machine. Passer au SSD pour les données n'a de réel impact que sur des données fortement sollicitées et souvent.
De plus, en SSD externe, tu vas être limité par le bus. Prendre du SSD sur USB2 a peu d’intérêt, l'USB2 est trop lent pour voir une réelle différence. Il faudrait donc viser ou l'USB3 ou le e-sata

[lmplmp]

Je suppose donc que le PC doit être adapté dans ses caractéristiques propres initiale.

Auriez-vous un conseil (ou même un nom de PC) à me donner là dessus ?

[sevyc64]

Ben concernant le PC, tu as déjà une machine de guerre.

Si le problème ne se pose qu'avec ce fichier là, il faudrait peut-être voir à pouvoir optimiser les traitements.

Si tu as un problème de lenteur plus général, il faut peut-être voir au niveau des processus qui tournent, voir s'il n'y a pas des virus ou malware, voir s'il n'y pas des processus souvent inutile chargé en mémoire comme les utilitaires de la carte mère, des logiciels type media center, ou autres utilitaires soit-disant optimiser, etc ....

[lmplmp]

J'ai déjà viré les programme de HP qui en effet ne servent pas à grand chose...
Mais ça ne change pas grand chose. Il n'y a donc aucune solution ?

Ce n'est pas un seul fichier qui fait ca mais tous les fichiers Excels lorsqu'ils dépassent une certaine taille (approx 40Mo). D'ailleurs à l'affichage de la mémoire (ctrl-alt-suppr) ca pompe plus de 1G.

[JML19]

Bonjour

Ce ne sont pas les fichiers Excel, mais Excel lui même qui patine un peu dans la choucroute.

[lmplmp]

Bonjour

Ce ne sont pas les fichiers Excel, mais Excel lui même qui patine un peu dans la choucroute.

...merci Microsoft

Hormis SQL pas moyen de remplacer Excel je suppose ?

[JML19]

Cela dépend ce que tu fais avec, mais si tu gères des données Access est plus rapide il me semble.

Autrement si tu fais du calcul Excel est bien seulement en entreprise on ne fait jamais des gros fichiers, il faudrait pouvoir les morceler.

[lmplmp]

Access plante aussi, il faut dire qu'il augmente fortement la taille des fichiers, pour un excel de 200Mo, j'ai un access de 1.2Go...

[JML19]

Access plante aussi, il faut dire qu'il augmente fortement la taille des fichiers, pour un excel de 200Mo, j'ai un access de 1.2Go...

Bonjour

200Mo pour un fichier Excel c'est vraiment très gros.

Tu as beaucoup d'image dans ces fichiers ?

[lmplmp]

Bonjour,
Merci de votre réponse,
Oui c'est (très) volumineux mais il n'y a strictement aucune image, juste des données.

[JML19]

Bonjour,
Merci de votre réponse,
Oui c'est (très) volumineux mais il n'y a strictement aucune image, juste des données.

C'est curieux ! C'est une base de donnée ?

Les calculs Excel ne prennent pas beaucoup de place normalement, c'est le principe beaucoup de calcul pour très peu de donnée.

[lmplmp]

Oui c'est une sorte de BDD (multi-onglets donc multi-tables) sur laquelle je fais des calculs et pas mal de tableaux croisés dynamiques, de statistiques.

J'ai quelques centaines de milliers de lignes pour une dizaine de colonnes.

[JML19]

Oui c'est une sorte de BDD (multi-onglets donc multi-tables) sur laquelle je fais des calculs et pas mal de tableaux croisés dynamiques, de statistiques.

J'ai quelques centaines de milliers de lignes pour une dizaine de colonnes.

Effectivement tu pousses Excel à fond.

Je pense qu'il faudrait un processeur et une mémoire plus rapide pour traiter de telles données.

Le fichier Excel n'est pas un fichier texte il y a des calculs à chaque ouverture.

Exemple :

Si je mets cellule A1+B1 dans C1, lorsque j'ouvre Excel il fera le calcul à l'ouverture A1+B1, même si tu vois le résultat dans C1 avant l'enregistrement.

Si tu pouvais changer la valeur de la cellule A1 sans ouvrir le fichier, le résultat lors de l'ouverture serait bon, il n'y aurait pas l'ancien résultat.

C'est pour cela qu'il faut un ensemble processeur + mémoire RAM très performant.

[djuju]

Bonjour,

Je pense que tu le sais déjà, mais tu abuses des capacité d'Excel. Je suis plutôt d'accord avec les commentaires de JML, c'est pas un SSD qui fera la différence.
Pour s'en convaincre, tu peux essayer avec un disque en RAM qui sera plus rapide que n'importe quel SSD.
Bien sur, changer de format de données, c'est plus facile à dire qu'à faire. Par contre, tu pourrais utiliser Talend pour segmenter tes fichiers, puis les croiser ou simplement pour les présenter de façon efficace.

[sevyc64]

C'est pour cela qu'il faut un ensemble processeur + mémoire RAM très performant.

Le problème est qu'avec un Intel Core i5-6300HQ 2.30GHz, on tape déjà dans le très haut de gamme.
A la limite on pourrait monter en fréquence, passer sur un I7-6700 (ya pas mieux à l'heure actuelle) mais je suis pas certain que, face à la configuration actuelle, le gain soit flagrant.

A la limite, une des solution serait de déplacer l'ouverture et le calcul sur un gros serveur boosté type xeon ou autre

[lmplmp]

Je pensais vaguement au serveur mais ce n'est clairement pas le plus simple...et c'est trop coûteux malheureusement.

Merci beaucoup pour vos réponses.


Quand j'ouvre le gestionnaire des tâches (en instance de plantage), c'est la mémoire et le disque qui sont vers 100%, rarement le Processeur.

Du coup je fais mal le lien entre un processeur plus évolué et le problème. Pourriez-vous m'expliquer en détail ?