Discussion :

[MatthieuFourcade]

Bonjour a tous.

J'ai une table de 2 millions de lignes et je fais une requete du Type:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
Select Distinct * 
FROM Table 
WHERE MATCH(Titre) AGAINST("ingenieur informaticien" IN BOOLEAN MODE) >= 2

---> 0.0007 s // 160000 resultats --> PAS DE PROBLEME

Le probleme apparait quand je veux trier ces donnes par groupe

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
Select Titre, COUNT(Titre) 
FROM (....) 
GROUP BY Titre..

---> ~4s // 6500 resultats.

Ca ne parait pas enorme mais si plusieurs requete en meme temps il y a "un crash"

Erreur : Incorrect key file for table '/tmp/#sql_1495_9.MYI'; try to repair it

Je voulais savoir s'il existe un moyen d'ameliorer les perf. autrement qu'en faisant une requete plus restrictive...

Merci bcp

A+

[mrcmrc]

Tu as mis quoi comme index sur ta table ?

[MatthieuFourcade]

J ai mis un index sur les Titre. Le probleme c'est qu'il y en a 600 000 differents....

[CinePhil]

Tu peux aussi faire ceci :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
SELECT Titre, COUNT(*) AS Nombre
FROM laTable
WHERE Titre LIKE '%ingenieur informaticien%'
GROUP BY Titre
HAVING COUNT(*) > 1

Mais avec le LIKE l'index sur Titre ne sera probablement pas utilisé donc par sûr que ce soit plus performant.

Et n'ayant jamais utilisé MATCH, je ne sais pas si tu peux faire ceci :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
SELECT Titre, COUNT(*) AS Nombre
FROM laTable
WHERE MATCH(Titre) AGAINST("ingenieur informaticien" IN BOOLEAN MODE) > 1
GROUP BY Titre
HAVING COUNT(*) > 1

Cependant, ton message d'erreur concerne le fichier d'index de la table qu'il faut réparer. Je ne pense pas que ça ait de rapport avec la performance de la requête.

Au passage, appleler une table `table` est une mauvaise idée car c'est un mot réservé du langage SQL.

SELECT * n'est pas top non plus, surtout si au final tu ne veux que les titres.

Quant au DISTINCT, il ne me semble pas utile non plus.

[MatthieuFourcade]

Merci bcp.

C'est une affaire de "tolerance". C'est vrai que j'ai envie d'eviter les doublons (d'ou le DISCTINCT *) mais en terme de perf ca plombe la requete et au final l'enlever n'enleve rien en pertinance...

Je vais faire comme ca.