Discussion :

[hippie]

Bonjour,

J'aimerais savoir s'il y a une limite dans la taille de la base de données pour faire une classification.
En effet j'essaie actuellement de faire une classification après ACP avec FactoMineR mais quand je la lance, cela ne fonctionne pas (le dendogramme ne sort pas). Pour info, ma base de données contient 52 000 individus pour environ 150 variables. Est-ce pour cela?
J'ai déjà réussi à faire une classification avec une petite base de données.

Merci pour votre aide!

[dev_ggy]

Bonjour,

Quel type d'erreur as tu ? Si tu n'as pas d'erreur, il est possible qu'il mette beaucoup de temps a calculer la matrice des distances. Pour répondre a ta question, je voie pas de contrainte autre que le système t'impose. Si tu dépasse la mémoire vive, il peut travailler sur le swap du disque dure que tu devrais entendre gratter et dans se cas les calcules seront beaucoup plus lent. Tu peux surveiller la mémoire de ton système pour voire si ton système ne sature pas.


Cordialement.

[hippie]

Merci pour votre réponse
J'ai bien une erreur qui s'affiche et qui dit : "longueur de vecteurs négative non permise"... C'est pourquoi je pensais à un problème avec la taille des données, d'autant que cela fonctionne avec une base plus petite. Peut-être y a t-il un nombre d'individus à ne pas dépasser?
Ou alors c'est un autre problème mais je ne vois pas lequel...

[dev_ggy]

Pour le peux d'information que tu donnes, il semble que cela ne vienne pas de la mémoire. Peux tu en dire plus sur le type de classification que tu utilises, le type de données (qualitative et quantitative, résultat de l'ACP ... ), noté l'exacte message d'erreur et toutes informations qui te semble judicieuse.

Bien Cordialement.

[hippie]

J'utilise une classification hiérarchique sur composantes principales (HCPC). J'ai fait mon ACP avec Factominer et Rcommander. Cela a bien fonctionné, mes graphes sont bien sortis (cercle des corrélations et nuage de points des individus) et j'en ai déduis 4 axes.
Ensuite, dans la fenêtre ACP, j'ai cliqué sur "réaliser une classification après l'ACP", une fenêtre "HCPC" s'ouvre et je laisse les paramètres comme tel, c'est à dire "choix du nombre de classes : interactive" et "le nombre optimal de classes est choisi entre : 3 et 10" . Je lance donc la classification mais au lieu de me sortir le dendogramme, il me resort les graphiques de l'ACP (cercle des corrélations et nuage de points) avec le message d'erreur : "ERREUR:
longueur de vecteurs négative non permise" (je n'ai que ça en message d'erreur).
Pour info je n'ai que des valeurs quantitatives.
Désolé si les infos sont un peu confuses mais je suis débutante sur R et pas encore très à l'aise...

[hippie]

A priori cela vient bien de la mémoire du PC. J'ai contacté les développeurs de Factominer et en théorie il n'y a pas de limites pour la classification, mais cela dépend en fait de la capacité du PC utilisé.
J'ai pourtant 8 giga de RAM et cela ne fonctionne pas donc tant pis... Je vais essayer avec un autre package que Factominer pour voir si le problème se pose aussi.