Répartition des traitements sur différentes machines selon la charge

Bonjour à tous,

Je fais un programme Java qui exécute des traitements en parallèle. A chaque fois que le programme est sollicité, il lance un nouveau thread qui fait le traitement.
J'aimerais ques les threads soient lancés sur différentes machines selon la charge. C'est à dire : le premier thread sur la machine 1, le deuxième sur la machine 2, le troisieme sur la machine 1 (qui a fini le premier), le quatrieme sur la machine 3 (car les machines 1 & 2 sont occupées), le cinquième sur la machine 1 (parce que des trois machines c'est elle qui consomme le moins de ressources).

Alors déjà, je ne sais pas quel terme utiliser ? Load balancing ou clustering ?
Ensuite, question : faut-il que je gère cela au niveau applicatif (dans le code de mon programme) ou bien il y a des solutions matérielles existantes ?

Merci de m'avoir lu.

Si vous pouviez m'éclairer un peu, cela ne serait pas de refus. Notamment les mots clés à taper dans Google relatifs à ce que je veux faire.

C'est de la répartition de charge, ou load balancing.
Quel est ton besoin précis ?
Ton budget ?
Envisages-tu d'investir dans du matériel (genre un Alteon) pour la répartition de charge ?

Il est tout à fait possible de gérer la répartition au niveau de ton application, il "suffit" de poser les bases :
1. comment calculer un indice de charge d'une machine en combinant différentes info : charge CPU, RAM utilisée, nombre de connexions réseau, utilisation des disques durs.... à toi de créer une formule "magique"
2. il faut un "point d'entrée" à ton application, capable de communiquer avec toutes les machines disponibles et de choisir la machine en fonction de l'indice calculé en 1.
3. vas-tu gérer les ajouts dynamiques de machines ? Les suppressions de machines ?
4...

En bref, il te faut une liste claire et précise de tes besoins et de ce que ton appli doit faire.

Merci pour ta réponse.

Mon besoin est le suivant :
- Programme Java
- Ajouter et supprimer des machines dynamiquement (sans changer le code)
- Budget : pour l'instant j'en suis à étudier les solutions.

Citation:

---

1. comment calculer un indice de charge d'une machine en combinant différentes info : charge CPU, RAM utilisée, nombre de connexions réseau, utilisation des disques durs.... à toi de créer une formule "magique"
2. il faut un "point d'entrée" à ton application, capable de communiquer avec toutes les machines disponibles et de choisir la machine en fonction de l'indice calculé en 1.

---

Niveau applicatif, en Java, je crois qu'il est assez difficile d'analyser la consommation ressource de la machine.
En fait, je croyais qu'il existait des solutions qui permettent de s'affranchir de tout cela.
Cela ne me dérange pas de le faire mais je sais qu'il ne sert à rien de réinventer la roue.

Citation:

---

Envoyé par tiboudchou

Niveau applicatif, en Java, je crois qu'il est assez difficile d'analyser la consommation ressource de la machine.

---

Tout dépend du type de traitement à effectuer. Est-ce un usage intensif des disques durs ? De la RAM ? Du processeur ? Autre ?
C'est à toi de connaitre les indicateurs à ressortir. Selon le traitement, est-il possible de savoir approximativement ou il en est ? Ainsi, une machine pourrait répondre qu'elle travaille depuis X minutes et qu'elle a effectuée Y % du traitement.
Ensuite, l'info temps réel n'est peut-être pas pertinente dans ton cas. Il est possible de classer les machines en fonction de leur temps de traitement passé et du nombre de traitements parallèles qu'elles ont fait.

Comme tu le vois, il y a des millions de possibilité, entièrement dépendantes de ta problématique propre.