IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

MATLAB Discussion :

[Parallel Computing Toolbox] contrôler le nombre de jobs simultanés


Sujet :

MATLAB

  1. #1
    Membre éprouvé
    Avatar de ol9245
    Homme Profil pro
    Chercheur
    Inscrit en
    Avril 2007
    Messages
    985
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 62
    Localisation : France, Hérault (Languedoc Roussillon)

    Informations professionnelles :
    Activité : Chercheur

    Informations forums :
    Inscription : Avril 2007
    Messages : 985
    Points : 1 158
    Points
    1 158
    Billets dans le blog
    1
    Par défaut [Parallel Computing Toolbox] contrôler le nombre de jobs simultanés
    Bonjour,

    je commence à peine à réussir à me servir de la parralel toolbox. A vrai dire, je n'ai pas trop le temps de me plonger dans la doc tout de suite. Je cherche donc des trucs simples et qui marchent.

    J'ai découvert un truc qui me va bien : c'est l'instruction batch. Il n'y a rien à installer, rien à déclarer : on fait j=batch('mon_script') et le script est lancé dans un worker séparé. C'est peinard.

    J'ai découpé le travail en 17 paquets et j'ai lancé les 17 batch d'un coup. Matlab est supposé se débrouiller pour gérer une file d'attente et faire vrombir les ventilos du PC.

    Le seul souci, c'est qu'il ne lance que 4 jobs. Les autre jobs son en statut 'queued'. Comment lui expliquer qu'il faut en lancer 8 d'un coup (J'ai un Core i7).

    Pour info voilà le script qui lance les 17 jobs :
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    blocksize=10 ;
    k=100 ;
    first=1:k:1700 ;
    last=first+k-1 ;
    nj = numel(first) ;
    JOBS=cell(nj,1) ;
     
    for n=1:nj
        JOBS{n} = batch('multiplicity_kamech3', 0, {first(n), last(n), blocksize}) ;
    end
    "La vraie grandeur se mesure par la liberté que vous donnez aux autres, et non par votre capacité à les contraindre de faire ce que vous voulez." Larry Wall, concepteur de Perl.

  2. #2
    Rédacteur/Modérateur

    Avatar de Jerome Briot
    Homme Profil pro
    Freelance mécatronique - Conseil, conception et formation
    Inscrit en
    Novembre 2006
    Messages
    20 302
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Haute Garonne (Midi Pyrénées)

    Informations professionnelles :
    Activité : Freelance mécatronique - Conseil, conception et formation

    Informations forums :
    Inscription : Novembre 2006
    Messages : 20 302
    Points : 53 166
    Points
    53 166
    Par défaut
    As-tu une limitation à 4 "workers" avec MATLABPOOL quelque part dans ton code ?

    As-tu essayé quelque chose comme ceci ?

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    JOBS{n} = batch('multiplicity_kamech3', 0, {first(n), last(n), blocksize}, 'matlabpool', 8) ;
    Ingénieur indépendant en mécatronique - Conseil, conception et formation
    • Conception mécanique (Autodesk Fusion 360)
    • Impression 3D (Ultimaker)
    • Développement informatique (Python, MATLAB, C)
    • Programmation de microcontrôleur (Microchip PIC, ESP32, Raspberry Pi, Arduino…)

    « J'étais le meilleur ami que le vieux Jim avait au monde. Il fallait choisir. J'ai réfléchi un moment, puis je me suis dit : "Tant pis ! J'irai en enfer" » (Saint Huck)

  3. #3
    Membre éprouvé
    Avatar de ol9245
    Homme Profil pro
    Chercheur
    Inscrit en
    Avril 2007
    Messages
    985
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 62
    Localisation : France, Hérault (Languedoc Roussillon)

    Informations professionnelles :
    Activité : Chercheur

    Informations forums :
    Inscription : Avril 2007
    Messages : 985
    Points : 1 158
    Points
    1 158
    Billets dans le blog
    1
    Par défaut
    Salut DUT,

    Bonne pioche !
    mais c'est pas suffisant et la compréhension du message d'erreur me demanderait du temps que je n'ai pas aujourd'hui

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    9
    ??? Error using ==> batch at 172
    You requested a minimum of 8 workers, but the scheduler's
    ClusterSize property is currently set to allow a maximum of 4
    workers.  To run a parallel job on more workers than
    this,increase the ClusterSize property setting in the 'local'
    configuration using the Configurations Manager  The default
    value for ClusterSize with a local scheduler is the number of
    cores on the local machine.
    
    "La vraie grandeur se mesure par la liberté que vous donnez aux autres, et non par votre capacité à les contraindre de faire ce que vous voulez." Larry Wall, concepteur de Perl.

  4. #4
    Membre éprouvé
    Avatar de ol9245
    Homme Profil pro
    Chercheur
    Inscrit en
    Avril 2007
    Messages
    985
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 62
    Localisation : France, Hérault (Languedoc Roussillon)

    Informations professionnelles :
    Activité : Chercheur

    Informations forums :
    Inscription : Avril 2007
    Messages : 985
    Points : 1 158
    Points
    1 158
    Billets dans le blog
    1
    Par défaut
    J'ai trouvé.
    Voilà la procédure :

    menu Parallel / Manage Configuration ...
    dans la boite qui s'ouvre :
    clic droit sur local -> duplicate
    apparait une nouvelle configuration : local.copy1.
    la sélectionner (cliquer sur le bouton)
    clic droit / properties ...
    dans la boite qui s'ouvre : changer le nom. par exemple local.W8
    onglet Scheduler :
    case Number of workers available (ClusterSize) mettre 8
    en option : (c'est toujours bon se savoir où chercher les fichiers)
    folder blabla (DataLocation) mettre /home/my_user_name/matlab.tmp (le répertoire doit exister)
    cliquer sur OK -> ferme la boite, revient à la boite parent.
    cliquer sur le bouton start validation.
    si tous les test passent au vert, c'est gagné.

    Puis il faut dans le code matlab spécifier qu'on veut utiliser cette configuration là. par exemple pour mon code :
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    for n=1:nj
        JOBS{n} = batch('multiplicity_kamech3', 0, {first(n), last(n), blocksize}, 'Configuration', 'local.W8') ;
    end
    "La vraie grandeur se mesure par la liberté que vous donnez aux autres, et non par votre capacité à les contraindre de faire ce que vous voulez." Larry Wall, concepteur de Perl.

+ Répondre à la discussion
Cette discussion est résolue.

Discussions similaires

  1. Réponses: 5
    Dernier message: 29/12/2011, 21h08
  2. [Débutant] [Parallel Computing Toolbox] Problème de calcul parallèle
    Par pingouin84k dans le forum MATLAB
    Réponses: 3
    Dernier message: 31/08/2011, 22h05
  3. Réponses: 0
    Dernier message: 20/12/2010, 11h57
  4. Réponses: 5
    Dernier message: 05/02/2010, 12h27
  5. Réponses: 4
    Dernier message: 26/10/2009, 21h43

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo