Ajouter un job à une file d’attente

Cette page explique comment ajouter des jobs Launch à une file d’attente Launch. Ajouter un job à une file d’attente revient à le soumettre pour qu’il s’exécute sur la ressource cible de cette file. Vous pouvez ainsi planifier des charges de travail ML sur l’environnement de calcul configuré par votre équipe.

Assurez-vous que vous-même ou un membre de votre équipe avez déjà configuré une file d’attente Launch. Pour plus d’informations, voir Configurer Launch.

Ajouter des jobs à votre file d’attente

Ajoutez des jobs à votre file d’attente de manière interactive depuis la W&B App, ou par programmation avec la CLI W&B.

W&B App
CLI W&B

Pour ajouter un job à votre file d’attente de manière interactive avec la W&B App :

Accédez à la page de votre projet W&B.
Cliquez sur Jobs dans la barre latérale du projet. Si cette option n’apparaît pas dans la barre latérale, cliquez sur More () dans la barre latérale, puis sur Jobs.

La barre latérale du projet dans Forge, avec l’icône Jobs mise en évidence et son info-bulle affichée

La page Jobs affiche la liste des jobs Launch W&B créés à partir de runs W&B déjà exécutés.

Sélectionnez le bouton Launch à côté du nom du job. Une fenêtre modale s’affiche.
Dans la liste déroulante Job version, sélectionnez la version du job Launch que vous souhaitez utiliser. Les jobs Launch sont versionnés comme n’importe quel autre artifact W&B. W&B crée une nouvelle version d’un même job Launch si vous modifiez les dépendances logicielles ou le code source utilisés pour l’exécuter.
Dans la section Overrides, fournissez de nouvelles valeurs pour les entrées configurées de votre job Launch. Il s’agit généralement d’une nouvelle commande de point d’entrée, d’arguments ou de valeurs dans le wandb.Run.config de votre nouveau run W&B.

Pour copier-coller des valeurs provenant d’autres runs W&B ayant utilisé votre job Launch, sélectionnez le bouton Paste from…. 7. Dans la liste déroulante Queue, sélectionnez le nom de la file d’attente Launch à laquelle vous souhaitez ajouter votre job Launch. 8. Utilisez la liste déroulante Job Priority pour définir la priorité de votre job Launch. Si la file d’attente Launch ne prend pas en charge la priorisation, W&B définit la priorité sur Medium. 9. Facultatif : ne suivez cette étape que si l’administrateur de votre équipe a créé un modèle de configuration de file d’attente. Dans le champ Queue Configurations, renseignez les options de configuration créées par l’administrateur de votre équipe. Par exemple, l’image suivante montre un administrateur d’équipe qui a configuré des types d’instances AWS utilisables par l’équipe. Dans ce cas, les membres de l’équipe peuvent choisir le type d’instance de calcul ml.m4.xlarge ou ml.p3.xlarge pour entraîner leur modèle.

Sélectionnez le Destination project, dans lequel apparaîtra le run obtenu. Ce projet doit appartenir à la même entity que la file d’attente.
Sélectionnez le bouton Launch now.

Votre job est désormais en file d’attente et s’exécutera sur la ressource cible de celle-ci. Le run obtenu apparaît dans le projet de destination que vous avez sélectionné.

Utilisez la commande wandb launch pour ajouter des jobs à une file d’attente. Par exemple, en reprenant le script du guide Démarrage rapide, créez un fichier JSON contenant les redéfinitions d’hyperparamètres suivantes :

config.json

{
  "overrides": {
      "args": [],
      "run_config": {
          "learning_rate": 0,
          "epochs": 0
      },   
      "entry_point": []
  }
}

W&B Launch utilise les paramètres par défaut si vous ne fournissez pas de fichier de configuration JSON.

Pour redéfinir la configuration de la file d’attente, ou si aucune ressource de configuration n’est définie pour votre file d’attente Launch, spécifiez la clé resource_args dans votre fichier config.json. Par exemple, dans la continuité de l’exemple précédent, votre fichier config.json pourrait ressembler à ceci :

config.json

{
  "overrides": {
      "args": [],
      "run_config": {
          "learning_rate": 0,
          "epochs": 0
      },
      "entry_point": []
  },
  "resource_args": {
        "[RESOURCE-TYPE]" : {
            "[KEY]": "[VALUE]"
        }
  }
}

Remplacez les espaces réservés entre crochets par vos propres valeurs.Indiquez le nom de la file d’attente avec l’option queue (-q), le nom du job avec l’option job (-j) et le chemin du fichier de configuration avec l’option config (-c) :

wandb launch -j [JOB-NAME] -q [QUEUE-NAME] \
-e [ENTITY-NAME] -c path/to/config.json

Si vous travaillez au sein d’une équipe W&B, spécifiez l’option entity (-e) pour indiquer l’entity utilisée par la file d’attente.Une fois la commande exécutée, votre job est ajouté à la file d’attente spécifiée et s’exécute sur la ressource cible de celle-ci.

​Ajouter des jobs à votre file d’attente

Ajouter des jobs à votre file d’attente