Skip to main content
Un appel wandb.init() lent ou des métriques qui mettent du temps à être téléversées s’expliquent généralement par la latence réseau, des charges utiles de médias volumineuses, une fréquence de journalisation élevée ou un démarrage lent du processus du service W&B.

Lenteur de wandb.init()

wandb.init() contacte l’API W&B pour créer le run et vérifier les identifiants d’authentification. Si l’appel reste bloqué plus de quelques secondes :
  • Vérifier la connectivité : exécutez curl -I https://api.wandb.ai pour vous assurer que votre machine peut joindre l’API W&B. Les règles de pare-feu ou les configurations de proxy sur les clusters en sont souvent la cause.
  • Augmenter le délai d’expiration de l’initialisation : si la connexion est instable, laissez plus de temps à wandb.init() avant qu’il n’abandonne :
  • Utiliser le mode hors ligne pendant les tests : si vous n’avez pas besoin de la synchronisation en temps réel pendant vos itérations, travaillez hors ligne et synchronisez plus tard. Remplacez [TIMESTAMP] et [ID] par l’horodatage et l’ID de votre run :

Téléversement lent des métriques pendant l’entraînement

Weights & Biases téléverse les métriques de manière asynchrone dans des threads en arrière-plan afin de ne pas bloquer votre boucle d’entraînement. Les téléversements peuvent prendre du retard dans les cas suivants :
  • Vous journalisez trop fréquemment : appeler wandb.log() à chaque step sur un GPU rapide peut générer plus de données que les threads en arrière-plan ne peuvent en téléverser. Journalisez plutôt tous les N steps :
  • Vous journalisez des médias volumineux à chaque step : les objets wandb.Image, wandb.Table et wandb.Video sont nettement plus volumineux que les métriques scalaires. Journalisez les médias enrichis à chaque époque ou tous les N steps plutôt qu’à chaque step.
  • Limites de débit : si vous obtenez l’erreur 429 Rate limit exceeded, consultez Comment puis-je corriger les erreurs de limite de débit dépassée ?.

La finalisation du run est lente

Une fois que votre script a appelé wandb.finish() (ou s’est terminé), Weights & Biases vide la mémoire tampon et envoie toutes les données restantes. Cette opération peut prendre du temps si un volume important de données s’est accumulé pendant l’entraînement. Conservez une fréquence de journalisation raisonnable tout au long de l’entraînement plutôt que de tout envoyer par lots à la fin.

Diagnostiquer à l’aide des journaux de débogage

Activez la journalisation de débogage pour identifier les étapes qui prennent le plus de temps :
Des informations détaillées sur les durées d’exécution sont alors écrites dans wandb/debug.log et wandb/debug-internal.log. Pour plus d’informations, voir Limites et performances d’Experiments et Comment puis-je résoudre les problèmes de réseau ?.
Runs Experiments Connectivité
Last modified on September 30, 2026