Passer au contenu principal
Cette fonctionnalité nécessite un plan Pro ou Enterprise.
Cette page décrit les automatisations dans W&B. Créez une automatisation pour déclencher des étapes de flux de travail, comme des tests et des déploiements automatisés de modèles, en fonction d’un événement dans W&B. Par exemple, une automatisation peut notifier un canal Slack lorsqu’une nouvelle version est créée, déclencher un webhook de test automatisé lorsque l’alias production est ajouté à un artifact, ou démarrer un job de validation uniquement lorsque la loss d’un run reste dans des limites acceptables.
Vous cherchez des tutoriels complémentaires sur les automatisations ?

​
Événements d’automatisation

Les automatisations peuvent être déclenchées par des événements liés à des runs ou à des artifacts dans une collection, un projet ou un registre. Une automatisation peut être lancée :
  • Lorsqu’une métrique de run atteint un seuil absolu ou relatif défini. Par exemple, lorsqu’un loss de run est inférieur à 0.01 ou lorsqu’une accuracy de run s’améliore de 5 %.
  • Lorsque le z-score (score standard) d’un run s’écarte de la moyenne d’un certain montant. Un z-score de 0 indique que le résultat correspond à la moyenne. Un z-score de +2 signifie que le résultat est supérieur de deux écarts types à la moyenne, et un z-score de -2 signifie que le résultat est inférieur de deux écarts types à la moyenne.
  • Lorsqu’un événement se produit dans un projet ou un registre. Par exemple, lorsqu’une nouvelle version d’un artifact de modèle est créée ou lorsque l’alias production est ajouté à un artifact de modèle.
Pour plus de détails, voir Automation events and scopes.

​
Actions d’automatisation

Lorsqu’un événement déclenche une automatisation, celle-ci peut exécuter l’une des actions suivantes :

​
Notification Slack

Envoyez un message sur un canal Slack avec des détails sur l’événement qui a déclenché l’action. Le message résume l’événement et inclut un lien pour afficher plus de détails dans W&B.

​
Webhook

Appelez l’URL d’un webhook avec une charge utile JSON contenant des informations sur l’événement déclencheur. Cela permet une intégration avec des systèmes externes comme des pipelines CI/CD, des services de déploiement de modèles ou des flux de travail personnalisés. Le corps de la requête webhook peut contenir n’importe quelle charge utile sérialisable en JSON. Pour en savoir plus sur l’implémentation, voir :

​
Fonctionnement des automatisations

Pour créer une automatisation, vous devez :
  1. Si nécessaire, configurez des secrets pour les chaînes sensibles dont l’automatisation a besoin, comme des jetons d’accès, des mots de passe ou des détails de configuration sensibles. Les secrets sont définis dans Team Settings. Ils sont le plus souvent utilisés dans les automatisations webhook pour transmettre en toute sécurité des identifiants ou des jetons au service externe du webhook, sans les exposer en clair ni les coder en dur dans la charge utile du webhook.
  2. Configurez des intégrations webhook ou Slack au niveau de l’équipe afin d’autoriser W&B à publier dans Slack ou à exécuter le webhook en votre nom. Une même action d’automatisation (webhook ou notification Slack) peut être utilisée par plusieurs automatisations. Ces actions sont définies dans Team Settings.
  3. Dans le projet ou le registre, créez l’automatisation :
    1. Définissez l’événement à surveiller, par exemple l’ajout d’une nouvelle version d’artifact.
    2. Définissez l’action à effectuer lorsque l’événement se produit (publier dans un canal Slack ou exécuter un webhook). Pour un webhook, indiquez un secret à utiliser pour le jeton d’accès et/ou un secret à envoyer avec la charge utile, si nécessaire.

​
Limites

Les automatisations des métriques de run et les automatisations de changement du z-score des métriques de run sont actuellement prises en charge uniquement dans W&B Multi-tenant Cloud.

​
Étapes suivantes