이 기능은 Pro 또는 Enterprise 요금제에서만 사용할 수 있습니다.
production 별칭이 추가될 때 자동 테스트용 webhook을 트리거하거나, run의 loss가 허용 가능한 범위에 있을 때에만 검증 작업을 시작하도록 설정할 수 있습니다.
자동화 이벤트
- run 메트릭이 정의된 절대 또는 상대 임계값을 만족할 때. 예를 들어, run의
loss가 0.01보다 작을 때 또는 run의accuracy가 5% 향상되었을 때 트리거합니다. - run의 z-점수(표준 점수)가 평균에서 지정된 값만큼 벗어날 때. z-점수가 0이면 결과가 평균과 일치함을 나타냅니다. z-점수가 +2이면 결과가 평균보다 표준편차의 2배만큼 높음을 의미하고, z-점수가 -2이면 결과가 평균보다 표준편차의 2배만큼 낮음을 의미합니다.
- 프로젝트 또는 레지스트리에서 이벤트가 발생할 때. 예를 들어, 모델 아티팩트의 새 버전이 생성되었을 때 또는
production별칭이 모델 아티팩트에 추가되었을 때 트리거합니다.
자동화 작업
Slack 알림
Webhook
자동화 동작 방식
- 필요한 경우, 자동화에서 사용하는 액세스 토큰, 비밀번호, 민감한 설정 정보 등 민감한 문자열을 위해 secrets를 설정합니다. 시크릿은 Team Settings에서 정의합니다. 시크릿은 주로 웹훅 자동화에서 사용되며, 자격 증명이나 토큰을 일반 텍스트로 노출하거나 웹훅 페이로드에 하드코딩하지 않고 외부 웹훅 서비스로 안전하게 전달하는 데 사용됩니다.
- 팀 수준의 webhook 또는 Slack 인테그레이션을 설정하여 W&B가 Slack에 메시지를 보내거나 사용자를 대신해 webhook을 실행할 수 있도록 권한을 부여합니다. 단일 자동화 작업(웹훅 또는 Slack 알림)은 여러 자동화에서 재사용할 수 있습니다. 이러한 작업은 Team Settings에서 정의합니다.
- 프로젝트 또는 레지스트리에서 자동화를 생성합니다:
- 새 아티팩트 버전이 추가될 때와 같이 감시할 event를 정의합니다.
- 이벤트가 발생했을 때 수행할 동작(Slack 채널에 게시하거나 webhook을 실행하는 작업)을 정의합니다. webhook의 경우, 필요한 경우 액세스 토큰에 사용할 시크릿과 페이로드와 함께 전송할 시크릿을 지정합니다.
제한 사항
다음 단계
- 자동화 생성하기.
- Automation 이벤트와 범위에 대해 알아보기.
- 시크릿 생성하기.