W&B Weave

W&B Weave로 언어 모델 앱을 추적, 테스트, 개선하세요

W&B Weave는 LLM 애플리케이션을 추적, 평가하고 개선할 수 있도록 돕는 관찰 및 평가 플랫폼입니다. Weave를 사용하면 다음을 할 수 있습니다:

• LLM 애플리케이션을 관찰하고 디버깅합니다
• LLM 기반 평가자와 사용자 정의 스코어러를 사용해 애플리케이션 응답을 평가합니다

​

시작하기

다음 문서는 Weave 도구 모음을 사용하는 기본 방법을 안내합니다.

퀵스타트: LLM 입력 및 출력 추적

기본 LLM 호출을 추적하고 W&B 계정에서 데이터를 확인하는 것부터 시작하세요.

애플리케이션 평가 시작하기

Weave scorers를 사용해 평가 파이프라인을 구축하여 애플리케이션 성능을 테스트하고 추적하는 방법을 알아보세요.

RAG 애플리케이션 평가하기

Weave와 LLM judges를 사용해 검색 품질을 측정하면서 RAG 애플리케이션을 구축하고 평가하세요.

​

Weave 설치

W&B Weave는 Python과 TypeScript 라이브러리를 제공합니다. Weave 라이브러리를 설치하려면 다음 명령을 실행하세요:

Python

pip install weave

TypeScript

pnpm install weave

Weave 라이브러리를 사용하려면 Weights & Biases (W&B) 계정을 만들고 User Settings에서 API 키를 생성하세요. API 키를 사용하면 W&B 계정에 인증하고 데이터 전송을 시작할 수 있습니다.