시작하기
트레이싱과 평가의 기본 개념을 다루는 실습 예시로 Weave를 시작하세요.
평가 및 데이터셋
평가를 생성하고, 데이터셋을 활용하고, 모델 비교를 위한 리더보드를 구축하는 방법을 알아보세요.
모델 및 프롬프트
실제 사례를 통해 모델 관리, 프롬프트 엔지니어링, 최적화 기법을 살펴보세요.
고급 주제
멀티 에이전트 시스템, 코드 생성, 특수 목적 파이프라인 등 복잡한 사용 사례를 살펴보세요.
프로덕션 및 모니터링
모니터링, 피드백 수집, 안전 가드레일을 위한 프로덕션 수준의 패턴을 구현하세요.
API 및 인테그레이션
Service API로 Weave를 통합하고 외부 시스템과 연결하는 방법을 알아보세요.
추천 쿡북
다음 섹션에서는 시작하기부터 프로덕션, API 인테그레이션까지 주제별로 정리한 추천 쿡북 목록을 소개합니다.시작하기
- Hello Trace - Weave로 트레이싱의 첫 단계를 시작하세요.
- Hello Eval - 평가 개념을 도입하세요.
평가 및 데이터셋
- Leaderboard Quickstart - 모델 비교 리더보드를 구축하세요.
- Hugging Face Datasets - Hugging Face 데이터셋을 사용하여 모델을 평가하세요.
- Import from CSV - CSV 데이터를 로드하고 작업하세요.
모델 및 프롬프트
- Models and Weave Integration - 모델을 Weave로 통합하세요.
- Chain of Density - 고급 프롬프트 기법을 적용하세요.
- DSPy Prompt Optimization - 프롬프트를 프로그래밍 방식으로 최적화하세요.
- NotDiamond Custom Routing - 지능형 모델 라우팅을 구현하세요.
고급 주제
- 멀티 에이전트 구조화된 출력 - 복잡한 멀티 에이전트 시스템을 구축하세요.
- 코드 생성 - 코드 생성 파이프라인을 구축하세요.
- OCR 파이프라인 - OCR로 문서를 처리하세요.
- 오디오 처리 - Weave에서 오디오 데이터를 다루세요.
프로덕션 및 모니터링
- 온라인 모니터링 - 시스템을 실시간으로 모니터링합니다.
- 프로덕션 피드백 - 사용자 피드백을 수집하고 분석합니다.
- Scorer를 가드레일로 활용하기 - 안전 장치를 구현합니다.
- 맞춤형 모델 비용 - 비용을 추적하고 최적화합니다.
- PII 보호 - 민감한 데이터를 안전하게 처리합니다.
API 및 인테그레이션
- Service API 사용 - Service API와 직접 통합합니다.