W&B Weave

Suivez, testez et améliorez vos applications de modèles de langage avec W&B Weave

W&B Weave est une plateforme d’observabilité et d’évaluation qui vous aide à suivre, évaluer et améliorer vos agents et applications LLM. Avec Weave, vous pouvez :

• Tracer votre agent créé avec des SDK et harnesses populaires et collecter des métriques à son sujet
• Instrumenter manuellement des agents personnalisés pour collecter des traces et des métriques
• Évaluer les réponses de votre application à l’aide de juges LLM et d’évaluateurs personnalisés

​

Premiers pas

Les documents suivants vous guident dans les notions de base pour utiliser la suite d’outils de Weave.

Intégrer Weave à un agent

Choisissez une intégration native pour le SDK ou le harness de votre agent, puis commencez à tracer les sessions, les tours de conversation, les appels LLM et les appels d’outil dans la vue Agents.

Configurer une observabilité personnalisée pour un agent

Tracez un agent personnalisé sur plusieurs tours de conversation avec le SDK Weave afin de capturer les sessions, les appels LLM et les appels d’outil sous forme de spans OpenTelemetry.

Consulter les métriques d’agent dans l’interface Weave

Tracez un appel LLM simple et examinez les entrées, les sorties et le code dans votre compte W&B.

​

Installer Weave

W&B Weave propose des bibliothèques Python et TypeScript. Pour installer la bibliothèque Weave, exécutez la commande suivante :

Python

pip install weave

TypeScript

pnpm install weave

Pour commencer à utiliser la bibliothèque Weave, créez un compte Weights & Biases (W&B) ainsi qu’une clé API dans Paramètres utilisateur. La clé API vous permet de vous authentifier à votre compte W&B et de commencer à y envoyer des données.