Coût et résultats

Savoir ce qui s'est passé.Voir ce qui a aidé.

Connectez les décisions de contexte avec l'utilisation enregistrée, les preuves de coût et les résultats des tâches. Voir ce qui a été livré, ce qu'il a consommé et si le travail a passé ses contrôles.

Référence de la sourceEnregistrement de l'opérationPreuve à inspecter

L'approche

Mesurez les économies. Vérifiez le résultat.

LeanCTX enregistre les opérations de contexte et les preuves de jetons. Utilisez ces mesures aux côtés de tests ou de revues pour juger si un flux de travail fonctionne mieux.

Inspecter

Inspectez l'entrée livrée.

Utilisez les références de source enregistrées, les plans et les mesures de jetons pour inspecter les opérations prises en charge. Les champs disponibles dépendent de l'opération et de l'exécution.

Source
Identifiez le fichier, la référence ou le plan derrière l'opération.
Livraison
Inspectez le résultat enregistré et les preuves de jetons disponibles.
Portée
Les champs de réception dépendent de la surface de l'opération et de l'exécution.

Tracer et rejouer

Suivez les preuves en arrière.

Tracez un reçu vers sa source ou son plan et réexaminez l'état encore disponible. La reproduction d'une réponse de modèle dépend également de l'hôte, du modèle et des paramètres de la requête.

Liaison
Connectez une opération avec ses références de source et de plan enregistrées.
Disponibilité
Une source manquante ou un état expiré limite ce qui peut être réexaminé.
Reproduction
Un enregistrement de contexte seul ne garantit pas la même réponse du modèle.

Utilisation et économie

Les jetons sont des preuves. Pas la totalité de la facture.

Commencez par une utilisation mesurée. Gardez le coût estimé du modèle séparé des frais observés et comparez les tâches équivalentes. L'exemple capturé montre la réduction de l'entrée pour une lecture, pas une promesse sur les dépenses totales.

Entrée
Jetons avant et après la préparation sélectionnée.
Base de coût
Identifier explicitement les estimations, les frais observés et les valeurs indisponibles.
Qualité
Un résultat séparé établi par des vérifications de tâche.
Sortie du produit enregistrée
src/lib/roi.tssignatures · o200k_base
Source
2,566suffixes de tokens
Vue préparée
439suffixes de tokens
82.9%

moins d'entrée pour cette lecture
2 127 jetons supprimés

Une vue de signature omet les détails d'implémentation. Il s'agit d'une mesure d'entrée, pas d'un résultat de coût ou de qualité.

Résultat et rétroaction

Un appel terminé n'est pas une tâche terminée.

Évaluer par rapport à une référence documentée et des critères d'acceptation explicites. Une réponse du fournisseur, un succès signalé par l'appelant et un résultat vérifié sont des preuves différentes. Utilisez les résultats acceptés pour informer la prochaine décision de contexte et de routage.

Référence de base
La même tâche et une configuration d'entrée documentée.
Résultat
Critères de test ou de revue qui comptent pour la tâche réelle.
Comparaison
Inclure les tentatives échouées et les nouvelles tentatives lors de la comparaison du coût par tâche acceptée.

Dans votre flux de travail

D'une opération à votre flux de travail.

Utilisez la surface d'inspection appropriée pour chaque question. Un tableau de bord, un reçu source et un rapport d'évaluation révèlent différentes parties du travail.

Le tableau de bord local

Ouvrez le tableau de bord lean-ctx pour inspecter l'activité locale et les métriques disponibles de l'exécution. Sa visibilité suit les opérations enregistrées par votre intégration.

Explorez cette capacité

Attribution des coûts

Distinguez l'utilisation du modèle, l'entrée mise en cache, la sortie et les tentatives répétées. Conservez la base du coût estimé ou observé ; un frais inconnu n'est pas zéro coût.

Explorez cette capacité

Une boucle de rétroaction basée sur les preuves

Comparez les tâches équivalentes par rapport à une référence documentée, y compris les échecs et les nouvelles tentatives. Renvoyez les résultats vérifiés dans les décisions ultérieures sans transformer l'étiquette de succès de l'appelant en preuve.

Explorez cette capacité

Questions et réponses

Questions de mesure.

Moins de jetons d'entrée signifient-ils le même pourcentage de réduction sur ma facture ?

Non. Les prix des modèles, les taux d'entrée mise en cache, les jetons de sortie et le nombre d'appels affectent également le coût. La démo enregistrée mesure la réduction de l'entrée pour la lecture d'un fichier.

Un reçu prouve-t-il la qualité de la réponse ?

Un reçu enregistre une opération. La qualité nécessite ses propres preuves : des tests, des vérifications de source ou une révision humaine définie. Utilisez les deux pour décider si un flux de travail est efficace.

Suivant : Mémoire et Continuité

Conservez ce que vous avez appris.

Conservez les décisions et les références sources qui valent la peine d'être conservées.

Commencez avec LeanCTX

Mesurez votre propre flux de travail.

Choisissez une tâche représentative et une référence. Comparez l'entrée, puis vérifiez le résultat par rapport à vos propres critères.

Priorité au local. Agnostique au modèle. Votre contexte.