AI Engineer · AI

Geavanceerde Workshop: AI Observability Beheersen — Doug Guthrie, Braintrust

Een batch van 968 ondersteuningstraceringen van samples toont mislukte orderzoekopdrachten en verbroken escalatiegesprekken. Doug Guthrie gebruikt deze gevallen om de observeerbaarheid van Braintrust te verbinden met het werk van het verbeteren van een agent. De workshop begint met een Python-ondersteuningsagent gebouwd op de OpenAI Agents SDK, voegt tracering toe, stelt een offline evaluatiebasislijn vast en publiceert aangepaste scorers. Online automatiseringen beoordelen inkomende traceringen, terwijl Topics patronen in taken groepeert, se

Introductie van de bron.