Utvärdering av AI-agenter kan bli oväntat dyrt

Eftersom många organisationer använder en andra stor språkmodell för att granska resultaten från en LLM-driven agent, kan agenttestning bli många gånger dyrare än att testa traditionell programvara, säger han. Dessutom kan denna metod, som kallas LLM somdomare,

Sammanhang: ...Du kan få olika svar och olika körningar om du inte är försiktig, så det skiljer sig från mer traditionell programvaruövervakning eller testning där det antingen godkänns eller underkänns. Kostnaden för agentutvärderingar kan variera kraftigt beroende på agentens komplexitet, säger Russell Twilligear, chef för AI-forskning och utveckling hos Blogbuster, en leverantör av AI-genererat innehåll. ...

Omnämnda platser: Monte Carlo. Omnämnda personer: Russell Twilligear.

Deloittes AI-groda visar på kritiska brister i företagens kontroller

Händelsen inträffade samtidigt som Deloitte tillkännagav ett stort partnerskap för att distribuera Anthropics Claude AI till sina nästan 500.000 anställda över hela världen. Deloitte har inte svarat på en begäran om kommentarer. Modernisering av leverantörsavtal

Sammanhang: ...Gogia säger att han ser en framväxande modell där gemensamma granskningsnämnder inkluderar representanter för kunder och leverantörer, vilket säkerställer att AI-producerat innehåll granskas innan det godkänns. – Det är så mognad ser ut – inte frånvaron av AI, utan närvaron av bevis, säger han. Styrning i AI-åldern kommer att belöna samarbete, inte konfrontation....