Artikler
Det meste af det, der er svært ved AI-engineering, sker efter at tingen har virket én gang. Det her er noter om det: retrieval der fejler lydløst, evaluering ingen havde budgetteret med, og arkitekturvalg der er billige på papiret og dyre i koden.
Retrieval-demoer fejler på måder, der er usynlige, indtil rigtige dokumenter dukker op. De tre fejl der står for det meste af det, og hvad man bør måle i stedet for at gå på fornemmelse.
LæsEvaluering, overvågning, og de fejl der først dukker op, når rigtige brugere er der.
LæsEn side prosa koster en eftermiddag og afgør de diskussioner, der ellers bliver afgjort i en pull request tre uger senere.
Læs