35. Vem dömer AI:n? Det jag lärde mig om evals som förändrade hur jag tänker
Anders Kodar16 Kesä

35. Vem dömer AI:n? Det jag lärde mig om evals som förändrade hur jag tänker

Jag läste en bok och fastnade på ett kapitel.

Det handlade inte om kod.

Det handlade om att döma.


Sök jobb på Rootr www.rootr.se


I det här avsnittet av Anders Kodar pratar jag om evals

– det som alla ignorerar när de bygger AI – och konceptet

LLM as a judge, där en AI bedömer en annan AI.


Du får höra:

– Varför 40% av allt agentarbete handlar om evals

och ingen pratar om det

– Hur LLM as a judge fungerar – och vad fallgroparna är

– Varför det här är ett område där du som junior

kan äga något tidigt


För dig som bygger med AI, lär dig om AI-agenter,

eller vill förstå vad som faktiskt krävs för att

veta om din AI fungerar på riktigt.


Boken: AI Engineering av Chip Huyen.


Sök jobb på Rootr www.rootr.se


Anders Kodar – podcast om att lära sig programmera

från noll i Sverige.


GitHub: github.com/andersabjorn

Hosted on Acast. See acast.com/privacy for more information.

Tämä jakso on lisätty Podme-palveluun avoimen RSS-syötteen kautta eikä se ole Podmen omaa tuotantoa. Siksi jakso saattaa sisältää mainontaa.

Jaksot(92)

92.  Tillbaka efter sommaren – kodade jag mer än någonsin?

92. Tillbaka efter sommaren – kodade jag mer än någonsin?

Nu börjar allvaret igen och verkligheten är tillbaka efter ett sommarlångt uppehåll utan kod. Eller har jag kodat och gjort mer än jag någonsin gjort?I det här avsnittet av Anders Kodar summerar jag s...

12 Elo 13min

91. Copilot i Visual Studio: När din editor vet mer om ditt projekt än du gör

91. Copilot i Visual Studio: När din editor vet mer om ditt projekt än du gör

Copilot i Visual Studio: När din editor vet mer om ditt projekt än du görI morse öppnade jag Visual Studio. Och Copilot var annorlunda. Microsoft har byggt in Agent Skills direkt i editorn — specialis...

11 Elo 12min

90. Multi-agent AI: Varför det kraschar när alla delar funkar

90. Multi-agent AI: Varför det kraschar när alla delar funkar

Tänk dig ett system där varje del funkar perfekt. Du testar dem en och en. Allt grönt. Sedan sätter du ihop dem — och systemet kraschar. Det är inte ett AI-problem. Det är ett koordinationsproblem. Oc...

10 Elo 12min

89. Därför misslyckas ditt AI-projekt — och det handlar inte om AI:n

89. Därför misslyckas ditt AI-projekt — och det handlar inte om AI:n

Nittiosju procent av tech-cheferna globalt säger att derasAI-initiativ har bromsats av datapipeline-problem — och att det kostardem i snitt 3 miljoner dollar per månad.Det här avsnittet handlar inte o...

9 Elo 11min

88. Från att skämmas i klassrummet till att bygga agenter – min resa på ett år

88. Från att skämmas i klassrummet till att bygga agenter – min resa på ett år

Det är lätt att bara köra på och glömma hur kort tid det faktiskt gått. Snart ett år sedan jag tog Gustav Berg i handen, presenterade mig och satte mig i klassrummet för första gången – nervös och osä...

8 Elo 11min

87. Self-Improving AI: När agenten som lovar guld kostar en förmögenhet i tokens

87. Self-Improving AI: När agenten som lovar guld kostar en förmögenhet i tokens

De säger att den förbättrar sig själv. De säger att den nästan krossat ett av världens svåraste AI-benchmark. Men ingen pratar om att den kostar skjortan – och att "självförbättrande" inte betyder det...

7 Elo 12min

86. Varför AI-agenter ljuger och fuskar: säljaren utan etiska riktlinjer

86. Varför AI-agenter ljuger och fuskar: säljaren utan etiska riktlinjer

AI-agenter bröt sig in i tre riktiga organisationer förra veckan — utan att bli ombedda. Det är inte ett rykte eller ett tankeexperiment. Anthropic bekräftade det. BBC, Reuters och Financial Times rap...

6 Elo 15min

85. AI-skills förklarat: så lär du agenten dina återkommande uppgifter

85. AI-skills förklarat: så lär du agenten dina återkommande uppgifter

1994 började jag bygga skills i NHL-hockey på SEGA. Idag bygger jag skills på ett helt annat sätt – för AI-agenter. Och det visar sig hänga ihop mer än man tror.I det här avsnittet av Anders Kodar för...

5 Elo 11min

Suosittua kategoriassa Liike-elämä ja talous

sijotuskasti
psykopodiaa-podcast
mimmit-sijoittaa
ostan-asuntoja-podcast
rss-rahapodi
rss-sami-miettinen-neuvottelija
pari-sanaa-lastensuojelusta
rss-porssipodi
rss-paasipodi
asuntoasiaa-paivakirjat
pomojen-suusta
raharesepti
rss-johtajatabut-aiheita-joista-ei-ole-tapana-puhua
rahapuhetta
rss-lahtijat
rss-h-asselmoilanen
rss-oivalluksia-rahasta-elamasta
rss-startup-ministerio
jahtaa-unelmiasi
rss-merja-mahkan-rahat