Majoritatea evaluărilor AI sunt minciuni scumpe. De obicei, măsoară ceea ce este ușor de măsurat – valori precum "halucinații" și "toxicitate" – nu modurile specifice în care produsul tău eșuează de fapt utilizatorii. @HamelHusain și @sh_reya predau o abordare diferită - una care a făcut ca cursul lor să fie #1 cu cele mai mari încasări la @MavenHQ, cu înscrieri consistente de la @OpenAI, @AnthropicAI și fiecare laborator major de inteligență artificială. Ideea lor: Începeți cu analiza erorilor, nu cu valorile. Revizuiți 100 de interacțiuni reale ale utilizatorilor. Scrieți critici detaliate despre ceea ce a mers prost de fapt. Găsiți modele. Abia apoi construiți evaluări care vă îmbunătățesc produsul. După ce au instruit 2.000+ PM și ingineri la 500+ companii, și-au distilat metodologia într-un manual sistematic care vă arată exact cum: - Identificați ~10 moduri de eșec care vă sparg de fapt produsul - Construiți judecători LLM pe care îi puteți valida statistic și în care puteți avea încredere - Creați conducte CI/CD care prind regresiile înainte ca utilizatorii să o facă - Transformați monitorizarea producției într-un motor de descoperire a noilor probleme Citiți ghidul lor complet aici:

Cursul online al .@HamelHusain și @Sh_reya – AI Evals for Engineers & PMs – este cursul #1 cu cele mai mari încasări pe Maven (de departe) și aduce în mod constant grupuri mari din toate laboratoarele AI majore. Acest lucru se datorează faptului că învață ceva crucial: cum să construiești evaluări care să îți îmbunătățească de fapt produsul, nu doar să generezi tablouri de bord de vanitate. În ultimii doi ani, Hamel și Shreya au jucat un rol major în schimbarea evaluărilor de la a fi un subiect obscur și misterios la una dintre cele mai necesare abilități pentru constructorii de produse AI. După ce au instruit peste 2.000 de miniștri și ingineri și lideri la peste 500 de companii, acum împărtășesc manualul lor complet - aceeași metodologie predată la @OpenAI, @AnthropicAI și alte laboratoare de top. Veți învăța cum să vă împământați evaluările în realitate cu analiza erorilor, să construiți evaluări robuste în care puteți avea încredere și să creați un volant de îmbunătățire continuă care să prindă regresiile înainte de a le livra. Nu ratați acesta: Ofertă limitată: Obțineți 35% reducere la cursul Hamel și Shreya folosind codul LENNYSLIST la finalizarea comenzii. Aceasta este cea mai mare reducere pe care au oferit-o vreodată la cursul lor. Vă recomand cu căldură să vă urcați pe asta cât mai curând posibil. Înscrierile se închid în 2 zile. Înregistrați-vă aici: Vă mulțumim că ați împărtășit acest aur cu noi, Hamel și Shreya 🙏

Noua mea definiție preferată a "agenției înalte": "Ești un termostat, nu un termometru. Termometrul măsoară temperatura camerei, în timp ce un termostat o schimbă." — @ezinneudezue