Stanford otestoval AI proti profesorům práva. Výsledek míří jinam, než čekáte
Výsledky studie, kterou by si měl přečíst každý, kdo se živí tím, že něčemu rozumí líp než jeho klient.
Na Stanford Law School proběhla studie, kterou by si měl přečíst každý, kdo se živí tím, že něčemu rozumí líp než jeho klient. Tým pod vedením profesora Juliana Nyarka srovnal odpovědi AI s odpověďmi profesorů práva. AI vyhrála zhruba ve 3 ze 4 případů.
To důležité je co se měřilo a kde je hodnota zkušeného profesionála.
Co se testovalo
Název studie je “Law Professors Prefer AI Over Peer Answers”. Zapojilo se 16 profesorů ze 14 amerických právnických fakult.
Postup byl jednoduchý. Profesoři připravili 40 reprezentativních studentských dotazů z kontraktačního práva, tedy ty otázky, co padají po přednášce nebo na konzultacích. Každý napsal svou odpověď. Na stejné otázky odpověděla i AI (Gemini 2.5 Pro a NotebookLM).
Pak všichni hodnotili anonymizované dvojice odpovědí, bez znalosti autora. Vybírali jen tu, kterou by raději dali studentovi. Téměř 3 000 porovnání.
AI zvítězila přibližně ve 3 ze 4 případů. To už je rozdíl, který nevysvětlíte náhodou ani drobnou stylistickou preferencí. Autoři sami přiznávají, že je výsledky překvapily. (Shrnutí studie: law.stanford.edu.)
Co se NEtestovalo
Mnoho lidí si přečte studii zkratkovitě a odejde se závěrem “AI je lepší právník”. Studie ale neměřila právní rešerši. Ani drafting smluv. Ani strategii sporu.
Měřila schopnost srozumitelně vysvětlit problém začátečníkovi.
Profesory na AI odpovědích zaujala jasnost, struktura a schopnost dovést studenta k pochopení. To všechno jsou dovednosti učitele, a přesně v nich dnešní modely vynikají. Hloubka právní analýzy přitom rozhodovala překvapivě málo.
Porážka tedy přišla v pedagogice, zatímco právní hloubka zůstala stranou. A to je podle mě nejdůležitější zjištění celé studie.
Číslo, které zaráží víc než to první
AI odpovědi byly označeny za pedagogicky škodlivé v 3,5 % případů. Odpovědi profesorů ve 12 %. Trojnásobek.
Proč? AI drží linku. Neodbíhá, neimprovizuje, nezačne odbočkou o tom, jak to bylo za jejích studií. Je konzistentní a systematicky vysvětluje kroky.
Zkušený expert často trpí opačnou “nemocí”. Ví toho tolik, že zapomněl, jak uvažuje někdo, kdo to slyší poprvé. Říká se tomu prokletí znalosti a mají ho interní právníci, advokáti stejně jako na profesoři ze Stanfordu.
Koho AI vlastně ohrožuje
Studie ukázala ještě jednu věc, která je vidět v praxi pořád častěji. Nejlepší modely byly srovnatelné s nejlepšími lidskými učiteli ve vzorku. Špička zatím drží.
Pod špičkou to vypadá jinak. Pokud jste nejlepší vysvětlující ve svém oboru, AI vás zatím netrápí. Pokud jste průměrný (a statisticky vzato většina z nás v něčem průměrná je), AI právě teď dělá vaši práci levněji, rychleji a v noci.
AI je tady hlavním konkurentem pro zkušené, ale průměrné experty, ne pro juniory na začátku kariéry. To je ekonomicky mnohem zásadnější moment, než kolik se o něm mluví.
Kam se hodnota experta posouvá
Rutinní vysvětlování zlevňuje téměř na nulu. Vzácnou se stává jiná sada schopností.
Úsudek. Kontext, který není v žádném datasetu, protože žije jen v téhle konkrétní firmě a téhle konkrétní situaci. Schopnost položit správnou otázku dřív, než začnete hledat odpověď. Práce s nejistotou. A ochota říct “tohle bych udělal takhle” a podepsat se pod to.
V praxi to vidím čím dál častěji. Klient si první vysvětlení vezme od AI. Za právníkem nebo konzultantem přijde ve chvíli, kdy se potřebuje rozhodnout, vyhodnotit riziko, zvolit strategii a předat odpovědnost na někoho, kdo ji unese.
To je dobrá zpráva, pokud jste tu hodnotu budovali. A varování, pokud jste 20 let prodávali hlavně to, že umíte věci hezky vysvětlit.
Co si z toho odnést
AI ve studii porazila profesory v oblasti, kterou jsme dlouho považovali za výsostně lidskou: ve vysvětlování, učení a vedení k pochopení.
Pro každého, kdo radí, zastupuje nebo vede, je v tom jeden praktický signál. Hodnota zkušeného profesionála se přesouvá od dodávání odpovědí k dodávání úsudku.
Zkuste si tenhle týden u jedné schůzky položit otázku: za co mi tenhle člověk doopravdy platí? Pokud zní odpověď “za to, že mu to umím vysvětlit”, máte čas to změnit. Zatím.