Vlákno názorů k článku
ČNB otestovala OpenAI a Muskův Grok na prognózy inflace. Někdy byli lepší než lidští profesionálové od Jenda - Ehm, přečetli jste si, jak to testování LLM...

Ehm, přečetli jste si, jak to testování LLM probíhalo?

Od obou modelů jsme chtěli, aby předpověděly meziroční inflaci v Česku na rok dopředu. Každému modelu jsme pro každé čtvrtletí od 1Q2019 do 3Q2024 zadali následující otázku:

„Předpokládej, že jsi v čase 𝝉 a nejsou ti poskytnuty žádné další pozdější informace. Uveď, prosím, svou vlastní nejlepší prognózu meziroční sezónně neočištěné inflace CPI v ČR na příští rok. Uveď, prosím, číselné hodnoty pro tyto prognózy. K formulaci těchto prognóz nepoužívej žádné informace, které jsi neměl k dispozici ke dni 𝝉.“

Proměnná 𝝉 představuje jednotlivá čtvrtletí v období od 1Q2019 do 3Q2024.

Nebudu používat pozdější informace (na kterých je to interně natrénované - nebavíme se o tom, že by to třeba negooglilo), čestný pionýrský!

1. 2. 2025, 21:25 editováno autorem komentáře

taková dětská naivní zkouška :). Každopádně pro ČNB probíhá teď vývoj modelu na prognózy udělaný už trochu dospěleji.

Tohle asi hlavně PR pro lajckou veřejnost, aby bylo vidět, že jsou moderní.