Vlákno názorů k článku
ČNB otestovala OpenAI a Muskův Grok na prognózy inflace. Někdy byli lepší než lidští profesionálové od Uncaught ReferenceError: - taková dětská naivní zkouška :). Každopádně pro ČNB...

taková dětská naivní zkouška :). Každopádně pro ČNB probíhá teď vývoj modelu na prognózy udělaný už trochu dospěleji.

Tohle asi hlavně PR pro lajckou veřejnost, aby bylo vidět, že jsou moderní.

Ehm, přečetli jste si, jak to testování LLM probíhalo?

Od obou modelů jsme chtěli, aby předpověděly meziroční inflaci v Česku na rok dopředu. Každému modelu jsme pro každé čtvrtletí od 1Q2019 do 3Q2024 zadali následující otázku:

„Předpokládej, že jsi v čase 𝝉 a nejsou ti poskytnuty žádné další pozdější informace. Uveď, prosím, svou vlastní nejlepší prognózu meziroční sezónně neočištěné inflace CPI v ČR na příští rok. Uveď, prosím, číselné hodnoty pro tyto prognózy. K formulaci těchto prognóz nepoužívej žádné informace, které jsi neměl k dispozici ke dni 𝝉.“

Proměnná 𝝉 představuje jednotlivá čtvrtletí v období od 1Q2019 do 3Q2024.

Nebudu používat pozdější informace (na kterých je to interně natrénované - nebavíme se o tom, že by to třeba negooglilo), čestný pionýrský!

1. 2. 2025, 21:25 editováno autorem komentáře