← Wszystkie modele

Profil modelu

GPT-2 (1.5B)

OpenAI·USA·II 2019·język
szacunek
Indeks Świadomości
0,0003%
widełki: 8,5×10⁻⁵%–0,0010%szacunek
Informacja (pojemność)
3,1×10⁶ bitów
widełki: 9×10⁵–1×10⁷
Energia treningu
6 MWh
widełki: 3 MWh–12 MWhszacuneksprzęt: Google TPU v3
Sprawność
1,1 bit/J
bitów wzorca z 1 dżula energii treningu

Jak policzono te liczby

szacunek
  • ·parametry: estymata Epoch AI (pewność: speculative)
  • ·jednostki korelatora: estymata z parametrów (d∝P^⅓, proporcje dense transformera)
  • ·energia: compute ÷ sprawność Google TPU v3 (zmierzony sprzęt) × MFU 0,40 × PUE 1,2

Bramka Mazurowska — pełna moc diagnostyczna (informacja × kod)

metoda z nagrania [Cybernetyka #2]

Dominik: „informacja razy kod" daje wyobrażenie o mocy diagnostycznej. Obie liczby liczymy z budowy modelu — zero testów.

Informacja
3,1×10⁶
bity — relacje wewnątrz sieci
Kod
2,4×10¹⁰
bity — utrwalone wagi
Moc diagnostyczna
1016,9 bit²
pole = informacja × kod

Uczciwie: to nadal miara ilości (jak duży korelator), nie jakości — większy model ma większą moc. Cybernetyczna miara jakości czeka na fazę 2. „Kod = parametry×16 bitów" to nasze założenie techniczne, a prezentacja iloczynu jako POLA w bit² — nasza operacjonalizacja (Dominik mówi o iloczynie „informacja razy kod", nie o polu).

Fizyczna kotwica — granica Landauera

termodynamika · nie benchmark

Fizyka wyznacza absolutne minimum energii na zapis jednego bitu: kT·ln2 ≈ 2,9×10⁻²¹ J. To obiektywny punkt odniesienia — mierzymy, ile rzędów wielkości ponad tym minimum model zapłacił za utrwalenie swoich wag.

Fizyczne minimum
6,9×10⁻¹¹ J
kod × kT·ln2 — mniej się nie da
Realny trening
6 MWh
energia zapłacona naprawdę
Dystans od ideału
20,5 rzędu wielkości
= 10^20,5 × minimum
granica Landauera (0)mózg
14,5GPT-2 (1.5B)
20,5

Mózg jest o ~6 rzędów wielkości bliżej fizycznego ideału — termodynamiczny mistrz.

Uczciwie: to miara sprawności (te same dane co bity/dżul, w jednostkach fizyki) — nadal strona ilościowa. Miara jakości wymaga jeszcze licznika-kodu (wierności) — faza 2.

Ile drogi do mózgu?i

0,0003%
10⁻⁷%
Mózg (100%)

GPT-2 (1.5B) osiąga 0,0003% potencjału mózgu — mózg ma ok. 340 000× więcej. Pasek jest logarytmiczny, więc każdy równy odcinek to ok. 10× wzrost.

Moment w historii

W dniu publikacji (II 2019) GPT-2 (1.5B) wyprzedzało go 7 modeli — na czele z:

SNM-skip
XII 2014
0,0040%
MoE-Multi
I 2017
0,0010%
AlphaGo Lee
I 2016
0,0006%
W dniu premiery
#8
Do ówczesnego lidera
×13,7
Modeli przed premierą
35

Porównanie obejmuje 419 modeli ze zbioru — „#1” = najwyższy Indeks Świadomości wśród modeli opublikowanych przed premierą.

Pozycja w rankingu

#372 z 419
  1. #370Qwen3-1.7B0,0003%
  2. #371Qwen2.5-1.5B0,0003%
  3. #372GPT-2 (1.5B)0,0003%
  4. #373InstructGPT 1.3B0,0003%
  5. #374Unsupervised High-level Feature Learner0,0002%

Rodzina GPT

23 wersje + 9 niemierzalnych

Od GPT-1 (VI 2018) do GPT-5.5 Pro (IV 2026) indeks linii urósł ×470. Punkty na wykresie są klikalne — każdy prowadzi do profilu wersji.

  1. VI 2018GPT-14,8×10⁻⁵%
  2. II 2019GPT-2 (1.5B)0,0003%
  3. II 2019GPT-2 (355M)0,0001%
  4. II 2019GPT-2 (774M)0,0002%
  5. V 2020GPT-3 175B (davinci)0,0083%
  6. III 2022GPT-3.5 (davinci-002)0,0073%
  7. V 2022GPT-2 Medium (FlashAttention)0,0001%
  8. VI 2023GPT-3.5 Turbo0,0018%
  9. VI 2023GPT-4 (Jun 2023)0,042%
  10. IX 2023GPT-3.5 Turbo Instruct0,0018%
  11. IX 2023GPT-4V—
  12. V 2024GPT-4o0,0091%
  13. VII 2024GPT-4o mini—
  14. II 2025GPT-4.50,042%
  15. VIII 2025GPT-50,023%
  16. VIII 2025GPT-5 mini—
  17. VIII 2025GPT-5 nano—
  18. VIII 2025gpt-oss-120b0,0062%
  19. VIII 2025gpt-oss-20b0,0019%
  20. X 2025GPT-5 Pro0,0062%
  21. XI 2025GPT-5.10,023%
  22. XI 2025GPT-5.1 Instant—
  23. XI 2025GPT-5.1-Codex—
  24. XI 2025GPT-5.1-Codex-Max—
  25. XII 2025GPT-5.20,023%
  26. XII 2025GPT-5.2 Codex—
  27. XII 2025GPT-5.2 Pro0,023%
  28. II 2026GPT-5.3 Codex—
  29. III 2026GPT-5.40,023%
  30. III 2026GPT-5.4 Pro0,023%
  31. IV 2026GPT-5.50,023%
  32. IV 2026GPT-5.5 Pro0,023%

Kontekst czasu

Każdy szary punkt to jeden z 419 modeli; GPT-2 (1.5B) wyróżniony kolorem. Oś pionowa jest logarytmiczna, a przerywana linia u góry to mózg (100%).