Llama 4 Behemoth (preview)

• ·parametry: estymata Epoch AI (pewność: likely)
• ·jednostki korelatora: estymata z parametrów (d∝P^⅓, proporcje dense transformera)
• ·MoE: indeks z parametrów TOTAL (pojemność, spójnie z mózgiem); dolna granica widełek z AKTYWNYCH (288B czynnego korelatora)
• ·energia: compute ÷ sprawność NVIDIA H100 SXM5 80GB (zmierzony sprzęt) × MFU 0,40 × PUE 1,2
• ·utrwalenie kodu: 0,75× kotwicy Chinchilli (u=D/(20·P_tot), tokeny z compute; widełki ×÷7,1) — oś diagnostyczna v0 [nasze]

Dominik: „informacja razy kod" daje wyobrażenie o mocy diagnostycznejIloczyn dwóch rodzajów bitów — u nas zobrazowany jako pole bramki Mazurowskiej. Liczone wyłącznie ze struktury modelu (parametry, architektura), nie z benchmarków.. Obie liczby liczymy z budowy modelu — zero testów.

Uczciwie: to nadal miara ilości (jak duży korelator), nie jakości — większy model ma większą moc. Cybernetyczna miara jakościPodział informacja/kod × energia/materia (Einstein). Sam Dominik ją odracza w nagraniu („nie pakujmy jeszcze Einsteina"). Oś jakości = faza 2. czeka na fazę 2. „Kod = parametry×16 bitów" to nasze założenie techniczne, a prezentacja iloczynu jako POLA w bit² — nasza operacjonalizacja (Dominik mówi o iloczynie „informacja razy kod", nie o polu).

Ile przepływów utrwalających[Mazur] „Narastanie przewodności korelacyjnej będzie określane jako rejestracja informacji" — częste przepływy utrwalają rejestraty, najsłabsze zanikają. [D, 12:16] „tworząc nowe rejestraty… albo poprawiając te, które mamy". Mapowanie „token treningu = przepływ mocy korelacyjnej" to nasza analogia funkcjonalna [nasze]. przeszło przez drogi korelatora podczas nauki. Poniżej 0,3× — drogi słabo wydeptane, kod niejednoznaczny[Kossecki, Metacybernetyka] kod niejednoznaczny (ciągi kodów nieoddzielne) prowadzi do pseudoinformowania i dezinformowania — po ludzku: system skłonny zmyślać..

Uczciwie: to oś ilościowa — wykrywacz kodu nieutrwalonego (kara za niedotrenowanie), nie ranking jakości. Obejmuje 1 z 3 czynników rejestracji Mazura (częstość; bez siły i świeżości bodźca, bez derejestracji) i nie widzi jakości danych treningowych. Nie wchodzi do Indeksu. Status: v0 [nasze] — czeka na walidację Dominika (pytanie D9).

Fizyka wyznacza absolutne minimum energii na zapis jednego bitu: kT·ln2 ≈ 2,9×10⁻²¹ JGranica Landauera (1961) — twarde prawo termodynamiki: skasowanie lub zapis 1 bitu informacji kosztuje co najmniej kT·ln2 energii (T = temperatura otoczenia). Żaden komputer nigdy nie zejdzie niżej.. To obiektywny punkt odniesienia — mierzymy, ile rzędów wielkości ponad tym minimum model zapłacił za utrwalenie swoich wag.

Mózg jest o ~7 rzędów wielkości bliżej fizycznego ideału — termodynamiczny mistrz.

Uczciwie: to miara sprawności (te same dane co bity/dżul, w jednostkach fizyki) — nadal strona ilościowa. Miara jakościIloraz: wierność kodu (licznik, za Mazurem) na nakład energia×materia (mianownik — rozdział „dżula", tu Dominik odsyła do Einsteina i sam ten wątek odracza). Oś jakości czeka na fazę 2. wymaga jeszcze licznika-kodu (wierności) — faza 2.

Ile drogi do mózgu?iSkala jest logarytmiczna: każdy równy odcinek paska oznacza ok. 10-krotny wzrost indeksu. Lewy kraniec to 10⁻⁷% (poniżej najsłabszego zmierzonego modelu), prawy — pełny parytet z mózgiem.

Llama 4 Behemoth (preview) osiąga 0,045% potencjału mózgu — mózg ma ok. 2200× więcej. Pasek jest logarytmiczny, więc każdy równy odcinek to ok. 10× wzrost.

Moment w historii

W dniu publikacji (IV 2025) Llama 4 Behemoth (preview) ustępował tylko jednemu modelowi:

Porównanie obejmuje 419 modeli ze zbioru — „#1” = najwyższy Indeks Świadomości wśród modeli opublikowanych przed premierą.

Architektura MoEMixture of Experts — zamiast całej sieci na każde zapytanie pracuje tylko wybrana grupa „ekspertów”. Oszczędza energię przy odpowiadaniu.

Część aktywna to 14,4% wszystkich parametrów.

1. #4Grok 4 HeavyxAI0,060%
2. #5Kimi K3Moonshot0,057%
3. #6Llama 4 Behemoth (preview)Meta AI0,045%
4. #7GPT-4 (Jun 2023)OpenAI0,042%
5. #8GPT-4.5OpenAI0,042%

Od LLaMA-33B (II 2023) do Llama 4 Scout (IV 2025) indeks linii urósł ×2,3. Punkty na wykresie są klikalne — każdy prowadzi do profilu wersji.

1. II 2023LLaMA-33B0,0025%
2. II 2023LLaMA-65B0,0041%
3. VII 2023Llama 2-13B0,0013%
4. VII 2023Llama 2-34B0,0026%
5. VII 2023Llama 2-70Bpopularny lokalnieDostępny do uruchomienia lokalnie — Ollama / Hugging Face / LM Studio.0,0044%
6. VII 2023Llama 2-7Bpopularny lokalnieDostępny do uruchomienia lokalnie — Ollama / Hugging Face / LM Studio.0,0009%
7. XII 2023Llama Guard0,0009%
8. IV 2024Llama 3-70B0,0044%
9. IV 2024Llama 3-8B0,0010%
10. VI 2024Llama-3.1-Nemotron-70B-Instructszacunek z compute0,011%
11. VII 2024Llama 3.1-405Bpopularny lokalnieDostępny do uruchomienia lokalnie — Ollama / Hugging Face / LM Studio.0,015%
12. VII 2024Llama 3.1-70B0,0044%
13. VII 2024Llama 3.1-8Bszacunek0,0010%
14. IX 2024Llama 3.2 11Bpopularny lokalnieDostępny do uruchomienia lokalnie — Ollama / Hugging Face / LM Studio.0,0012%
15. IX 2024Llama 3.2 3B0,0005%
16. IX 2024Llama 3.2 90B0,0051%
17. XII 2024Llama 3.3 70Bpopularny lokalnieDostępny do uruchomienia lokalnie — Ollama / Hugging Face / LM Studio.0,0044%
18. III 2025Llama Nemotron Ultra 253Bszacunek0,011%
19. IV 2025Llama 4 Behemoth (preview)szacunek0,045%
20. IV 2025Llama 4 Maverickszacunek0,015%
21. IV 2025Llama 4 Scoutszacunek0,0059%

Kontekst czasu

Każdy szary punkt to jeden z 419 modeli; Llama 4 Behemoth (preview) wyróżniony kolorem. Oś pionowa jest logarytmiczna, a przerywana linia u góry to mózg (100%).