← Wszystkie modele

Profil modelu

LMSI-Palm

Google,University of Illinois Urbana-Champaign (UIUC)·USA·X 2022·język
dane opublikowane
Indeks Świadomości
0,018%
widełki: 0,0079%–0,042%
Informacja (pojemność)
1,9×10⁸ bitów
widełki: 8,4×10⁷–4,4×10⁸

Jak policzono te liczby

dane opublikowane
  • ·parametry: dane opublikowane (Epoch AI, pewność: confident)
  • ·jednostki korelatora: estymata z parametrów (d∝P^⅓, proporcje dense transformera)
  • ·energia: brak compute treningu → nieliczona
  • ·utrwalenie kodu: b.d. — brak compute treningu

Bramka Mazurowska — pełna moc diagnostyczna (informacja × kod)

metoda z nagrania [Cybernetyka #2]

Dominik: „informacja razy kod" daje wyobrażenie o mocy diagnostycznej. Obie liczby liczymy z budowy modelu — zero testów.

Informacja
1,9×10⁸
bity — relacje wewnątrz sieci
Kod
8,6×10¹²
bity — utrwalone wagi
Moc diagnostyczna
1021,2 bit²
pole = informacja × kod

Uczciwie: to nadal miara ilości (jak duży korelator), nie jakości — większy model ma większą moc. Cybernetyczna miara jakości czeka na fazę 2. „Kod = parametry×16 bitów" to nasze założenie techniczne, a prezentacja iloczynu jako POLA w bit² — nasza operacjonalizacja (Dominik mówi o iloczynie „informacja razy kod", nie o polu).

Ile drogi do mózgu?i

0,018%
10⁻⁷%
Mózg (100%)

LMSI-Palm osiąga 0,018% potencjału mózgu — mózg ma ok. 5500× więcej. Pasek jest logarytmiczny, więc każdy równy odcinek to ok. 10× wzrost.

Moment w historii

W dniu publikacji (X 2022) LMSI-Palm wyprzedzały go 4 modele — na czele z:

W dniu premiery
#5
Do ówczesnego lidera
×2,3
Modeli przed premierą
78

Porównanie obejmuje 419 modeli ze zbioru — „#1” = najwyższy Indeks Świadomości wśród modeli opublikowanych przed premierą.

Pozycja w rankingu

#69 z 419
  1. #67Flan-PaLM 540B0,018%
  2. #68U-PaLM (540B)0,018%
  3. #69LMSI-Palm0,018%
  4. #70MegaScale (530B)0,018%
  5. #71Megatron-Turing NLG 530B0,018%

Rodzina PaLM

7 wersji

Od PaLM (540B) (IV 2022) do PaLM 2 (V 2023). Punkty na wykresie są klikalne — każdy prowadzi do profilu wersji.

  1. IV 2022PaLM (540B)0,018%
  2. X 2022Flan-PaLM 540B0,018%
  3. X 2022LMSI-Palm0,018%
  4. X 2022U-PaLM (540B)0,018%
  5. III 2023PaLM-E0,019%
  6. V 2023Med-PaLM 20,013%
  7. V 2023PaLM 20,013%

Kontekst czasu

Każdy szary punkt to jeden z 419 modeli; LMSI-Palm wyróżniony kolorem. Oś pionowa jest logarytmiczna, a przerywana linia u góry to mózg (100%).