(ensemble): AWD-LSTM-DOC (fin) × 5 (WT2)

(ensemble): AWD-LSTM-DOC (fin) × 5 (WT2) ni modeli ya lugha iliyoundwa na NTT Communication Science Laboratories na Tohoku University (Japani), iliyotolewa 30 Agosti 2018.

Uzito wake (weights) uko wazi: mtu yeyote anaweza kuipakua, kuiendesha na kuitumia hata kibiashara.

Ina vigezo (parameters) milioni 185.

Ilipotoka, ilivunja rekodi katika kazi yake.

Naweza kuiendesha mwenyewe?

Ndiyo, kwenye simu janja au kifaa chenye uwezo mkubwa zaidi.

  1. SimuRAM ya GB 6–8
  2. Kompyuta mpakatoRAM ya GB 16
  3. Kompyuta yenye uwezo mkubwaGB 24 hadi 64 (kadi ya michoro au Mac yenye uwezo mkubwa)
  4. Sevazaidi ya GB 64

Inahitaji takriban GB 1.1 za kumbukumbu (RAM) ikibanwa hadi biti 4.

Programu za simu zinazoendesha modeli bila intaneti (kwa mfano PocketPal) zinapakua toleo lililobanwa.

Modeli nyingine za NTT Communication Science Laboratories

  1. Fugaku-LLMCyberAgent, Fujitsu, Kotoba Technologies, Nagoya University, RIKEN, Tohoku University na Tokyo Institute of TechnologyMei 2024Lugha
    Wazi13BKompyuta mpakato
  2. AWD-LSTM+WT+Cache+IOG (WT2)NTT Communication Science LaboratoriesSep 2017Lugha
    Haijatolewa53M