wave2vec 2.0 LARGE

wave2vec 2.0 LARGE ni modeli ya usemi iliyoundwa na Facebook (Marekani), iliyotolewa 22 Oktoba 2020.

Uzito wake (weights) uko wazi: mtu yeyote anaweza kuipakua, kuiendesha na kuitumia hata kibiashara.

Ina vigezo (parameters) milioni 317.

Ni moja ya modeli zinazonukuliwa sana na watafiti.

Ilipotoka, ilivunja rekodi katika kazi yake.

Naweza kuiendesha mwenyewe?

Ndiyo, kwenye simu janja au kifaa chenye uwezo mkubwa zaidi.

  1. SimuRAM ya GB 6–8
  2. Kompyuta mpakatoRAM ya GB 16
  3. Kompyuta yenye uwezo mkubwaGB 24 hadi 64 (kadi ya michoro au Mac yenye uwezo mkubwa)
  4. Sevazaidi ya GB 64

Inahitaji takriban GB 1.2 za kumbukumbu (RAM) ikibanwa hadi biti 4.

Programu za simu zinazoendesha modeli bila intaneti (kwa mfano PocketPal) zinapakua toleo lililobanwa.

Modeli nyingine za Facebook

  1. SeamlessM4TFacebook, INRIA na University of California (UC) BerkeleyDes 2023Usemi, Lugha
    Wazi2.3BSimu
  2. DETRFacebookMei 2020Utambuzi wa picha
    Wazi60MSimu
  3. Retrieval-Augmented GeneratorFacebook, New York University (NYU) na University College London (UCL)Mei 2020Lugha
    Wazi626MSimu
  4. Wazi296MSimu
  5. CamemBERTFacebook, INRIA na Sorbonne UniversityNov 2019Lugha
    Wazi335MSimu
  6. RoBERTa LargeFacebook na University of WashingtonJul 2019Lugha
    Wazi355MSimu