1. Utangulizi

Ushahidi wa lugha kwa watoto hufuata mlolongo thabiti sana: kuanzia katika uainishaji wa sauti (fonimu), kisha ukuzaji wa msamiati, na hatimaye kufikia ujuzi wa miundo changamano ya kisintaksia. Njia hii ya ukuzaji, inayoonekana kutoka utotoni hadi umri wa takriban miaka sita, inazua maswali muhimu kuhusu kanuni za msingi za kompyuta. Je, hii ya kujifunza kwa hatua ni sifa ya kipekee ya neyrobiolojia ya binadamu, au inaweza kutokea katika mifumo ya bandia? Utafiti huu unashughulikia moja kwa moja swali hili kwa kulinganisha njia za kujifunza za watoto 54 (wenye umri wa miezi 18 hadi miaka 6) na zile za mifano 48 ya GPT-2 iliyofunzwa kutoka mwanzo. Dhana kuu ni kwamba ikiwa hatua zinazofanana zitajitokeza katika zote mbili, inaweza kuashiria vikwazo vya kujifunza vinavyotokana na data vinavyoshirikiwa.

2. Njia ya Utafiti

Utafiti huu unatumia mfumo wa kulinganisha, ukichunguza wanaojifunza wa kibinadamu na wa bandia katika hatua nyingi za ukuzaji wao.

2.1 Usanidi wa Jaribio

Watoto: Uzalishaji wa lugha ulichambuliwa kwa watoto 54. Usemi wao wa hiari na uwezo wao wa kurudia sentensi zenye utata tofauti wa kisintaksia ulitathminiwa, kufuatia njia zilizowekwa na Friedmann et al. (2021).

Mifano ya GPT-2: Mfano 48 wa mfano wa GPT-2 (aina ya parameta 124M) ulifunzwa kutoka kwa uanzishaji wa nasibu kwenye malengo ya kawaida ya kuiga lugha (k.m., WebText). Hali zao za ndani zilichunguzwa kwa vipindi vya kawaida wakati wote wa mafunzo.

2.2 Ukusanyaji wa Data & Uchunguzi

Kundi la uchunguzi wa utambuzi 96 lilitayarishwa kutoka kwa viwango vilivyowekwa:

  • BLiMP: Kwa kutathmini ujuzi wa kisarufi katika matukio 67 ya kisintaksia.
  • Zorro: Kwa kuchunguza mantiki ya maana na busara ya kawaida.
  • BIG-Bench: Kwa kutathmini uwezo mpana wa lugha na utambuzi.

Uchunguzi huu ulitumika kwa mifano ya GPT-2 katika kila kituo cha ukaguzi cha mafunzo na ulitumika kama vipimo vinavyolingana na kazi za uzalishaji za watoto.

3. Matokeo & Uchambuzi

3.1 Ulinganisho wa Njia ya Kujifunza

Uchambuzi ulionyesha kwamba mifano ya GPT-2, kama watoto, hupata ujuzi wa lugha kwa mpangilio wa kimfumo. Kazi rahisi (k.m., makubaliano ya kimsingi ya kisarufi) hufahamika mapema katika mafunzo, wakati kazi ngumu zaidi (k.m., miundo changamani ya kisintaksia kama vishazi vya sifa) zinahitaji hatua nyingi zaidi za mafunzo (zinazolingana na wakati wa ukuzaji).

3.2 Mpango wa Kujifunza Sambamba

Upatikanaji muhimu ni asili ya sambamba ya kujifunza. Hata kazi ambazo hufahamika kabisa mwishoni mwa mafunzo zinaonyesha uboreshaji unaoweza kupimika kutoka hatua za kwanza kabisa. Hii inaonyesha kwamba mfano hujenga uwakilishi wa msingi ambao unaboreshwa kila wakati, badala ya kujifunza ujuzi kwa mlolongo mkali na uliotengwa.

3.3 Hatua za Pamoja dhidi ya Zilizotofautiana

Utafiti huu unatambua mwingiliano na tofauti muhimu:

  • Zinazoshirikiwa: Maendeleo mapana kutoka kwa aina rahisi za kisintaksia hadi zile changamani zaidi.
  • Zilizotofautiana: Mpangilio maalum wa baadhi ya ujuzi ndogo ulitofautiana. Kwa mfano, mifano inaweza kupata sheria fulani rasmi za kisintaksia kwa mpangilio tofauti na watoto, labda kwa sababu ya tofauti katika usambazaji wa data ya mafunzo dhidi ya uzoefu wa utambuzi na kijamii wa binadamu.

Hii inasisitiza kwamba ingawa shinikizo linalotokana na data linalounda hatua, maelezo ya mlolongo wa hatua yanarekebishwa na muundo na mchango wa mwanafunzi.

Vipimo Muhimu vya Jaribio

Mifano Iliyofunzwa: Mfano 48 wa GPT-2

Uchunguzi wa Utambuzi: Kazi 96 kutoka BLiMP, Zorro, BIG-Bench

Washiriki Watoto: 54 (miezi 18 - miaka 6)

Upatikanaji Mkuu: Uwiano mkubwa katika mpangilio wa hatua za kujifunza kati ya watoto na mifano, lakini sio sawa kabisa.

4. Mfumo wa Kiufundi

4.1 Uundaji wa Kihisabati

Lengo kuu la kujifunza kwa GPT-2 ni utabiri wa tokeni inayofuata kupitia makadirio ya uwezekano mkubwa zaidi. Kwa kuzingatia mlolongo wa tokeni $x_1, x_2, ..., x_t$, mfano uliowekwa parameta $ heta$ unafunzwa kupunguza hasara ya logi hasi:

$L(\theta) = -\sum_{t} \log P(x_t | x_{

Usahihi wa uchunguzi $A_p(\theta, \tau)$ kwa uchunguzi maalum wa lugha $p$ katika hatua ya mafunzo $\tau$ hupima uwezo unaojitokeza. Njia ya kujifunza ni kazi $\tau \rightarrow \{A_{p_1}(\theta, \tau), A_{p_2}(\theta, \tau), ...\}$. Uchambuzi wa utafiti huu unalinganisha mpangilio ambao uchunguzi tofauti $p$ huvuka kizingiti cha utendaji (k.m., usahihi wa 80%) katika $\tau$ kwa mifano na katika umri kwa watoto.

4.2 Mfano wa Mfumo wa Uchambuzi

Kesi: Kufuatilia Upatikanaji wa Kishazi cha Sifa

Kazi ya Uchunguzi: Tofautisha sentensi za kisarufi ("Kijana niliyemwona alimba") na zisizo za kisarufi ("Kijana niliyemwona aimba").

Hatua za Uchambuzi:

  1. Utoaji wa Data: Kwa kila kituo cha ukaguzi cha mfano $\tau$, hesabu usahihi kwenye seti iliyowekwa sawa ya uchunguzi 100 wa vishazi vya sifa.
  2. Kuweka Kizingiti: Fafanua hatua ya upatikanaji $\tau_{acquire}$ kama kituo cha kwanza cha ukaguzi ambapo usahihi > 80% na unabaki juu kwa ukaguzi unaofuata.
  3. Uwiano: Linganisha mpangilio wa cheo cha $\tau_{acquire}$ kwa uchunguzi wa kishazi cha sifa dhidi ya uchunguzi mwingine wa kisintaksia (k.m., makubaliano ya kitenzi na kitu, uundaji wa swali).
  4. Ulinganifu wa Kibinadamu: Panga $\tau_{acquire}$ kwa safu ya umri wa kawaida (k.m., ~miezi 42) wakati watoto wanafahamu muundo huu katika uzalishaji.

Mfumo huu unaruhusu ulinganishaji wa kiasi wa ratiba za ukuzaji katika mifumo tofauti kabisa ya kujifunza.

5. Uwasilishaji wa Matokeo

Chati ya Dhana: Ulinganisho wa Njia ya Kujifunza

Matokeo yanaweza kuonyeshwa kwenye chati yenye mihimili miwili:

  • Mhimili-X (Wakati): Kwa watoto, huu ni Umri (miezi). Kwa GPT-2, hii ni Hatua za Mafunzo (kiwango cha logi).
  • Mhimili-Y: Usahihi wa Utendaji (%) kwenye kiwango kilichowekwa sawa.
  • Mistari Mingi: Kila mstari unawakilisha ujuzi tofauti wa lugha (k.m., Ubaguzi wa Fonimu, SVO ya Msingi, Uundaji wa Swali, Kisintaksia Kilichojikita).

Chati ingeonyesha njia zote mbili zikiwa na mkunjo wa kujifunza wa umbo la S kwa kila ujuzi, lakini kwa mpangilio wa mistari (ujuzi gani unainuka kwanza) ukiwa sawa ingawa sio sawa kabisa. Uwasilishaji muhimu wa pili ungekuwa ramani ya joto inayoonyesha matriki ya uwiano wa mpangilio wa upatikanaji katika uchunguzi wote 96 kwa kundi la mifano dhidi ya mpangilio ulioonekana kwa watoto, ikionyesha vikundi vya uwiano wa juu na wa chini.

6. Uelewa Mkuu & Mtazamo wa Mchambuzi

Uelewa Mkuu: Karatasi hii inatoa utafiti muhimu, wenye undani: hatua za kujifunza lugha sio siri ya kipekee ya binadamu bali ni sifa inayojitokeza ya uboreshaji unaoongezeka, unaotokana na data chini ya vikwazo. Hata hivyo, mpango wa hatua hizo huandikwa pamoja na muundo wa asili wa mwanafunzi. GPT-2 na watoto hukubaliana kwenye mtaala "rahisi-hadi-changamani" kwa sababu data ina mtaala huo. Wanatofautiana kwenye maelezo kwa sababu "upendeleo wa kukisia" wa transformer (Vaswani et al., 2017) unatofautiana na misingi ya utambuzi na ufahamu wa mtoto wa kibinadamu.

Mtiririko wa Mantiki: Hoja imejengwa kwa ustadi. Huanza na ukweli thabiti wa kimajaribio (hatua zilizopangwa kwa watoto), huuliza swali la kompyuta (je, mpangilio huu unajitokeza katika AI?), na hutumia njia thabiti, yenye uchunguzi mwingi kuijaribu. Hatua ya kuonyesha "mpangilio upo" hadi kuchambua "asili yake ya sambamba" na hatimaye kuchambua vipengele "vinavyoshirikiwa/vinavyotofautiana" ina nguvu ya kimantiki. Inafanana na maendeleo ya uchambuzi katika kazi za msingi kama karatasi ya CycleGAN (Zhu et al., 2017), ambayo haikuwasilisha tu mfano mpya lakini pia ilitenganisha shida ya tafsiri ya picha isiyo na jozi katika vikwazo vya uthabiti wa mzunguko.

Nguvu & Kasoro: Nguvu ya utafiti huu ni ukali wa njia na uwezo wa kulinganishwa moja kwa moja. Kutumia mifano mingi na seti kubwa ya uchunguzi kunapunguza kelele. Kasoro kuu, iliyokubaliwa kwa njia isiyo wazi, ni kutofautiana kwa kipimo: uzalishaji kwa watoto dhidi ya usahihi wa uchunguzi wa ndani kwa mifano. Je, mfano "kujua" sheria ya kisintaksia katika uchunguzi kunalingana na mtoto "kuitumia" katika usemi wa hiari? Si lazima. Hii inafanana na ukosoaji wa viwango kama ImageNet ambapo mifano hujifunza njia za mkato (Geirhos et al., 2020). Kundi la uchunguzi, ingawa ni pana, huenda lisichukue kiini cha muunganisho, cha mawasiliano cha ushahidi wa lugha ya binadamu.

Uelewa Unaoweza Kutekelezwa: Kwa watafiti wa AI, hii ni mgodi wa dhahabu kwa kujifunza mitaala na uchunguzi wa mifano. Ikiwa tunataka mifano ijifunze kama watu, tunahitaji kubuni mlolongo wa data ya mafunzo au kazi za hasara zinazofanana zaidi na ratiba ya ukuzaji wa binadamu. Kwa wanasayansi wa utambuzi, kazi hii inatoa kituo kipya cha majaribio kinachoweza kubadilishwa: badilisha muundo wa mfano (k.m., ingiza miunganisho ya kurudia kama katika LSTM) au data ya mafunzo (k.m., ongeza mchango wa hali nyingi), na uone jinsi njia ya ukuzaji inavyobadilika. Hii inaweza kusaidia kutenganisha mchango wa upendeleo maalum wa kibinadamu. Uelewa wa mwisho ni kwamba kujenga AI bora na kuelewa utambuzi wa binadamu sasa ni juhudi moja, iliyounganishwa.

7. Matumizi ya Baadaye & Mwelekeo

  • Viwango vya Ukuzaji kwa AI: Unda viwango vya kawaida vya "hatua muhimu za ukuzaji" kwa LLM, ukiondoka kutoka kwa tathmini tuli hadi uchambuzi wa njia ya nguvu.
  • Ubunifu wa Mitaala Unaoeleweka: Tumia uelewa kutoka kwa ukuzaji wa watoto kuunda mpangilio wa data ya mafunzo kwa mafunzo ya mifano yenye ufanisi na uthabiti zaidi, kwa uwezekano wa kupunguza mahitaji ya data na kompyuta.
  • Ubunifu wa Muundo: Buni miundo mipya ya mtandao wa neva inayojumuisha upendeleo unaodhaniwa wa utambuzi wa kibinadamu (k.m., udumu wa kitu, ishara za malipo ya kijamii) ili kuona ikiwa zinasababisha njia za kujifunza zinazofanana zaidi na za kibinadamu.
  • Vifaa vya Kliniki: Unda mifano ya AI inayofuata njia zisizo za kawaida za kujifunza (kuiga matatizo ya ukuzaji wa lugha) ili kuzalisha dhana na kujaribu uingiliaji kati kwenye kompyuta.
  • Muunganisho wa Hali Nyingi: Panua utafiti huu kwa mifano ya hali nyingi (maono, sauti, maandishi). Je, hatua hujitokeza ambapo muunganisho wa hali nyingi (k.m., kujifunza maana ya maneno kutoka kwa muktadha wa kuona) hukabla au hufuata hatua za lugha tu, zikiiga kujifunza kwa mtoto mchanga?

8. Marejeo

  1. Evanson, L., Lakretz, Y., & King, J. (2023). Ushahidi wa lugha: je, watoto na mifano ya lugha hufuata hatua zinazofanana za kujifunza? arXiv preprint arXiv:2306.03586.
  2. Friedmann, N., Reznick, J., & et al. (2021). Mpangilio wa upatikanaji wa miundo ya kisintaksia: Utafiti wa watoto wanaozungumza Kiebrania. Ushahidi wa Lugha.
  3. Vaswani, A., Shazeer, N., Parmar, N., Uszkoreit, J., Jones, L., Gomez, A. N., ... & Polosukhin, I. (2017). Umakini ndio unachohitaji. Maendeleo katika mifumo ya usindikaji wa habari ya neva, 30.
  4. Zhu, J. Y., Park, T., Isola, P., & Efros, A. A. (2017). Tafsiri ya picha hadi picha isiyo na jozi kwa kutumia mitandao ya kupingana yenye mzunguko thabiti. Matukio ya mkutano wa kimataifa wa IEEE wa kompyuta ya kuona (ukur. 2223-2232).
  5. Geirhos, R., Jacobsen, J. H., Michaelis, C., Zemel, R., Brendel, W., Bethge, M., & Wichmann, F. A. (2020). Kujifunza kwa njia za mkato katika mitandao ya kina ya neva. Akili ya Mashine ya Asili, 2(11), 665-673.
  6. Radford, A., Wu, J., Child, R., Luan, D., Amodei, D., & Sutskever, I. (2019). Mifano ya lugha ni wanaojifunza wenye kazi nyingi bila usimamizi. Blogu ya OpenAI, 1(8), 9.
  7. Bowman, S. R., & Dahl, G. E. (2021). Itachukua nini kurekebisha viwango katika uelewa wa lugha asilia? Matukio ya Mkutano wa 2021 wa Tawi la Amerika Kaskazini la Chama cha Uchambuzi wa Lugha ya Kibinadamu: Teknolojia za Lugha ya Kibinadamu.