DREsS: Cikakken Bayanan Rubutu don Ƙididdigar Rubutu ta Atomatik bisa Rubutu a Ilimin EFL

1. Gabatarwa & Bayyani

Ƙididdigar Rubutu ta Atomatik (AES) ta zama kayan aiki mai mahimmanci a ilimin Turanci a matsayin Harshen Waje (EFL), tana alƙawarin ba da ra'ayi nan take da kuma ƙididdiga mai fa'ida. Duk da haka, amfani da ita a aikace ya sha wahala saboda wani babban cikas: rashin ingantattun bayanan horo, masu dacewa da ilimin koyarwa. Yawancin bayanan da ake da su, kamar bayanan ASAP da ake amfani da su sosai, suna ba da maki gaba ɗaya kawai ko kuma masana ba su yi lakabin su ba, suna kasa ɗaukar ƙididdiga mai zurfi da yawa da ake buƙata a cikin ainihin yanayin aji. Wannan gibi tsakanin ma'aunin bincike da aikin ilimi yana iyakance haɓakar ingantattun tsarin AES na gaske.

Wannan takarda ta gabatar da DREsS (Bayanan Rubutu don Ƙididdigar Rubutu bisa Rubutu akan Rubuce-rubucen EFL), cikakken albarkatun da aka tsara don rage wannan gibi. DREsS tana magance manyan iyakokin aikin da ya gabata ta hanyar samar da babban bayanan rubutu, wanda masana suka yi lakabi, kuma ya dace da rubutu musamman don yanayin EFL.

Jimlar Samfura

48.9K

Rubuce-rubucen Aji na Gaske

2,279

Ribar Aiki

+45.44%

tare da haɓakawar CASE

2. Bayanan DREsS

An tsara DREsS a matsayin bayanan rubutu mai kashi uku, kowane ɓangare yana aiki da wata manufa ta musamman wajen gina ƙaƙƙarfan samfurin AES.

2.1 DREsS New: Bayanan Aji na Gaske

Tushen DREsS shine DREsS New, wanda ya ƙunshi rubuce-rubuce 2,279 da ɗaliban jami'a na EFL suka rubuta. Masana ilimin Turanci ne suka ƙididdige waɗannan rubuce-rubucen ta amfani da daidaitattun rubutu mai fuskoki uku:

Abubuwan Ciki: Dacewa, haɓakawa, da zurfin ra'ayoyi.
Tsari: Tsari na hankali, haɗin kai, da sakin layi.
Harshe: Nahawu, ƙamus, da fasahar rubutu.

Wannan bayanan yana ba da ma'auni na zinariya don horar da samfuri da kuma ƙididdiga, yana nuna ainihin kurakuran ɗalibai da ayyukan ƙididdiga na masana.

2.2 DREsS Std.: Ma'auni Daidaitattun

Don tabbatar da kwatancen da kuma faɗaɗa tafkin bayanai, marubutan sun ƙirƙiri DREsS Std. ta hanyar haɗawa da daidaita wasu bayanan AES na jama'a da ake da su (ASAP P7, P8; ASAP++ P1, P2; ICNALE EE). Wannan ya haɗa da sanya ainihin rubutunsu, waɗanda galibi ba su da daidaituwa, a kan tsarin haɗin gwiwa na Abubuwan Ciki, Tsari, da Harshe. DREsS Std. ya ƙara samfura 6,515 da aka daidaita, yana ba da muhimmiyar hanyar haɗi tsakanin binciken da ya gabata da sabon tsarin ƙididdiga bisa rubutu.

2.3 DREsS CASE: Haɓakawar Ƙirƙira

Wani sabon abu mai mahimmanci shine DREsS CASE (Dabarar Haɓakawa bisa Lalata don Rubuce-rubuce), bayanan rubutu na ƙirƙira mai samfura 40,185. CASE yana amfani da dabarun lalata na musamman don rubutu don ƙirƙirar nau'ikan rubutu masu "ƙarancin inganci" masu ma'ana daga bayanan da ake da su, yana faɗaɗa bambancin saitin horo da kuma iyakar wahala yadda ya kamata. Misali, yana iya gabatar da kurakurai na hankali (lalata Abubuwan Ciki) ko kuma rushe jimlolin canji (lalata Tsari). Wannan hanyar ta haifar da ingantacciyar haɓakar aiki na 45.44% a cikin aikin samfurin tushe, yana nuna ƙarfin haɓakar bayanai da aka yi niyya.

3. Tsarin Fasaha & Hanyoyin Aiki

3.1 Daidaita Rubutu

Tushen amfanin DREsS yana cikin tsarinsa mai daidaitaccen rubutu mai fuskoki uku. Daidaita bayanan da ba su da daidaituwa ya ƙunshi tsari mai zurfi na tuntuɓar masana don sanya ainihin maki (misali, maki guda ɗaya na "salo") a kan fuskokin Abubuwan Ciki, Tsari, da Harshe. Wannan yana haifar da harshen ƙididdiga gama gari don samfuran AES, yana wucewa fiye da maki gaba ɗaya kamar waɗanda ke cikin ainihin bayanan ASAP (Tambayoyi 1-6).

3.2 Dabarar Haɓakawar CASE

Hanyar CASE injin lalata ne bisa ƙa'ida. Ga kowane fanni na rubutu, ana amfani da takamaiman ƙa'idodin canzawa ga ainihin rubuce-rubuce don samar da takwarorinsu masu ƙananan maki. A lissafi, idan ainihin rubutu $E$ yana da vector maki $S = (s_c, s_o, s_l)$ don abubuwan ciki, tsari, da harshe, CASE yana haifar da rubutu da aka lalata $E'$ tare da manufar ƙananan vector maki $S' = (s'_c, s'_o, s'_l)$, inda $s'_i \leq s_i$. Ayyukan lalata $f_i$ suna da takamaiman fanni:

Abubuwan Ciki: $f_c(E)$ na iya maye gurbin manyan hujjoji da maganganun da ba su dace ba ko masu cin karo da juna.
Tsari: $f_o(E)$ zai iya bazuwar tsarin sakin layi ko cire na'urorin haɗin kai.
Harshe: $f_l(E)$ na iya gabatar da kurakuran nahawu ko zaɓin kalmomi marasa dacewa.

Wannan lalacewar da aka sarrafa yana haifar da ingantaccen bakan ingancin rubutu, yana ba da damar samfuran su koyi ƙarin ƙaƙƙarfan siffofin sifa don ƙididdiga.

4. Sakamakon Gwaji & Aiki

Takardar ta kafa ƙaƙƙarfan tushe ta amfani da samfuran koma baya (misali, Masu Koma baya na Tallafawa Vector) da gine-ginen jijiyoyi (misali, LSTMs, samfuran tushen BERT) da aka horar da su akan abubuwan DREsS. Manyan binciken sun haɗa da:

Samfuran da aka horar da su kawai akan DREsS New (bayanan gaske) sun nuna ingantaccen daidaito akan wannan saitin gwaji amma suna da iyakacin yaduwa zuwa wasu tambayoyi, suna nuna buƙatar bayanai iri-iri.
Haɗawa da DREsS Std. ya inganta ƙarfin juriya na ƙetare tambayoyi ta hanyar fallasa samfuran ga nau'ikan rubuce-rubuce da batutuwa iri-iri.
Haɗawa da DREsS CASE ya ba da haɓaka mafi mahimmanci, yana rage kuskuren murabba'i na matsakaita (MSE) da kashi 45.44% idan aka kwatanta da tushen da aka horar da shi kawai akan bayanan gaske. Wannan yana jaddada ƙimar bayanan ƙirƙira wajen koyar da samfuran don gane bambance-bambancen inganci, musamman ga ƙananan maki waɗanda ƙila ba su da wakilci sosai a cikin tarin rubuce-rubucen ɗan adam.

Fassarar Hoto & Tebur: Teburin ƙididdiga na bayanan da aka bayar (Tebur 1 a cikin PDF) yana nuna tsari da ma'aunin DREsS a sarari. Taswirar sandar (Hoto 1) tana nikin tsarin ginin ɓangarori uku yadda ya kamata, tana mai da hankali cewa CASE yana samar da mafi girman adadin bayanai, wanda aka mai da hankali bisa dabarun akan rubutun Tsari (samfura 31,086), mai yiwuwa saboda kurakuran tsari sun zama ruwan dare a rubuce-rubucen EFL kuma suna dacewa da kwaikwayi bisa ƙa'ida.

5. Tsarin Bincike & Nazarin Lamari

Tsarin don Ƙididdigar Bayanan AES: Lokacin tantance sabon bayanan AES kamar DREsS, masu bincike da masu aiki ya kamata su bincika ginshiƙai huɗu: Ingancin Ilimin Koyarwa (lakabi na masana, rubutu masu dacewa), Amfanin Fasaha (ma'auni, daidaito, ma'anar aiki), La'akari da Da'a & Aiki (asalin bayanai, son zuciya, lasisi), da Ƙirƙira (sabbin hanyoyin aiki kamar CASE).

Nazarin Lamari: Aiwatar da Tsarin akan DREsS

Ingancin Ilimin Koyarwa: Mai girma. DREsS New ya samo asali ne daga ainihin azuzuwan EFL kuma masana suka ƙididdige shi ta amfani da daidaitaccen rubutu mai fuskoki uku, yana daidaitawa kai tsaye da manufofin koyarwa.
Amfanin Fasaha: Mai girma. Tare da jimlar samfura ~49K da daidaitattun rubutu, yana da girma kuma ya isa don horar da samfuran NLP na zamani. Rarrabe shi zuwa ayyukan ƙididdiga uku yana ba da damar haɓaka samfuri mai zurfi.
La'akari da Da'a & Aiki: Matsakaici zuwa Mai girma. Bayanan ɗalibai na gaske an samo su cikin da'a, kuma bayanan suna samuwa ga jama'a, suna haɓaka sake yin samfurin. Wani iyaka mai yuwuwa shine mayar da hankali kan takamaiman al'ummar ɗalibai (ɗaliban jami'a na Koriya), wanda zai iya shafar yaduwa.
Ƙirƙira: Mai girma. Dabarar haɓakawar CASE sabuwar gudummawa ce mai tasiri a fagen haɓakar bayanan ilimi.

Wannan tsarin ya tabbatar da DREsS a matsayin ingantaccen albarkatu mai ƙirƙira wanda ke haɓaka fagen sosai.

6. Bincike Mai Zurfi & Ra'ayi na Masana'antu

Fahimta ta Asali: DREsS ba wani bayanan rubutu kawai ba ne; yana da wani shiri na shiga tsakani wanda ke sake mayar da binciken AES kan amfanin ilimin koyarwa fiye da aikin ma'auni. Ta hanyar ba da fifiko ga ƙididdiga bisa rubutu daga masu lakabin masana, marubutan suna tilasta wa al'ummar NLP gina samfuran da malamai za su amince da su da gaske. Wannan canji yayi daidai da babban yanayin AI zuwa tsarin da suka dace da ɗan adam da na takamaiman yanki, kamar yadda aka gani a ƙoƙarin sanya samfuran su zama masu fassara da adalci.

Kwararar Hankali & Matsayin Dabarun: Hankalin takardar ba shi da aibi. Ya fara da gano cutar fagen (rashin aiki mai amfani, bayanan rubutu), ya ba da magani mai ɓangarori uku (New, Std., CASE), kuma ya ba da cikakkiyar shaida na tasiri (riba 45.44%). Haɗawa da DREsS Std. yana da wayo musamman—ba ya jefar da aikin da ya gabata amma yana haɗa shi kuma ya daidaita shi, yana tabbatar da dacewa nan take da kuma sauƙaƙa karɓar masu binciken da suka saba da ASAP. Wannan yana haifar da ingantacciyar hanyar haɓakawa ga dukan tsarin bincike.

Ƙarfi & Kurakurai: Babban ƙarfi shine cikakkiyar mafita: bayanan gaske, daidaitattun bayanan gado, da sabbin bayanan ƙirƙira. Hanyar CASE, ko da yake mai sauƙi, tana da inganci kuma ana iya bayyana shi—abin alfahari idan aka kwatanta da haɓakar AI na "akwatin baƙi". Babban aibi, duk da haka, shine na iyaka. Aikin samfurin da haɓakar CASE suna da alaƙa sosai da zaɓaɓɓen tsarin rubutu mai fuskoki uku. Me game da ƙirƙira, ƙarfin hujja, ko rubuce-rubucen takamaiman fanni (misali, rahotannin kimiyya)? Kamar yadda Majalisar Ƙwararrun Malaman Turanci ta bayyana, ƙididdigar rubutu yana da fuskoki da yawa. DREsS ya warware wani muhimmin yanki amma yana iya tabbatar da kunkuntar ra'ayi game da ingancin rubutu idan aka karɓe shi ba tare da bincike ba.

Fahimta Mai Aiki: Ga kamfanonin EdTech, wannan tsari ne. Zuba jari a cikin ƙirƙirar irin wannan bayanan da masana suka yi lakabi, na musamman ga rubutu don wasu harsuna ko batutuwa (misali, ayyukan coding, rubuce-rubucen shari'a) na iya zama babban katanga. Ga masu bincike, umarni a bayyane yake: daina daidaita akan maki gaba ɗaya na ASAP. Yi amfani da DREsS a matsayin sabon tushe. Bugu da ƙari, bincika faɗaɗa tsarin CASE—shin ana iya koyon irin waɗannan samfuran lalata ta atomatik ta hanyar dabarun adawa, kamar yadda aka bincika a wasu fagagen koyon injin? Haɓakar 45.44% bene ne, ba rufi ba.

7. Aikace-aikace na Gaba & Hanyoyin Bincike

DREsS yana buɗe hanyoyi masu ban sha'awa da yawa don aikin gaba:

Samar da Ra'ayi Na Musamman: Samfuran da aka horar akan DREsS ana iya faɗaɗa su fiye da ƙididdiga don samar da takamaiman ra'ayi mai dacewa da rubutu (misali, "Hujjar ku a sakin layi na biyu ba ta da goyon baya" don Abubuwan Ciki).
Canja Harshe: Bincika ko samfuran da aka horar akan DREsS za a iya daidaita su don ƙididdige rubuce-rubuce daga ɗalibai masu asalin harshe daban-daban, mai yiwuwa ta amfani da fasahohi daga NLP na harsuna da yawa.
Haɗawa da Tsarin Koyarwa Mai Hikima (ITS): Shigar da samfuran AES da aka horar da DREsS cikin ITS don samar da ƙididdiga na yau da kullun, mai tsari yayin tsarin rubutu, ba kawai maki na ƙarshe ba.
Bincika Haɓakawa Mai Zurfi: Matsawa fiye da lalata bisa ƙa'ida (CASE) zuwa amfani da manyan samfuran harshe (LLMs) don ƙarin ƙirƙira mai zurfi, mai sane da mahallin na bambance-bambancen rubutu a matakan inganci daban-daban, yayin sarrafa son zuciya a hankali.
Faɗaɗa Saitin Rubutu: Haɗin gwiwa tare da masana ƙididdiga don ayyana da tattara bayanai don ƙarin rubutu, kamar Sanin Masu Sauraro ko Tasirin Magana, ƙirƙirar ƙarin cikakkun bayanai.

8. Nassoshi

Yoo, H., Han, J., Ahn, S., & Oh, A. (2025). DREsS: Dataset for Rubric-based Essay Scoring on EFL Writing. arXiv preprint arXiv:2402.16733v3.
Shermis, M. D., & Burstein, J. (Eds.). (2013). Handbook of automated essay evaluation: Current applications and new directions. Routledge. (Babban bayyani na fagen AES).
National Council of Teachers of English (NCTE). (2022). Matsayin Matsayi akan Ƙididdigar Injiniya da Ƙididdigar Rubutun ɗalibi. (Yana nuna damuwa na ɗabi'a da ilimin koyarwa tare da AES gaba ɗaya).
Taghipour, K., & Ng, H. T. (2016). Hanyar Jijiyoyi zuwa Ƙididdigar Rubutu ta Atomatik. Proceedings of the 2016 Conference on Empirical Methods in Natural Language Processing (EMNLP). (Misali na tushen jijiyoyi don AES gaba ɗaya).
Zhu, J. Y., Park, T., Isola, P., & Efros, A. A. (2017). Fassarar Hoton zuwa Hoton mara Biyu ta amfani da Cibiyoyin Sadarwar Adawa na Zagaye-Daidai. Proceedings of the IEEE International Conference on Computer Vision (ICCV). (Takarda mai tasiri akan fassarar bayanai marasa biyu, mai kama da ƙalubalen haɓakar bayanai a cikin AES).
Kaggle. (2012). Gidauniyar Hewlett: Ƙididdigar Rubutu ta Atomatik. Bayanan ASAP. (Tushen ma'aunin ASAP da ake amfani da shi sosai).