Cum să evaluați lucrările cu ajutorul inteligenței artificiale

Smodin este cel mai important evaluator AI din lume, după ce a evaluat sute de mii de lucrări. Evaluatorii AI devin încet-încet noul standard în educație: Acestea oferă un feedback imparțial și informații detaliate despre fiecare aspect al unei lucrări, oferă o scară de notare consecventă și ușurează sarcina profesorilor, permițându-le să se concentreze asupra predării. Aici vom analiza modul în care AI Grader de la Smodin poate fi utilizat pentru a evalua una sau o întreagă clasă de lucrări.

Aug 31, 2023 - 5 min citește

Mai întâi, alegeți un tip de grad

Alegeți dintr-o listă de tipuri diferite de lucrări pentru evaluare. Începând cu luna august, sunt disponibile doar tipuri de lucrări de eseu, care pot fi utilizate și pentru diferite tipuri de scrieri deschise. În septembrie vom oferi, de asemenea, un clasificator de întrebări științifice și un clasificator de răspunsuri scurte. Mai multe tipuri de evaluare vor fi adăugate periodic pe parcursul anului 2023.

Adăugați informații despre atribuire

Alegeți informații legate de clasă și de sarcină, cum ar fi nivelul clasei, setarea inteligenței AI, tipul sarcinii și orice alte informații relevante.

Ce setări AI ar trebui să folosesc?

În timp ce AI standard produce feedback de calitate, dacă intenționați să utilizați rezultatul AI Grader pentru rezultatele finale ale performanței academice, trebuie să utilizați setările avansate. Numai setările noastre avansate ale AI au reușit să obțină o acuratețe de 82% față de rezultatele umane, să producă feedback de cea mai înaltă calitate și este puțin probabil să clasifice greșit lucrările față de nota lor reală.

Alegeți criteriile de evaluare sau încărcați propriile criterii

Pentru a standardiza procesul de notare, trebuie utilizată o rubrică pentru a avea criterii obiective pe care se bazează evaluarea unei note. O rubrică este o colecție de criterii care generează fiecare o notă, de exemplu, "gândire critică", "gândire analitică", "organizare", "gramatică" etc. Atunci când vă alegeți criteriile de notare, puteți selecta din criteriile noastre predefinite, puteți crea propriile criterii sau le puteți încărca pe cele pe care le utilizați deja.

Alegerea criteriilor

Criterii prestabilite

Criteriile predefinite sunt criterii care sunt acceptate pe scară largă în mai multe discipline academice pentru a evalua nota unui student. Acestea au fost generate prin testarea riguroasă a notelor noastre umane pe parcursul a sute de teste de atribuire. Acestea produc note fiabile și consecvente pentru metricile respective.

Crearea de criterii personalizate

Criteriile personalizate sunt criterii pe care decideți să le utilizați pentru evaluarea notelor într-un interval specificat (valoarea implicită este 1-10). Criteriile personalizate pot fi generate folosind doar o descriere simplă sau pornind de la o rubrică existentă. Un exemplu de intrare pentru crearea unor criterii personalizate numite "Gândire critică" ar putea fi "Gândirea critică este definită ca fiind eficiența cu care subiectele, conceptele și ideile prezente în eseu sunt conectate logic între ele și cât de bine oferă argumente pentru și împotriva fiecăruia dintre ele.". Aceasta ar produce, din partea noastră, o măsură de evaluare 1-10.

De asemenea, puteți utiliza rubrici existente. După ce ne furnizați o rubrică existentă (pentru orice interval sub 10), luăm acea rubrică și o modificăm pentru a fi utilizată de modelul nostru de clasificare AI într-un mod care poate oferi note fiabile, coerente și obiective. Deși nu este necesar să vă modificați rubricile, dacă faceți ca rubricile dvs. să fie cât mai clare posibil, AI-ul nostru va produce cele mai fiabile rezultate de notare.

Crearea unei rubrici

Rubricile sunt o colecție de criterii. De exemplu, rubrica dvs. ar putea fi "Eseu de istorie despre cel de-al Doilea Război Mondial", care include lista criteriilor pe care le utilizați pentru a nota eseul de istorie. Atunci când creați o rubrică, adăugați un nume și o scurtă descriere (doar pentru referință).

În continuare, adăugați criteriile fie prin încărcarea unei rubrici existente sub formă de foaie de calcul (vom analiza fișierul pentru a determina criteriile), fie prin alegerea individuală a criteriilor. Dacă încărcați o rubrică, asigurați-vă că ați verificat de două ori dacă a fost analizată corect, apăsând butonul "edit" pentru fiecare criteriu pentru a vedea detaliile acestuia.

Adăugați atribuții (s)

Puteți evalua o singură lucrare sau un grup masiv de lucrări. O singură lucrare va fi notată în timp real, însă un grup de lucrări va fi notat pe rând, la o rată de o lucrare la 2-5 minute, în funcție de încărcarea sistemului. Acest lucru ajută la asigurarea faptului că fiecare lucrare este notată cu succes.

Încărcarea lucrărilor elevilor

Atunci când încărcați lucrările elevilor, asigurați-vă că titlul este primul rând al fișierului, iar conținutul (în mod ideal, fără referințe) este pe un rând nou după titlu. Numele fișierului va fi numele fișierului de note. Se recomandă utilizarea unui identificator al studentului, cum ar fi un ID precum "stu1083723", în loc de numele personal al studentului.

Note de revizuire

Nota finală este calculată pe o scală standard A-F, A reprezentând 90-100%, B 80-89%, C 70-79%, D 60-69% și F 59% și mai puțin. Nota totală este calculată ca medie pară a notelor criteriilor sau în funcție de rubrica specifică (dacă este cazul).

Aveți posibilitatea să editați notele finale dacă doriți (această funcționalitate de editare va fi lansată la începutul lunii septembrie), să descărcați nota sau să descărcați întregul set de note din vizualizarea Trimitere în vrac.

Disclaimer: Imaginile de mai sus pot fi neactualizate, deoarece interfața de utilizator Smodin suferă îmbunătățiri constante.