https://frosthead.com

Može li računalo stvarno ocjeniti esej?

U budućnosti kompjuteri će biti naši liječnici, naši vojnici, vatrogasci i naši učitelji. Dijagnosticirat će bolesti, njegovati naše bebe, štititi naše domove i podučavati našu djecu. Jedna tvrtka već razvija računalni program za ocjenjivanje eseja koji može skinuti opterećenje profesora i standardiziranih ispitnih grede. Ali može li računalo stvarno ocijeniti pomno izrađen esej?

Tvrtka, edX, to sigurno misli. Institucijama već nude internetske tečajeve, zajedno sa sustavom umjetne inteligencije koji će ocjenjivati ​​studentske eseje. John Markoff iz New York Timesa objašnjava:

Anant Agarwal, inženjer elektrotehnike koji je predsjednik EdX-a, predvidio je da će softver za trenutačno ocjenjivanje biti koristan pedagoški alat, koji će studentima omogućiti testiranje i pisanje eseja iznova i iznova te poboljšati kvalitetu svojih odgovora. Rekao je da će ta tehnologija pružiti različite prednosti u odnosu na tradicionalni sustav učionice, gdje studenti često čekaju dane ili tjedne na ocjene.

"Postoji ogromna vrijednost u učenju s trenutnim povratnim informacijama", rekao je dr. Agarwal. „Studenti nam kažu da puno bolje uče s trenutnim povratnim informacijama.“

Je li ta instant povratna informacija kvalitetna ili ne, drugo je pitanje. Skeptike ovih računalnih grejdera nije teško pronaći. Jedna grupa, koja sebe naziva „Profesionalci protiv strojnog bodovanja studentskih eseja“ u visokom ugledu, izdala je izjavu i prikuplja potpise da bi se izjasnila protiv predaje zadatka ocjenjivanja na računalo. Pišu:

Uočimo se u stvarnosti automatskog bodovanja eseja. Računala ne mogu „čitati“. Oni ne mogu, između ostalog, izmjeriti osnove učinkovite pisane komunikacije: točnost, obrazloženje, primjerenost dokaza, zdrav razum, etički stav, uvjerljiv argument, smislenu organizaciju, jasnoću i istinitost.

Peticija traži da se zakonodavci prestanu oslanjati na računala za ocjenjivanje i da škole prestanu kupovati u automatiziranim sustavima bodovanja.

Agarwal priznaje da bi softver mogao biti bolji i nada se da će biti bolji u razlikovanju dobrog eseja od osrednjeg. "Ovo je strojno učenje i treba preći dug put, ali dovoljno je dobar i napredak je ogroman", rekao je za New York Times . Također, kaže, onaj tko misli da su učitelji dosljedni, zavara se. "Otkrili smo da je kvaliteta ocjenjivanja slična varijaciji koju pronalazite od instruktora do instruktora."

Zapravo, neke studije sugeriraju da računala i učitelji nude istu varijabilnost u rezultatima. Jedna studija Marka Shermisa sa Sveučilišta u Akronu zaključila je da je "automatsko bodovanje eseja bilo sposobno stvoriti rezultate slične ljudskim rezultatima za pisanje predmeta s produženim odgovorom s jednakim performansama i za izvorni i za tradicionalni žanr pisanja." Shermisova studija, međutim, nikada nije objavljen u časopisu, a drugi su istraživači doveli u pitanje njegove tvrdnje. Les C. Perelman s MIT-a napisao je odgovor na rad u Shermisu, napisavši da „pomno ispitivanje metodologije rada i korištenih skupova podataka pokazuje da takvu tvrdnju ne podržavaju podaci u studiji“.

Skupina profesionalaca također navodi nekoliko radova koji sugeriraju da računala nisu tako dobra kao učitelji u ocjenjivanju učenika.

Najvjerojatnije, ovo je pitanje jesu li ova računala dovoljno dobra za ocjenjivanje ili ne, hoće li ih ikada biti. Ali nisu samo nastavnici oni koji će dobiti više visoke tehnologije, nego i studenti. Ako studenti nauče što program traži, jednostavno bi mogli sami napisati program da bi zauzvrat napisali savršen esej na temelju specifikacija softvera. Možda će u budućnosti računalni učitelji ocjenjivati ​​računalne studente.

Više sa Smithsonian.com:

Estonija podučava 100 posto svojih prvih razreda da se šifriraju
Podučavanje policajaca da vide

Može li računalo stvarno ocjeniti esej?