Kağıt Sınavlardaki Açık Uçlu ve Kompozisyon Soruları için Yapay Zeka Değerlendirmesi

Oscar Munoz Oscar Munoz · · 11 dakika okuma

Çoktan seçmeli sorular kendini notlandırır: bir optik okuyucu işaretleri okur ve puan saniyeler içinde ortaya çıkar. Her kâğıt sınavdaki asıl zaman alan kısım, açık uçlu bölümdür - öğretmenin tek tek okuyup, deşifre edip puanlaması gereken kısa cevaplar, tanımlar, işlemli problemler ve mini denemeler. Bu kılavuz, açık uçlu soruların yapay zeka ile notlandırılmasının nasıl çalıştığını, ICR el yazısı tanımanın ne olduğunu ve FormRead'in her ikisini birleştirerek kâğıt sınavı tarayıp her el yazısı cevap için taslak bir puan ve yazılı geri bildirim almanızı nasıl sağladığını açıklar.

FormRead'te açık uçlu bir sınav sorusunun yapay zeka değerlendirmesi: el yazısı cevap, yazılı geri bildirimle birlikte bir rubriğe göre puanlanır.

Açık Uçlu Soruların Notlandırılması Neden Bu Kadar Yavaş (ve Tutarsız)

Kısa cevaplı soru yığınını elle notlandırmanın üç yerleşik sorunu vardır. Birincisi, hacim: 100 öğrencinin her sınavında 30 el yazısı cevabı okumak, 3,000 bireysel yargı anlamına gelir; her biri, içerik hakkında düşünmeden önce el yazısını deşifre etmenizi gerektirir. İkincisi, kayma: insan puanlaması üzerine yapılan araştırmalar, yorgunluk arttıkça puanlayıcıların daha katı veya daha yumuşak davrandığını ve iki puanlayıcının aynı sınırda cevap üzerinde sıklıkla anlaşamadığını uzun zamandır göstermektedir. Üçüncüsü, geri bildirim: bu kadar çok hacimle, öğrencilerin çoğu kaçırdıklarının açıklaması yerine bir sayı ve bir onay işareti alır.

Kısa yazılı bir cevap anlayışı daha iyi sınayacakken birçok sınavın bu kadar ağırlıklı olarak çoktan seçmeliye dayanmasının nedeni tam olarak budur. Darboğaz asla pedagoji değildi - notlandırma süresiydi. Yapay zeka deneme notlandırma yazılımı bu darboğaza doğrudan saldırır.

OCR ve ICR Karşılaştırması: Basılı Metni Okumak Kolaydır, El Yazısını Okumak Zordur

Bir algoritma el yazısı cevabı notlandırmadan önce onu okumak zorundadır. OCR ve ICR arasındaki ayrımın önemli olduğu yer burasıdır. OCR (Optik Karakter Tanıma), basılı, dizgi metni okur - yazıcıdan tutarlı bir fontla çıkan tür. ICR (Akıllı Karakter Tanıma) daha zor bir problemdir: her yazarın harfleri farklı şekillendirdiği, kelimelerin üstünü çizdiği, metni kenar boşluklarına sıkıştırdığı ve karakterleri öngörülemez şekilde birleştirdiği insan el yazısını okumak.

Klasik ICR motorları kısıtlı girdiyle eğitilmişti - karakter başına bir kutu, yalnızca büyük harfler - bu yüzden eski formlar adınızı küçük kareler içine yazdırırdı. Modern yapay zeka görü modelleri bunu değiştirdi. Gerçek dünyadaki el yazılarından oluşan devasa veri kümeleriyle eğitildikleri için, dağınık, bitişik eğik öğrenci yazılarını bağlam içinde yazıya dökebilirler: eğer bir kelime belirsizse, model tıpkı bir insan okuyucu gibi, çevreleyen cümleyi ve sorunun kendisini kullanarak bunu çözer. Bu teknoloji üzerine inşa edilmiş bir ICR el yazısı tarayıcısı artık kutulara veya büyük harflere ihtiyaç duymaz - cevabı sayfada yazıldığı gibi okur.

Bir Bakışta Dört Okuma Teknolojisi

Teknoloji Ne Okuduğu Sınavda Tipik Kullanım
OMR Doldurulmuş baloncuklar ve onay kutuları - karakter değil, işaretler Çoktan seçmeli cevaplar, doğru/yanlış, Likert ölçekleri
OCR Tutarlı yazı tiplerinde basılı, dizgi metin Önceden basılmış öğrenci kimlikleri, form etiketleri, daktilo edilmiş içerik
ICR İnsan el yazısı, bitişik ve dağınık yazı dahil El yazısı isimler, kısa cevaplar, yazılı yanıtlar
AI notlandırması Yazıya dökülen cevabın anlamı, bir dereceli puanlama anahtarına göre değerlendirilir Kısa cevaplı ve kompozisyon soruları: puan artı yazılı geribildirim

Baloncuk okuma sizin için yeniyse, açıklayıcımız işlem hattının işaretler tarafını derinlemesine ele alıyor: Optik İşaret Tanıma (OMR) nedir ve nasıl çalışır?

FormRead'te Rubrik Tabanlı AI Notlandırması Nasıl Çalışır

FormRead, açık uçlu bir soruyu tıpkı bir baloncuk ızgarası veya barkod gibi kağıt formunuzda bir bölge olarak ele alır. Doldurulmuş bir sınav tarandığında, işlem hattı sayfa görüntüsünden tam olarak o el yazısı cevap bölgesini kırpar ve formu oluştururken tanımladığınız iki şeyle birlikte bir AI görü modeline gönderir: beklenen cevap (veya rubrik) ve sorunun değerindeki puan sayısı.

Model tek geçişte üç iş yapar. El yazısını yazıya döker (ICR adımı), öğrencinin yazdığının anlamını rubriğinizle karşılaştırır - sadece anahtar kelimeleri değil, böylece farklı ifade edilmiş doğru bir cevap yine de kredi kazanır - ve bir puan ile bu puanın neden verildiğine dair kısa bir yazılı açıklama taslağı hazırlar. Sonuç, orijinal el yazısının kırpılmış görüntüsünün yanında inceleme ekranınıza gelir, böylece hem yazıya dökümü hem de yargıyı bir bakışta doğrulayabilirsiniz.

FormRead'te ICR el yazısı tanıma: taranmış sınav bölgesinin yanında gösterilen bir öğrenci cevabının yapay zeka transkripsiyonu.

Döngüdeki İnsan: AI Taslaklar, Öğretmen Karar Verir

FormRead'de AI notlandırması, kasıtlı olarak nihai notlar veren bir kara kutu değildir. AI, sizin incelediğiniz bir puan taslağı oluşturur: her notlandırılmış cevap, QA görünümünde kırpılmış el yazısı, transkripsiyon, önerilen puan ve geri bildirim metniyle birlikte görünür. Tek tıklamayla kabul edebilir veya herhangi bir şey dışa aktarılmadan veya öğrenciye gösterilmeden önce puanı ve geri bildirimi geçersiz kılabilirsiniz. Uygulamada, yavaş okuma ve ilk geçiş değerlendirmesini AI yapar ve yetki sizde kalır - ki bu aynı zamanda çoğu kurumsal değerlendirme politikasının beklediği düzenlemedir.

Ne Kadar Doğruluk Beklemelisiniz?

Sabit bir doğruluk yüzdesi vaat eden herhangi bir AI kompozisyon notlandırma yazılımına şüpheyle yaklaşın - gerçek dünya sonuçları el yazısı okunaklılığı, tarama kalitesi, soru türü ve rubriğinizin ne kadar hassas yazıldığına bağlıdır. Açık bir beklenen cevabı olan (“Fransa'nın başkentini adlandırın, 1 puan”) olgusal kısa bir cevap, nüanslı iki paragraflık bir argümandan çok daha güvenilir bir şekilde notlandırmak için kolaydır. Dürüst rehberliğimiz: AI transkripsiyonu çoğu sıradan öğrenci el yazısını iyi işler, taslak puanlar somut rubrikleri olan sorularda en güçlüdür ve QA inceleme adımı, ara sıra yanlış okunan kelime veya tartışmalı yargının bir öğrencinin notuna itiraz etmesiyle değil, sizin tarafınızdan yakalanması için tam olarak vardır.

Kaliteyi belirgin şekilde artıran iki pratik ipucu: rubriği bir yedek öğretmene açıklayacağınız gibi yazın (tam kredi kazandıranı, kısmi kredi kazandıranı belirtin) ve kırpılmış cevap bölgesi net olacak şekilde makul çözünürlükte ve eşit aydınlatma ile tarayın.

Bu hafta bir yığın sınav mı notlandırıyorsunuz? FormRead'i denemek ücretsizdir - cevap kağıdınızı oluşturun, telefonunuzla tarayın ve AI'nın sizin için açık uçlu puanları taslak olarak oluşturmasına izin verin.

FormRead'i ücretsiz kullanmaya başlayın

FormRead vs Gradescope vs Manuel Notlandırma

Gradescope (Turnitin tarafından), yardımlı notlandırmada en iyi bilinen isimdir ve üniversite dersleri, yazılı veya taranmış gönderimler ve bir notlandırıcının aynı anda birçok cevabı işaretleyebilmesi için benzer cevapları gruplandırma gibi amaçlandığı şeyde gerçekten iyidir. AI yardımı kümeleme ve rubrik uygulamasına odaklanır ve iş akışları bir eğitmen artı asistan kurulumunu varsayar. Ayrıca bireysel öğretmenler yerine kurumlar için fiyatlandırılmıştır.

FormRead, soruna kağıt öncelikli yaklaşır. Tüm sınavın - baloncuklar, öğrenci kimlik barkodları ve el yazısı cevap alanları - tek bir basılı sayfada yer aldığı, telefon veya herhangi bir tarayıcıyla tarayabileceğiniz ücretsiz bir çevrimiçi OMR platformudur. Yapay zeka, açık uçlu her cevap için rubriğinize göre otomatik olarak metne döker ve taslak puan oluşturur, siz QA görünümünde inceler ve sonuçlar Excel veya CSV'ye aktarılır. Kısa cevaplı soruları kendi sisteminizde otomatik olarak puanlamanız gerekiyorsa, aynı işlem hattı HTTP üzerinden kullanılabilir - bkz. sunucu taraflı form işleme API kılavuzu toplu uç noktası ve kod örnekleri için.

Ve tamamen manuel puanlamayla karşılaştırıldığında? Son söz yine size ait - fark, mekanik okumayı ve ilk geçiş puanlamasını sizin yapıp yapmamanız veya her cevap için hazır bir puan ve geri bildirimle başlamanızdır.

Adım Adım: FormRead'de Yapay Zeka Puanlamasını Kurma

  1. 1

    Sınav kağıdınızı tasarlayın

    FormRead düzenleyicisinde, çoktan seçmeli balon ızgaralarınızı her zamanki gibi yerleştirin, ardından öğrencilerin cevap yazacağı her alanın üzerine bir açık uçlu soru alanı çizin.

  2. 2

    Sorulara göre rubrik tanımlayın

    Her açık uçlu alan için, beklenen cevabı veya puanlama kriterlerini ve maksimum puanı girin. Kısmi krediyi neyin kazandırdığını açıkça belirtin - yapay zeka rubriğinize uyar, bu nedenle daha net kriterler daha iyi taslaklar üretir.

  3. 3

    Yazdırın ve sınavı verin

    Standart kağıda yazdırın. Öğrenciler çoktan seçmeli bölümde baloncukları işaretler ve açık uçlu cevaplarını işaretli alanlarda koyu bir kalem veya kurşun kalemle el yazısıyla yazarlar.

  4. 4

    Doldurulmuş sayfaları tarayın

    Her sayfayı telefon kameranızla yakalayın veya tarayıcı görüntüleri yükleyin. FormRead baloncukları anında okur ve kırpılmış her el yazısı alanını yapay zekaya gönderir, bu da bir transkripsiyon, taslak puan ve yazılı geri bildirim döndürür.

  5. 5

    QA görünümünde inceleyin ve dışa aktarın

    Orijinal el yazısının yanında taslak puanları adım adım inceleyin, katılmadığınız herhangi bir puanı veya geri bildirimi geçersiz kılın, ardından birleşik çoktan seçmeli ve açık uçlu sonuçları Excel veya CSV'ye aktarın.

FormRead'te açık uçlu soruların otomatik OMR ve yapay zeka değerlendirmesi için bir telefonla kağıt sınav tarama.

Sonuç Olarak

Açık uçlu sorular, bir sınavın en değerli kısmıdır ve tarihsel olarak puanlaması en pahalı olanıdır. Modern ICR el yazısı tanıma ile rubrik tabanlı yapay zeka puanlaması ekonomiyi değiştirir: makine okur ve taslak oluşturur, siz inceler ve karar verirsiniz ve öğrenciler çıplak bir sayı yerine gerçek yazılı geri bildirim alırlar. Sınavlarınız hala sadece puanlama süresinden tasarruf etmek için tamamen çoktan seçmeliyse, bu kısıtlama artık yok.

Açık Uçlu Soruların Yapay Zeka ile Puanlanması: SSS

Yapay zeka gerçekten dağınık öğrenci el yazısını okuyabilir mi?

Çoğu durumda evet. Modern AI görüntü modelleri, büyük miktarda gerçek el yazısı üzerinde eğitilir ve cevapları bağlam içinde okur, bu nedenle bitişik eğik yazı, eğim ve kusurlu harfleri, kutucuklarda büyük harf gerektiren klasik ICR motorlarından çok daha iyi işler. Aşırı derecede okunaksız cevaplar yine de yanlış okunabilir, bu nedenle FormRead, inceleme sırasında doğrulama yapabilmeniz için her transkripsiyonun yanında kırpılmış orijinal el yazısını gösterir.

OCR ile ICR arasındaki fark nedir?

OCR (Optical Character Recognition), tutarlı yazı tiplerinde basılı, dizgi metinleri okur. ICR (Intelligent Character Recognition), yazardan yazara değişen insan el yazısını okur. El yazısı bir sınav cevabını değerlendirmek önce ICR gerektirir - puanlanabilmesi için önce el yazısının kopyalanması gerekir - ve AI görüntü modelleri artık hem transkripsiyonu hem de değerlendirme ölçütüne dayalı puanlamayı tek geçişte yapar.

AI nihai notları otomatik olarak verir mi?

Hayır. AI her açık uçlu cevap için bir puan ve yazılı geri bildirim taslağı oluşturur ve her şey, kırpılmış el yazısı ve transkripsiyonun yanında bir QA inceleme görünümüne gelir. Sonuçlar dışa aktarılmadan önce her notu kabul eder veya değiştirirsiniz, böylece son söz her zaman öğretmene aittir.

AI puanlaması için iyi bir değerlendirme ölçeği nasıl yazarım?

Bunu bir yedek öğretmene talimat verir gibi yazın: beklenen cevabı veya ana noktaları, sorunun kaç puan değerinde olduğunu ve kısmi krediyi neyin kazandırdığını belirtin. Somut, açık değerlendirme ölçekleri, "adilce not ver" gibi belirsiz olanlardan belirgin şekilde daha iyi taslak puanlar üretir.

FormRead'in Gradescope'tan farkı nedir?

Gradescope, üniversite iş akışları, daktilo veya taranmış gönderimler ve cevap gruplandırması etrafında inşa edilmiş güçlü bir kurumsal araçtır ve kurumlar için fiyatlandırılmıştır. FormRead, ücretsiz denenebilir, önce kağıt odaklı bir OMR platformudur: baloncuklar, barkodlar ve el yazısı cevap bölgeleri, telefonla taradığınız tek bir basılı sayfada bulunur ve AI her açık uçlu cevap için sizin değerlendirme ölçeğinize göre otomatik olarak transkripsiyon yapar ve bir not taslağı oluşturur.

Açık uçlu cevapları bir API üzerinden puanlayabilir miyim?

Evet. Web uygulamasına güç veren aynı ardışık düzen bir REST API olarak sunulur: taranmış bir sınav görüntüsünü (veya bir grubunu) POST edin ve her açık uçlu bölge için OMR sonuçları, AI transkripsiyonu, taslak puan ve geri bildirimi JSON olarak alın, kendi not defterinize veya LMS'nize aktarılmaya hazır.

Formları elle değerlendirmeyi bırakın.

FormRead'i şimdi kullanmaya başlayın: formunuzu oluşturun, ilk sayfanızı tarayın ve dakikalar içinde yapılandırılmış sonuçlar alın.

Hemen başlayın — kredi kartı gerekmez