Bilgisayarlar sınavları gerçekten işaretleyebilir mi? ELT otomatik değerlendirmelerinin avantajları

ɫèAV Languages
Sembollerle bir dizüstü bilgisayarda yazan eller

Yapay Zeka (AI) kullanımı da dahil olmak üzere otomatik değerlendirme, en yeni eğitim teknolojisi çözümlerinden biridir. Sınav işaretleme sürelerini hızlandırır, insan önyargılarını ortadan kaldırır ve en az insan sınav görevlileri kadar doğru ve güvenilirdir. Yenilikler devam ettikçe, bu öğretmenler ve öğrenciler için gerçek bir oyun değiştiricidir.

Bununla birlikte, anlaşılır bir şekilde ELT topluluğunda birçok soru ve bazen şüpheyle karşılandı - bilgisayarlar konuşma ve yazma sınavlarını gerçekten doğru bir şekilde işaretleyebilir mi?

Cevap kocaman bir evet. Dünyanın her yerinden öğrenciler zaten yapay zeka dereceli sınavlara giriyor. ve VersantÌýsınavları, sınava girenlerin nerede yaÅŸadıklarına veya aksanlarının veya cinsiyetlerinin ne olduÄŸuna bakılmaksızın konuÅŸma ve yazma sınavları için tarafsız, adil ve hızlı otomatik puanlama saÄŸlar.

Bu makale, yapay zeka otomatik puanlamasında yer alan ana süreçleri açıklayacak ve yapay zeka teknolojilerinin tutarlı uzman insan yargılarının temelleri üzerine inşa edildiğine dikkat çekecektir. Öyleyse, otomatik puanlama ve yapay zeka konusundaki kafa karışıklığını giderelim ve hem öğretmenlere hem de öğrencilere nasıl yardımcı olabileceğini inceleyelim.

Yapay zeka ve geleneksel otomatik puanlama

Her şeyden önce, geleneksel otomatik puanlama ile yapay zeka arasında ayrım yapalım. Otomatik puanlama hakkında konuştuğumuzda, genellikle, çoktan seçmeli veya cloze öğeleri olan öğeleri puanlamayı kastediyoruz. Cümleleri yeniden sıralamanız, açılır listeden seçim yapmanız, eksik bir kelimeyi eklemeniz gerekebilir - bu tür şeyler. Bu soru türleri, belirli becerileri test etmek için tasarlanmıştır ve otomatik puanlama, her seferinde hızlı ve doğru bir şekilde işaretlenebilmelerini sağlar.

Bunun gibi otomatik olarak puanlanan öğeler, dinleme ve okuduğunu anlama gibi alıcı becerileri değerlendirmek için kullanılabilirken, yazma ve konuşmanın üretken becerilerini işaretleyemezler. Her öğrencinin yazılı ve sözlü öğelerdeki tepkisi farklı olacaktır, peki bilgisayarlar bunları nasıl işaretleyebilir?

Yapay zekanın devreye girdiği yer burasıdır.

Yapay zekanın, örneğin tıbbi teşhiste olduğu gibi, büyük miktarda yapılandırılmamış veriyle etkili ve %100 doğru bir şekilde başa çıkmaya ihtiyaç duyulan alanlarda nasıl giderek daha fazla kullanıldığı hakkında çok şey duyuyoruz. Dil testinde AI, yazılı ve sözlü testleri derecelendirmek için özel bilgisayar yazılımı kullanır.

Yapay zeka, konuşma sınavlarını puanlamak için nasıl kullanılır?

İlk adım, her dil için konuşmayı tanıyabilen ve onu dalga biçimlerine ve metne dönüştürebilen bir akustik model oluşturmaktır. Bu teknoloji eskiden çok sıra dışı olsa da, akıllı telefonlarımızın çoğu artık bunu yapabiliyor.

Bu akustik modeller daha sonra bir testteki her bir istemi veya öğeyi puanlamak için eğitilir. Bunu, önce öğeleri puanlamak için çift işaretleme kullanarak insan uzman puanlayıcıları kullanarak yapıyoruz. Her madde için yüzlerce sözlü yanıt alırlar ve bu 'Standartlar' daha sonra motoru eğitmek için kullanılır.

Daha sonra, insan tarafından işaretlenmiş çok daha fazla öğeyi besleyerek eğitilmiş motoru doğrularız ve makine puanlarının insan puanlarıyla çok yüksek oranda ilişkili olup olmadığını kontrol ederiz. Herhangi bir öğe için bu gerçekleşmezse, insan işaretleyiciler tarafından belirlenen standartla eşleşmesi gerektiğinden onu kaldırırız. .95-.99 arasında bir korelasyon bekliyoruz. Bu, testlerin %95-99 arasında, insan tarafından işaretlenmiş numunelerle tamamen aynı şekilde işaretleneceği anlamına gelir.

Bu, insan işaretli konuşma testlerinin güvenilirliğine kıyasla inanılmaz derecede yüksektir. Özünde, AI motorunu eğitmek için bir grup son derece uzman insan değerlendirici kullanıyoruz ve ardından standartları defalarca kopyalanıyor.

Yapay zeka, yazma sınavlarını puanlamak için nasıl kullanılır?

AI yazma puanlamamız, adı verilen bir teknoloji kullanır. LSA, yalnızca yüzeysel özelliklerine değil, kelimelerin arkasındaki anlama dayalı olarak yazmayı analiz edebilen ve puanlayabilen bir doğal dil işleme tekniğidir.

Konuşma tanıma akustik modellerimize benzer şekilde, önce dile özgü bir metin tanıma modeli kuruyoruz. Sisteme büyük miktarda metin besliyoruz ve LSA, kelimelerin birbirleriyle nasıl ilişkili olduğunu ve örneğin İngilizce dilinde nasıl kullanıldığını öğrenmek için yapay zeka kullanıyor.

Dil modeli oluşturulduktan sonra, motoru bir testteki her yazılı öğeyi puanlamak için eğitiriz. Konuşan maddelerde olduğu gibi, bunu da önce öğeleri puanlamak için insan uzman puanlayıcıları kullanarak, çift işaretleme kullanarak yapıyoruz. Her bir madde için yüzlerce yazılı yanıt alırlar ve bu 'Standartlar' daha sonra motoru eğitmek için kullanılır.

Daha sonra, insan tarafından işaretlenmiş çok daha fazla öğeyi besleyerek eğitilmiş motoru doğrularız ve makine puanlarının insan puanlarıyla çok yüksek oranda ilişkili olup olmadığını kontrol ederiz.

Ölçüt her zaman uzman insan puanlarıdır. Yapay zeka sistemimiz insan işaretleyiciler tarafından verilen puanlarla yakından eşleşmiyorsa, insan işaretleyiciler tarafından belirlenen standartla eşleşmesi çok önemli olduğundan öğeyi kaldırırız.

AI'nın birden fazla özelliği işaretleme yeteneği

İnsan belirteçlerinin konuşma ve yazılı öğeleri puanlamada karşılaştıkları zorluklardan biri, tek bir öğe üzerinde birçok özelliği değerlendirmektir. Örneğin, konuşmayı değerlendirirken ve puanlarken, içerik, akıcılık ve telaffuz için ayrı puanlar vermeleri gerekebilir.

Yazılı yanıtlarda, işaretleyicilerin kelime dağarcığı, stil ve dilbilgisi için bir yazı parçasını puanlaması gerekebilir. Etkili bir şekilde, her bir öğeyi en az üç kez, belki de daha fazla işaretlemeleri gerekebilir. Bununla birlikte, AI sistemlerini konuşma ve yazmadaki her özellik puanı konusunda eğittikten sonra, herhangi bir sayıda özellikteki öğeleri anında ve hatasız olarak işaretleyebilirler.

Yapay zekanın önyargı eksikliği

Herhangi bir test için temel bir öncül, herhangi bir adaya hiçbir avantaj veya dezavantaj verilmemesi gerektiğidir. Başka bir deyişle, olumlu veya olumsuz önyargı olmamalıdır. İnsan işaretli konuşma ve yazılı değerlendirmelerde bunu başarmak çok zor olabilir. Aslında, adaylar genellikle bir başkası onları duymuş veya çalışmalarını okumuş olsaydı farklı bir puan alabileceklerini düşünürler.

Yapay zeka sistemlerimiz önyargı sorununu ortadan kaldırıyor. Bu, konuşma ve yazma yapay zeka sistemlerimizin çok çeşitli insan aksanları ve yazma türleri üzerinde eğitilmesini sağlayarak yapılır.

Motorlarımızı eğitmek için mükemmel anadili aksanları veya yazı stilleri istemiyoruz. Dünyanın dört bir yanından yerel olmayan temsili örnekler kullanıyoruz. Konuşma ve yazma puanlaması için yapay zeka sistemlerimizi ilk kurduğumuzda, öğelerimizi denedik ve milyonlarca öğrenci yanıtını kullanarak motorlarımızı eğittik. Yeni öğeler geliştirildikçe bunu yapmaya devam ediyoruz.

Yapay zeka otomatik değerlendirmesinin avantajları

Ev ödevi testlerini ve sınavlarını elle işaretlemekte yanlış bir şey yoktur. Aslında, öğretmenlerin öğrencilerini tanımaları ve kişisel geri bildirim ve tavsiyelerde bulunmaları çok önemlidir. Bununla birlikte, günlük veya haftalık yüzlerce testi manuel olarak düzeltmek tekrarlayıcı, zaman alıcı, her zaman güvenilir olmayabilir ve sınıfta öğrencilerle birlikte çalışmaktan zaman alabilir. Biçimlendirici ve özetleyici değerlendirmelerde yapay zekanın kullanılması, öğrenciler için değerlendirilen uygulama süresini artırabilir ve öğretmenler için not yükünü azaltabilir.

Dil öğrenimi yüksek yeterlilik seviyelerine ilerlemek zaman alır, çok zaman alır. Yapay zekanın karma kullanımı şunları yapabilir:

  • KiÅŸiselleÅŸtirilmiÅŸ öğrenme ve tanısal deÄŸerlendirme geri bildirimi saÄŸlamak için biçimlendirici deÄŸerlendirmeninÌýartan önemini ele alın

  • Öğrencilerin tahsis edilen öğretim süresi içinde ve dışında pratik yapmalarına ve anında geri bildirim almalarına izin verin

  • Öğretmenlerin iÅŸ yükü sorununu ele alın

  • Ä°nsanların en iyi yaptığı ve makinelerin en iyi yaptığı ÅŸeylerden yararlanarak insanlar ve makineler arasında erdemli bir kombinasyon oluÅŸturun.

  • Yüksek riskli testlerde adil, hızlı ve tarafsız özetleyici deÄŸerlendirme puanları saÄŸlayın.

Umarız bu makale, yapay zekanın dil testlerimizde konuşma ve yazmayı değerlendirmek için nasıl kullanıldığına dair birkaç önemli soruyu yanıtlamıştır. Google'ın Baş Bilim İnsanı ve Stanford Profesörü Fei-Fei Li'den ilginç bir alıntı, yapay zekayı şöyle tanımlıyor:

"Öğrencilerime sık sık 'yapay zeka' adıyla yanıltılmamalarını söylüyorum - bunda yapay bir şey yok; Yapay zeka insanlar tarafından yapılır, insanlar gibi davranması ve nihayetinde insan yaşamlarını ve insan toplumunu etkilemesi amaçlanır."

Biçimlendirici ve özetleyici değerlendirmelerde yapay zeka asla öğretmenlerin rolünün yerini almayacaktır. Yapay zeka öğretmenleri destekleyecek, öğrencilerin kendilerini geliştirmeleri için sonsuz fırsatlar sunacak ve yavaş, güvenilmez ve genellikle adil olmayan yüksek riskli değerlendirmelere bir çözüm sunacaktır.

ELT'de yapay zeka değerlendirmelerine örnekler

ɫèAV'da, yapay zeka teknolojisini kullanarak bir dizi değerlendirme geliştirdik.

Versant

Versant testleri, herhangi bir okulda, kuruluşta veya işletmede dil yeterlilik ölçütleri oluşturmaya yardımcı olacak harika bir araçtır. Öğrenci için uygun seviyeyi belirlemek için yerleştirme testleri için özel olarak tasarlanmıştır.

PTE Academic

, bir üniversiteye yerleşmek, iş bulmak veya vize almak için İngilizce düzeylerini kanıtlaması gerekenlere yöneliktir. Testleri puanlamak için yapay zekayı kullanır ve sonuçlar beş gün içinde hazır olur.

ɫèAV English International Certificate (PEIC)

ɫèAV English International Certificate (PEIC) ayrıca otomatik değerlendirme teknolojisini kullanır. Evde veya okulda (veya güvenli bir test merkezinde) isteğe bağlı olarak iki saatlik bir test ile. Gelişmiş konuşma tanıma ve sınav notlandırma teknolojisi ile dünya çapındaki profesyonel ELT sınav işaretleyicilerinin uzmanlığının bir kombinasyonunu kullanan patentli yazılımımız, İngilizce dil becerisini ölçebilir.

Öğrenme ve testlerimizde yapay zeka kullanımı hakkında daha fazla bilgiyi buradan okuyun veya öğrencileriniz için hangi İngilizce testinin doğru olduğunu merak ediyorsanız, 'Öğrencilerim için hangi sınav doğru?' yazımıza göz atmayı unutmayın.

Eğitim yazılımımızı ve sınavlarımızı keşfedin

ɫèAV'dan daha fazla blog

  • A woman/teacher teaching her students in the classroom.

    Top tips for writing a winning English Teacher Awards 2024 nomination

    By Thomas Gardner
    Okuma zamanı: 3 minutes

    We are celebrating teaching excellence around the world through the ɫèAV English Teacher Awards 2024.Ìý

    Open to all types of English language educator, the 15 lucky global winners will take home thousands of pounds of prizes, from trips to conferences to the latest language learning software for their school.Ìý

    Nominating an educator for the ɫèAV English Teacher Awards is simple. All applications are made via the awards entry page, and you have 600-1000 words to tell us how your nominee builds learners’ confidence to be themselves in English.Ìý

    Here are our top tips to make the most of every word and ensure your entry is top of the class.Ìý

    Application tips

    1. Make it category specificÌý

    One of the core judging criteria is how well an application matches the category description.Ìý

    Educators can be nominated in one of five different categories:Ìý

    1. Teaching Young Minds English
    2. Empowering Teen Confidence in English
    3. Cultivating Lifelong Learners in EnglishÌý
    4. Innovation in English Language TeachingÌý
    5. Rising Stars of English Language TeachingÌý

    Tailoring your answer to the category description will make sure our judges understand exactly why your nominee is the perfect winner.Ìý

    For a detailed description of each of the categories, take a look at our recent blog post.

    2. Focus on confidence

    Learning a language isn’t just about knowing the vocabulary or understanding the grammar; it’s about having the confidence to go out there and use your newfound skills to unlock a world of opportunities.Ìý

    But feeling confident in something you’re still learning is hard. Anyone that’s learnt a language has experienced those dips in motivation and confidence when you come across a topic that doesn’t come naturally to you.Ìý

    That’s where a great teacher can make all the difference. The right support and encouragement combined with innovative teaching techniques can help learners protect and even build their confidence in challenging moments.Ìý

    That confidence is what transforms language learning from just communicating to feeling able to really be yourself in English. And when you’re able to do that, great opportunities come your way.Ìý

    Our judges are looking for nominations that understand the connection between confidence and self-expression and the impact that can have on learners’ lives.Ìý

    3. Demonstrate your impact

    Including relevant data and examples in your application will help judges understand the impact your nominee has had.Ìý

    This might include data such as internal or external test results, as well as how those results have changed during that teacher’s tenure.Ìý

    Evidence doesn’t have to mean numbers. Judges also welcome anecdotes and examples that describe the impact an educator has had on learners’ confidence.Ìý

    The judging process

    Nominations can be submitted between 15th August and midnight (CST) on 1st November 2024.Ìý

    After that date, all entries will be reviewed and a shortlist submitted to our expert judges.Ìý

    There are two to three judges for each category who will independently review and shortlist nominees before collectively awarding a Gold, Silver, and Bronze winner in their category.Ìý

    Shortlisted entries will be contacted by our team and announced at the ɫèAV Teacher Awards ceremony on November 21st 2024.Ìý

    Meet the judges

    From Argentina to Algeria, Italy to Germany, ɫèAV English Teacher Award 2024 judges come from all over the world.Ìý

    Many have years of ELT teaching experience, as well as expertise from academia and business.Ìý

    Here are just three of our expert judges:Ìý

    • Belgin Elmas: Head of the English Language Teaching Department at TED University in Ankara, Belgin is a professor with more than 34 years of teaching experience.Ìý
    • Dr Silvia Minardi: President of Lingua e Nuova Didattica and Vice President of Aermigo. Dr Minardi has extensive experience in CLIL training, collaborating with the ECML and the Council of Europe.
    • Dr Renata Condi: An experienced teacher, development professional, and course book author, Dr Condi holds a PhD and MA in Applied Linguistics and an MBA in School Management.Ìý

    The prizes

    With a Gold, Silver, and Bronze winner in each of the five categories, there are 15 chances for educators and their schools to win.Ìý

    Gold winners will receive a trip to a regional professional conference, including flight and hotel, as well as up to £500 in credit for professional development.Ìý

    Their school will win annual licenses to top language learning app, Mondly by ɫèAV as well as a course, assessment, and certification bundle valued at £1000Ìý

    Silver and Bronze winners will take home top prizes too, with £250 in credit towards their professional development and up to 500 Mondly by ɫèAV licenses for their school to continue their good work building learners’ confidence in English.Ìý

  • Childten sat at a desk staring up at a tablet

    Embracing AI for the new school year

    By Thomas Gardner
    Okuma zamanı: 2 minutes

    Back-to-school season is the perfect time to introduce something new into your teaching toolkit. With advancements in technology, Artificial Intelligence (AI) is becoming increasingly important for educators to incorporate into their workflow and beneficial for students. Here are some practical ways AI can enhance your classroom experience this new school year.

    AI saves valuable time

    One of the biggest challenges teachers face is finding the time to plan and create engaging lessons. AI can maximize your time by generating word sets, images and activities. Imagine having a virtual assistant that can suggest fresh ideas for your lessons, create tailored resources and even develop entire lesson plans. By automating these time-consuming tasks, AI allows you to focus more on teaching and interacting with your students.

    How AI can help

    • Lesson planning: Generate detailed lesson plans and activities.
    • Lesson inspiration: Get new and creative ideas for classroom activities.
    • Resource creation: Develop word sets, images and other teaching materials.

    As you prepare for the upcoming school year, consider how integrating AI tools can elevate your teaching practice, making your lessons more engaging while freeing up precious time for interactions with your students.

    Personalized learning and targeted feedback

    Every student learns differently, and tailoring lessons to meet individual needs can be challenging. AI can help by providing personalized learning experiences and targeted feedback. Using data-driven insights, AI tools can identify areas where learners are struggling and offer customized recommendations to help them improve. This not only enhances the learning experience but also ensures that no student is left behind.

    Benefits of AI in personalization

    • Personalized lessons: Adapt lessons to suit individual learning styles.
    • Targeted feedback: Provide specific feedback to help students improve.

    Creating an inclusive classroom

    ÌýAI can play an important role in creating an inclusive classroom environment. AI can generate visuals, audio, videos and text, or a combination of all four, catering to different learning preferences. This ensures that all learners, regardless of their learning styles or abilities, have access to the same educational content.

    AI in inclusion

    • Multimodal content: Use various formats to cater to different learning preferences.
    • Accessibility: Ensure that all students can engage with the material.

    Supporting independent learning

    Encouraging students to take charge of their own learning is essential for their development. AI can support independent learning by providing platforms that facilitate self-study at home. These platforms offer a range of resources and tools that help students learn at their own pace, making education more flexible and accessible.ÌýExplore how supports independent learning with immersive AI-powered conversations.

    AI tools for self-study

    • Independent learning: Foster a culture of self-directed learning.
    • Self-study resources: Provide tools and platforms for students to use at home.

    Integrating AI into your teaching practice can revolutionize the way you educate and engage with your students. From saving time on lesson planning to creating an inclusive classroom and supporting independent learning, the benefits are significant.

    Want more AI tips and tricks for the classroom? Join us on the page for the next video in our series.

  • A smiley woman and one of her friends/students working in a cafe.

    English Teacher Awards 2024: Understanding the categories

    By Thomas Gardner
    Okuma zamanı: 4 minutes

    Teachers shape every aspect of our learning experience, especially when it comes to language learning. Great teachers give learners not only the skills but the confidence to go out in the world, start speaking up and discovering new opportunities.Ìý

    We’re celebrating those exceptional educators with the ɫèAV English Teacher Awards 2024.Ìý

    With five different categories and a Gold, Silver and Bronze winner in each, there are 15 chances to take home thousands of pounds worth of top prizes for the winning teachers and their schools.Ìý

    Find out more about who can enter and the different categories in this article.Ìý