Platform ujian lisan skala besar untuk universitas
Perangkat lunak dan alur kerja bagi departemen untuk menjalankan ujian lisan (viva) singkat dan terstruktur dalam skala besar, format penilaian yang tidak bisa dipalsukan oleh AI.
Ringkasan siap tempel untuk Claude Code, Cursor, atau agen coding lainnya (dalam bahasa Inggris).
Pro
- Siapa yang membayar
- Ketua departemen dan pusat pengajaran & pembelajaran di universitas dengan program STEM besar, membayar $15k–60k/tahun per departemen dari anggaran integritas akademik / instruksional.
- Apa kata orang · 4
- Argumennya: pekerjaan rumah sebaiknya tidak dihitung sama sekali, dan penguasaan materi harus diverifikasi lewat ujian plus viva, karena menyontek pada tugas tertulis kini terlalu mudah. Baca komentarnya ↗
- Menyarankan guru secara acak memilih mahasiswa untuk menjelaskan atau mereproduksi karya yang mereka kumpulkan di depan kelas untuk menangkap mereka yang tidak mengerjakan sendiri. Baca komentarnya ↗
- Merekomendasikan kembali ke ujian tertulis atau lisan di dalam kelas sebagai satu-satunya penilaian yang andal. Baca komentarnya ↗
- Seorang dosen adjunct mengatakan jika ia mengajar hari ini, ia hanya akan menilai ujian tatap muka dan mungkin wawancara, sehingga tidak ada ruang bagi AI untuk menggelembungkan nilai. Baca komentarnya ↗
Diparafrasekan dari diskusi. Ikuti tautan untuk komentar aslinya.
- Pesaing dan celah
Ujian lisan menjadi format yang dianggap paling tahan AI dalam diskusi ini, tetapi belum ada produk untuk menjalankannya dalam skala besar: menjadwalkan ratusan viva 10 menit, membuat varian pertanyaan per mahasiswa dari tugas yang dikerjakan, merekam, memberi nilai dengan rubrik, dan menandai ketidakkonsistenan antara karya tertulis dan jawaban lisan. Produk yang ada semuanya berfokus pada tugas tertulis.
- Mengapa sekarang
- Dalam 12 bulan terakhir, model frontier membuat penilaian tugas rumah tertulis tidak lagi bisa diverifikasi. Seorang peraih Fields Medal yang secara terbuka meninggalkan penilaian pekerjaan rumah menjadi sinyalnya. Universitas sudah mencoba detektor Turnitin/Rumi dan menilainya tidak memadai (menurut artikel), sehingga mereka butuh alternatif struktural, bukan deteksi.
- Parit pertahanan · 6/10
- Bank rubrik dan varian pertanyaan per mata kuliah akan semakin berharga seiring waktu, rekaman menciptakan data konsistensi penilaian, dan integrasi dengan sistem LMS/registrar menciptakan biaya pindah. Penjualan ke institusi juga membangun moat berupa referensi.
Kontra
- Tim merah
- Ujian lisan adalah format yang benar-benar mulai diadopsi universitas sebagai penilaian yang tahan AI, dan tidak ada produk incumbent yang menjalankan penjadwalan viva, pembuatan varian, dan penilaian dalam skala besar. Siklus penjualan institusi memang berat, tetapi celah strukturalnya nyata.
- Yang bisa membuatnya gagal
- Universitas adalah pembeli yang lambat dan terbatas anggaran, dengan inersia institusional yang sangat besar. Artikel itu sendiri mencatat sistem mungkin tidak berubah selama bertahun-tahun meskipun sudah rusak.
Mulai
- Tiga langkah pertama
- Bangun penjadwal viva + generator pertanyaan yang mengubah set tugas rumah suatu mata kuliah menjadi pertanyaan lanjutan lisan per mahasiswa, dengan perekaman dan penilaian rubrik.
- Jalankan pilot berbayar dengan satu departemen matematika/CS (50–200 mahasiswa) yang menawarkan viva terekam 10 menit sebagai 20% dari nilai mata kuliah.
- Tambahkan laporan ketidakkonsistenan yang membandingkan karya tertulis setiap mahasiswa dengan jawaban lisannya untuk menandai pengumpulan yang kemungkinan bergantung pada AI.
- Diskusi asli
- AI use leads UC Berkeley math professor to see 'no point' in grading homework ↗ 231 poin327 komentarDari komentarArtikel tertaut
Diterjemahkan dari bahasa Inggris. Baca versi asli