Proses penilaian menulis, khususnya menilai teks berupa artikel opini, dapat
menjadi kendala bagi guru. Ketiadaan komponen penilaian bagi guru dan
kesulitan siswa dalam menghasilkan tesis dapat berpengaruh terhadap
keobjektifan penilaian. Bentuk jawaban yang berupa wacana tertulis juga
berpengaruh bagi kecepatan penilaian oleh guru. Penelitian ini berupaya
mengembangkan sebuah aplikasi instrumen penilaian keterampilan menulis
artikel opini bahasa Indonesia berbasis komputer. Aplikasi “Si Pinter Mobi”
berupa computer-based test (CBT) dengan akses tautan berbasis web sehingga
merupakan kategori web-based test (WBT). Aplikasi ini menggunakan sistem
penilaian berbasis mesin dan manusia (machine rater dan human rater). Adanya
rubrik penilaian yang sesuai untuk struktur teks opini yang dikemas dengan
bantuan machine rater dapat menjadikan penilaian oleh guru relatif lebih mudah
dan lebih cepat diselesaikan. Penelitian ini merupakan penelitian pengembangan
dengan penerapan ADDIE. Langkah-langkah preprocessing dalam pemrosesan
bahasa alami (natural language processing-NLP) digunakan untuk mendukung
penilaian oleh mesin, termasuk untuk pencocokan dengan data huruf kapital,
tanda baca, dan ketepatan struktur kalimat. Penilaian antarmuka (scoring
interface) disediakan untuk guru sebagai human rater yang menilai dari segi
kosakata, konten wacana, dan organisasi. Dari hasil penilaian keidealan produk,
aplikasi ini layak dari segi materi kebahasaan dan sangat layak dari segi
teknologi informasi. Hasil uji coba oleh guru dan siswa menunjukkan bahwa
aplikasi ini sangat praktis.
Kata Kunci: penilaian menulis, artikel opini, human rater, machine rater, tes
berbasis web