Analisis Tingkat Kesulitan Soal dalam Tes Bahasa Arab TOAFL untuk Mahasiswa

• Muhammad Imam Nawawi

  Universitas Islam Negeri Sunan Ampel Surabaya

• M. Baihaqi

  Universitas Islam Negeri Sunan Ampel Surabaya

• Choiril Ulfi

  Universitas Islam Negeri Sunan Ampel Surabaya

ABSTRACT

This study aims to analyze the difficulty level of test items in the Test of Arabic as a Foreign Language (TOAFL), particularly in the tarākīb (structure) section. This research employs a quantitative approach with a descriptive design. The subjects of the study were 25 university students who took the test in 2021, with a total of 20 items analyzed. The data consisted of the number of students who answered each item correctly, which were then analyzed using the difficulty index formula (P = B/N). The results indicate that there is variation in the difficulty levels of the test items, with a distribution of 5% easy items, 70% moderate items, and 25% difficult items. The majority of the items fall into the moderate category, suggesting that the test instrument has a moderate level of difficulty and is sufficiently effective in measuring students’ abilities. However, this distribution does not fully align with the ideal proportion in educational evaluation theory, particularly due to the very limited number of easy items. The findings imply that the test instrument needs improvement, especially in balancing the distribution of difficulty levels by increasing the number of easy items. This study is expected to contribute to the development of more valid and balanced Arabic language assessment instruments.

Key words: difficulty level, item analysis, TOAFL, tarākīb, Arabic language evaluation

ABSTRAK

Penelitian ini bertujuan untuk menganalisis tingkat kesukaran butir soal pada instrumen tes Bahasa Arab jenis TOAFL, khususnya pada aspek tarākīb. Penelitian ini menggunakan pendekatan kuantitatif dengan jenis penelitian deskriptif. Subjek penelitian adalah 25 mahasiswa yang mengikuti tes pada tahun 2021, dengan jumlah soal yang dianalisis sebanyak 20 butir. Data penelitian berupa jumlah mahasiswa yang menjawab benar pada setiap butir soal, yang kemudian dianalisis menggunakan rumus indeks kesukaran (P = B/N). Hasil penelitian menunjukkan bahwa terdapat variasi tingkat kesukaran butir soal, dengan distribusi sebesar 5% soal mudah, 70% soal sedang, dan 25% soal sulit. Mayoritas soal berada pada kategori sedang, yang menunjukkan bahwa instrumen tes memiliki tingkat kesukaran yang moderat dan cukup efektif dalam mengukur kemampuan mahasiswa. Namun demikian, distribusi tersebut belum sepenuhnya sesuai dengan proporsi ideal dalam teori evaluasi pendidikan, terutama karena jumlah soal mudah yang sangat terbatas. Implikasi dari penelitian ini menunjukkan bahwa instrumen tes perlu disempurnakan, khususnya dalam menyeimbangkan distribusi tingkat kesukaran dengan menambah jumlah soal kategori mudah. Penelitian ini diharapkan dapat memberikan kontribusi dalam pengembangan instrumen evaluasi pembelajaran bahasa Arab yang lebih berkualitas dan proporsional.

Key words: tingkat kesukaran, analisis butir soal, TOAFL, tarākīb, evaluasi pembelajaran bahasa Arab

الملخص

يهدف هذا البحث إلى تحليل مستوى صعوبة فقرات الأسئلة في أداة اختبار اللغة العربية من نوع (TOAFL)، وخاصة في جانب التراكيب. استخدم هذا البحث المنهج الكمي بنوعه الوصفي. وتكوّن مجتمع البحث من 25 طالبًا شاركوا في الاختبار عام 2021، بعدد 20 فقرة تم تحليلها. وتمثلت بيانات البحث في عدد الطلاب الذين أجابوا إجابة صحيحة عن كل فقرة، ثم تم تحليلها باستخدام معادلة معامل الصعوبة (P = B/N). أظهرت نتائج البحث وجود تباين في مستوى صعوبة فقرات الأسئلة، حيث بلغت نسبة الأسئلة السهلة 5%، والمتوسطة 70%، والصعبة 25%. وكانت غالبية الأسئلة ضمن الفئة المتوسطة، مما يدل على أن أداة الاختبار تمتلك مستوى صعوبة معتدلًا وفعالية كافية في قياس قدرة الطلاب. ومع ذلك، فإن هذا التوزيع لم يتوافق تمامًا مع النسبة المثالية في نظرية تقويم التعليم، خاصة بسبب قلة عدد الأسئلة السهلة. وتشير نتائج البحث إلى ضرورة تطوير أداة الاختبار، ولا سيما في تحقيق التوازن في توزيع مستويات الصعوبة من خلال زيادة عدد الأسئلة السهلة. ومن المتوقع أن يسهم هذا البحث في تطوير أدوات تقويم تعلم اللغة العربية بشكل أكثر جودة وتوازنًا.

الكلمات المفتاحية: مستوى الصعوبة، تحليل فقرات الاختبار، TOAFL، التراكيب، تقويم تعلم اللغة العربية

Alderson, Charles, J., Clapham, C., & Wall, D. (1995). Language test construction and evaluation.

Anastasi, A., & Urbina, S. (1997). Psychological testing (7th ed.). Prentice Hall.

Arikunto, S. (2009). DASAR - DASAR EVALUASI PENDIDIKAN (p. 310). https://www.scribd.com/document/740858744/Dasar-dasar-Evaluasi-Pendidikan

Azwar, S. (2012). Reliabilitas dan validitas. Pustaka Pelajar.

Bachman, L. F., & Palmer, A. S. (1996). Language testing in practice. Oxford University Press.

Bachman, L. F. (2004). Statistical analyses for language assessment. Cambridge University Press.

Brookhart, S. M. (2013). How to create and use rubrics for formative assessment and grading. ASCD.

Brown, H. D. (2004). Language assessment: Principles and classroom practices. Pearson Education.

Crocker, L., & Algina, J. (1986). Introduction to classical and modern test theory. Holt, Rinehart & Winston.

Fulcher, G., & Davidson, F. (2007). Language testing and assessment: An advanced resource book. Routledge

Gronlund, N. E., & Linn, R. L. (1990). Measurement and evaluation in teaching (6th ed.). Macmillan.

Haladyna, T. M. (2004). Developing and validating multiple-choice test items (3rd ed.). Lawrence Erlbaum Associates.

Mardapi, D. (2008). Teknik penyusunan instrumen tes dan nontes.

McNamara, T. (2000). Language testing. Oxford University Press.

Nitko, A. J., & Brookhart, S. M. (2011). Educational assessment of students (6th ed.). Pearson.

Oller, J. W. (1979). Language tests at school. Longman.

Purpura, J. E. (2004). Assessing grammar. Cambridge University Press.

Retnawati, H. (2016). Analisis kuantitatif instrumen penelitian. Parama Publishing.

Sudijono, A. (2011). PENGANTAR EVALUASI PENDIDIKAN (p. 480).

Sudjana, N. (2010). Penilaian hasil proses belajar mengajar.

Sugiyono. (2013). Metode Penelitian Pendidikan pendekatan kuantitatif, kualitatid, dan R&D. ALFABETA, CV.

Sukmadinata, & Syaodih, N. (2002). Pengembangan kurikulum teori dan praktek.

• PDF

Ya

Copyright (c) 2026 Muhammad Imam Nawawi, M. Baihaqi, Choiril Ulfi

This work is licensed under a Creative Commons Attribution-ShareAlike 4.0 International License.

Penulis yang menerbitkan di EL-IBTIKAR menyetujui persyaratan berikut:

1. Penulis memegang hak cipta dan memberikan jurnal hak publikasi pertama dari karya secara bersamaan dilisensikan di bawah Creative Commons Attribution-ShareAlike 4.0 License yang memungkinkan orang lain untuk berbagi karya dengan pengakuan kepenulisan karya dan publikasi awal di jurnal ini
2. Penulis dapat membuat pengaturan kontrak tambahan yang terpisah untuk distribusi non-eksklusif dari versi jurnal yang diterbitkan dari karya tersebut (misalnya, mempostingnya ke repositori institusional atau menerbitkannya dalam sebuah buku) dengan pengakuan publikasi awalnya dalam hal ini. jurnal.
3. Penulis diizinkan dan didorong untuk memposting karyanya secara online (misalnya, di repositori institusional atau di situs web mereka) sebelum dan selama proses pengiriman, karena dapat menghasilkan pertukaran yang produktif, serta kutipan yang lebih awal dan lebih besar dari karya yang diterbitkan (Lihat Kebijakan Akses Terbuka).

Baca lebih lanjut tentang Lisensi Creative Commons Attribution-ShareAlike 4.0 di sini: https://creativecommons.org/licenses/by-sa/4.0/.

Pernyataan Privasi
Nama dan alamat email yang dimasukkan dalam situs jurnal ini akan digunakan secara eksklusif untuk tujuan jurnal ini dan tidak akan tersedia untuk tujuan lain atau pihak lain mana pun.