Bagaimana cara membandingkan dua pengklasifikasi di Weka menggunakan Uji T Berpasangan

Di Weka saya bisa pergi ke eksperimen. Dalam pengaturan saya dapat memuat file .arff, dan meminta weka untuk membuat pengklasifikasi (yaitu J48), lalu saya dapat menjalankannya dan akhirnya saya dapat membuka tab analisis. Di tab ini, ini memberi saya opsi untuk 'menguji dengan Uji-T Berpasangan' tetapi saya tidak tahu cara membuat pengklasifikasi kedua (yaitu J48 tidak dipangkas) dan melakukan Uji-T pada dua hasil.

Google tidak mengarahkan saya ke tutorial atau jawaban apa pun.

Bagaimana caranya agar Weka melakukan T-Test pada hasil dua pengklasifikasi berbeda, yang dibuat dari data yang sama?


machine-learning statistics weka
person Reily Bourne    schedule 20.10.2012    source sumber
comment
fiji.sc/Advanced_Weka_Segmentation_-_How_to_compare_classifiers Apakah ini membantu?   -  person greeness    schedule 20.10.2012
comment
Itu membantu tetapi saya tidak tahu bagaimana hal itu memberikan nilai-t atau nilai-p.   -  person Reily Bourne    schedule 21.10.2012

Jawaban (1)


arrow_upward
3
arrow_downward

Silakan ikuti langkah-langkah di http://fiji.sc/Advanced_Weka_Segmentation_-_How_to_compare_classifiers.

Dalam tangkapan layar ini, penulis menetapkan tingkat signifikansi menjadi 0,05. Dalam pemahaman saya, dalam pengujian seperti itu, Anda selalu membandingkan dengan pengklasifikasi dasar (inilah NaiveBayes), keluarannya menggunakan anotasi v atau * untuk menunjukkan bahwa hasil tertentu secara statistik lebih baik (v) atau lebih buruk (*) daripada skema dasar pada tingkat signifikansi yang ditentukan (saat ini 0,05). Tapi itu mungkin bukan yang Anda harapkan.

person greeness    schedule 21.10.2012