Serba serbi Trec Evaluation


tTREC Evaluation adalah standard yang biasanya digunakan dalam pengkuran dan evaluasi Information Retrieval. Versi trec evaluation terbaru dapat didownload disini. Untuk menjalankan trec_eval anda harus punya file assessment yang berisi informasi relevanci file terhadap suatu query dengan format :

queryID  0  IDDocument Nilairelevancy

contoh :

q1 0 http://sws.geonames.org/4346347/ 2

Selain file assessment kita juga harus punya file hasil rangking dari dokumen dengan format :

queryID  0  IDDocument Ranking Hasil RunId

contoh :

q1 0 http://sws.geonames.org/4346347/ 2 32.2 iin

Setelah kita punya dua file diatas kita bisa melakukan evaluasi dengan perintah :

$./trec_eval  assess_file hasilrangking

Jika kita ingin nilai spesifik dari sebuah evaluasi seperti MAP, NDCG maka kita bisa mengetikkan perintah :

 $./trec_eval  -m map assess_file hasilrangking

  1. ijin sedot kang..

  1. No trackbacks yet.

Tinggalkan Balasan

Isikan data di bawah atau klik salah satu ikon untuk log in:

Logo WordPress.com

You are commenting using your WordPress.com account. Logout / Ubah )

Gambar Twitter

You are commenting using your Twitter account. Logout / Ubah )

Foto Facebook

You are commenting using your Facebook account. Logout / Ubah )

Foto Google+

You are commenting using your Google+ account. Logout / Ubah )

Connecting to %s