[ Skip to the content ]

Institute of Formal and Applied Linguistics Wiki

[ Back to the navigation ]

You are here: start » user » zeman » joshua

Differences

This shows you the differences between two versions of the page.

Link to this comparison view

Both sides previous revision Previous revision
Next revision 		Previous revision
Next revision Both sides next revision
user:zeman:joshua [2009/06/04 09:46]
zeman Jiný odkaz na Sourceforge. 		user:zeman:joshua [2009/06/04 10:06]
zeman První výsledek.
Line 210: Line 210:
  
 <code>$JOSHUA/example2/get_1best_from_Nbest.pl $HINDI/output/dev.nbest.out $HINDI/output/dev.1best.out</code> <code>$JOSHUA/example2/get_1best_from_Nbest.pl $HINDI/output/dev.nbest.out $HINDI/output/dev.1best.out</code>
 +
 +
 +
 +===== Vyhodnocení úspěšnosti =====
 +
 +1-best výstup Joshuy a referenční překlad bychom mohli převést do příslušného XML formátu a pustit na ně oficiální externí perlový skript, který počítá BLEU skóre. Pro výsledná čísla do článku bychom to tak také měli udělat.
 +
 +Jinak ale Joshua obsahuje svůj vlastní kód pro vyhodnocování. Přehled parametrů jeho volání se dozvíme, když ho zavoláme bez argumentů:
 +
 +<code>java -cp $JOSHUA/bin joshua.util.JoshuaEval</code>
 +
 +S využitím většiny defaultů stačí dodat jméno vyhodnocovaného souboru a jméno souboru s referenčním překladem:
 +
 +<code>java -cp $JOSHUA/bin joshua.util.JoshuaEval \
 +    -cand $HINDI/output/dev.1best.out \
 +    -ref $HINDI/corpus/dev.lowercased.hi</code>
 +
 +Bez MERTu mi zatím vyšlo BLEU = 0.0807.

[ Back to the navigation ] [ Back to the content ]