[ Skip to the content ]

Institute of Formal and Applied Linguistics Wiki


[ Back to the navigation ]

Differences

This shows you the differences between two versions of the page.

Link to this comparison view

Both sides previous revision Previous revision
Next revision
Previous revision
Next revision Both sides next revision
user:zeman:morpho-challenge-2008 [2008/06/27 16:58]
zeman Segmentace hotová.
user:zeman:morpho-challenge-2008 [2008/06/27 22:25]
zeman Postřehy.
Line 72: Line 72:
 $MC/mc_convert.pl -t fi < fi.dz.txt | gzip -c > wordlist.fin.dz.gz $MC/mc_convert.pl -t fi < fi.dz.txt | gzip -c > wordlist.fin.dz.gz
 $MC/mc_convert.pl -t tr < tr.dz.txt | gzip -c > wordlist.tur.dz.gz</code> $MC/mc_convert.pl -t tr < tr.dz.txt | gzip -c > wordlist.tur.dz.gz</code>
 +
 +===== Zpracování převrácených slov a hledání předpon =====
 +
 +<code># lrc
 +cd $MC/data/2008
 +foreach l (ar de en fi tr)
 +  $MC/reverse.pl < $l.csts > $l.rev.csts
 +  qsub.csh $MC/mc_jazyk.csh $l.rev
 +end</code>
 +
 +<code>foreach l (ar de en fi tr)
 +  cat $l.rev.kmeny.txt | $MC/reverse_line.pl > $l.kmeny1.txt
 +  cat $l.rev.koncovky.txt | $MC/reverse_line.pl > $l.predpony.txt
 +  $MC/mchallenge3.pl $l.predpony.txt $l.kmeny1.txt $l.kmeny.txt $l.koncovky.txt < wordlist.$l.txt > $l.dz3.txt
 +end</code>
  
 ===== Zbývá udělat ===== ===== Zbývá udělat =====
Line 82: Line 97:
   * Odeslat výsledky Mikkovi.   * Odeslat výsledky Mikkovi.
  
 +===== Postřehy =====
 +
 +Předpony, zdá se, fungují, ale na rozdíl od přípon by to tu nechtělo dávat společná písmena ke kmeni, nýbrž k&nbsp;předponě.
 +
 +Jednopísmenné předpony jsou problém. Nemůžu je úplně zakázat (české //o-, u-//), ale ve výstupu se mi nezdravě množí.
 +
 +Segmentaci dělám hladově, i když by to chtělo chart parser. Problém: máme 2 seznamy kmenů (jeden zbytky po předponách, druhý po příponách). Který seznam použít?
 +
 +Algoritmus 3 (předpony + kmeny + přípony) nedělá to, co má. Jaktože nepoznal vzor //abrupt - abruptly - abruptness//, když všechna tato slova jsou v&nbsp;datech a //-ly// i //-ness// jsou běžné koncovky?

[ Back to the navigation ] [ Back to the content ]