This is an old revision of the document!
Převod mezi CoNLL a PML
Převod z CoNLL do PML
Pro převod formátu CoNLL do PML slouží nástroj conll2pml, který napsal Petr Pajas, ale nyní je také součástí Danových nástrojů pro parsing:
$PARSINGROOT/tools/conll2pml.pl --technical-root --max-sentences 1000000 danish-train.conll
Při převodu do PML jsou zachovány původní značky. Program vytvoří v aktuální složce soubor out_schema.xml
a jeden nebo více souborů ve tvaru out_NNNN.pml
, kde NNNN jsou číslice. Pokud nepoužijete volbu –max-sentences, použije se výchozí hodnota 100, tj. program vytvoří nový soubor pro každých zhruba 100 vět. Výše uvedené nastavení zařídí, že pro běžné korpusy (milión vět už je opravdu hodně) dostanete jen jeden výstupní PML soubor a jedno schéma. Ovšem pozor, takový PML soubor může být nepříjemně veliký (např. pro necelých 1500 arabských vět je to přes 17 MB).
Volba –technical-root je rovněž nezbytná pro uživatele zvyklé na prostředí pražských korpusů. Bez ní program považuje za kořen každý uzel, který uvádí závislost na uzlu 0. Většina stromů se tak rozpadne na lesy. S volbou –technical-root dostaneme jeden strom, ve kterém jsou tyto pseudokořeny spojeny pod jeden umělý uzel, kořen stromu.
Další podrobnosti:
$PARSINGROOT/tools/conll2pml.pl --help