[ Skip to the content ]

Institute of Formal and Applied Linguistics Wiki


[ Back to the navigation ]

Differences

This shows you the differences between two versions of the page.

Link to this comparison view

Both sides previous revision Previous revision
Next revision
Previous revision
Next revision Both sides next revision
user:zeman:interset:to-do [2008/03/29 22:35]
zeman Cannot move voc from subpos to variant.
user:zeman:interset:to-do [2009/02/17 17:53]
zeman clitic_s
Line 8: Line 8:
   * New test in driver-test.pl: does a driver decode into arrays? If so, what features are affected? If not, is it capable of encoding arrays (i.e. does it call the function that gets rid of arrays)?   * New test in driver-test.pl: does a driver decode into arrays? If so, what features are affected? If not, is it capable of encoding arrays (i.e. does it call the function that gets rid of arrays)?
   * New test in driver-test.pl: how many tags / what proportion of the tagset are decoded using the ''other'' feature? Enumerate them. Maybe, tags that set the ''other'' feature should not be considered when building the list of possible feature structures? (Sometimes it happens that a feature-value combination is permitted only in an ''other'' tag. Although the set of set/unset features could be used as an additional clue leading to this tag, such tags are often marginal stuff that one does not want to use as default.)   * New test in driver-test.pl: how many tags / what proportion of the tagset are decoded using the ''other'' feature? Enumerate them. Maybe, tags that set the ''other'' feature should not be considered when building the list of possible feature structures? (Sometimes it happens that a feature-value combination is permitted only in an ''other'' tag. Although the set of set/unset features could be used as an additional clue leading to this tag, such tags are often marginal stuff that one does not want to use as default.)
 +  * Extend the ''print_permitted_fs.pl'' tool so that it can search all available drivers. If it is called that way, it prints the name of the driver in front of every feature structure generated by that driver. Print to STDOUT (now it prints to STDERR). Let the user query and filter the feature structure directly: '$_->{mood} eq "ind" && $_->{other} =~ m/^X/'. Grepping the textual output is less powerful.
 +  * Include the text of the GNU GPL in the released package. Create a //License// page at this website.
 +  * Enable checking out the latest development version directly from the Subversion repository.
 +
 +
  
 ===== Features and values ===== ===== Features and values =====
  
-  * Subpos ''sent'' (special case of punctuation in Prague Dependency Treebank) should be moved to the ''punctype'' feature+  * Normalize processing of pronouns, determiners, interrogative adverbs etc. Old drivers use a different approach from the new ones (beginning with Bulgarian). Pronoun as an independent part of speech will cease to exist. 
-  Zrušit ''pos inf''Udělat z toho pouze jeden z druhů částic. +    * Remove ''pos="pron"''. Distribute pronouns to nouns, adjectives and adverbs. When encoding into a tagset that distinguishes pronouns, detect pronouns by non-empty ''prontype''. Remove subposes of pronouns (''pers'', ''clit''...) 
-  * Udělat pořádek v zájmenech, determinátorechtázacích příslovcích apod. U starších ovladačů jsem používal jiný přístup než u novějších (počínaje bulharštinou), mělo by se to sjednotit. Samostatný slovní druh zájmeno přestane existovat+    * Remove ''subpos = pers'' and ''subpos = recip''. These features should now be captured by ''prontype''
-    * Přece jen přidat kategorie zájmen? Dánové mají: demonstrative, indefinite, interrogative/relative, personal, possessive, reciprocalZrušit podkategorie wh? +    Move ''subpos=clit'' to an independent feature so that it is easier to ask whether a pronoun is personalOr remove the featureThis is connected to the problem of changed processing of pronounsand of the processing of contracted word forms (see below). 
-    * Členy zájmena by se možná vůbec měly rozlišit jinak. Na nejvyšší úrovni by se rozlišovala substantivnost/atributivnost, pak teprve zda to má být raději člen nebo zájmeno. Případně osobní přivlastňovací zájmena by mohla být zvlášť už na nejvyšší úrovniprotože ta se s žádnými členy plést nebudou. +    * Create new value ''prontype = oth''. It will be used when we know that a word is pronoun but we do not know its type and do not want to set the default ''prs'' (personal)
-    * Ze subpos=clit udělat samostatnou vlastnostaby se usnadnil dotazzda je zájmeno osobníNebo tuto vlastnost spíš zrušit. Tohle je jednak problém změny práce se zájmenyjednak připravované koncepce práce se staženými tvary (viz níže)+    * Create new feature or some other means of marking that Czech pronoun contains an encliticised form of the 2nd person of the auxiliary verb "být"as in "ses""sis""tos", "tys"The Multext East tagset defines a special feature called ''clitic_s''used only in Czech
-  * Jemněji roztřídit interpunkciDánové mají vlastní interpunkcipotom symboly (+, $), potom podivnosti, které my ani za interpunkci nepovažujeme. "U-21".+  * Find more fine-grained classification of punctuation and symbolsDanish has punctuation propersymbols (+, $), and strange strings like "U-21".
   * Classification of coordinative conjunctions: copulative, adversative etc. Example: sv::mamba.   * Classification of coordinative conjunctions: copulative, adversative etc. Example: sv::mamba.
-  * Udělat přehled častých prvků, které nemají vlastní slovní druhNapřjak se řeší částice označující infinitiv. +  * Create overview of common elements that do not have their own part of speechE.ginfinitive particles. Specifically, make global classification of "small parts of speech" (pavilón malých šelem :-))especially particlesadpositions and conjunctionspunctuation and foreign words, hyphenated prefixes and abbreviations. (Pronounsdeterminers and numerals are excluded as a separate chapter.) 
-  * Projít jednotlivé sady udělat jakýsi globální přehled třídění malých slovních druhůzejména částicpředložek a spojekmožná samostatně i interpunkce. (Teď nemluvíme o zájmenech a členechty jsou samostatnou kapitolou.) +  * Create an overview of verb formsmoods and tenses in various languages, and their representation in DZ Interset. 
-  * Vymyslet koncepci pro stažené (contracted) tvarykde se do jednoho slova dostaly dva různé slovní druhyZatím to na různých místech řeším různěPatří sem české "proň", "bylť", německé "zum"nejspíš další jevy v dalších jazycích. Zvláštním případem jsou také zájmena-klitika, která se v některých jazycích mohou nebo musí spojit se slovesem či dalšími slovními druhy (české "byls", "sis", "tys", "žes"; španělské "despiértate", "despertarse", "démelo"). V arabštině je podobný problém mnohem větších rozměrů, protožse tam běžně lepí malá slova k velkým (napřspojka "wa", člen "al" aj.)+  * Design methodology for contracted word forms where two different parts of speech have merged in one word. Currently this is solved at different places in different waysExamples: Czech "proň", "bylť", German "zum" and probably other phenomena in other languages. Enclitical pronouns are special case. In some languages they can or must join verb or other words (Czech "byls", "sis", "tys", "žes"; Spanish "despiértate", "despertarse", "démelo"). Similar problem (but to much greater extent) arises in Arabic where the grammar often requires small words being glued to big ones (e.g. "wa" (conjunction), "al" (article) etc.)
  
-Things to think about (not sure that these changes should really be made):+==== Things to think about (not sure that these changes should really be made): ====
  
   * Sloučit vlastnosti ''verbform'' a ''mood''? V současnosti (29.3.2008) se ''mood'' vyskytuje v ar::conll, bg::conll, cs::pdt, da::conll, de::stts, sv::hajic a sadách z nich odvozených. Všude se vyskytuje pouze u určitých sloves (''verbform = fin''), pouze u sv::hajic se vyskytuje ještě u supina, ale tam je stejně uveden indikativ a nic se tím nerozlišuje. Na druhou stranu to, že máme způsob (mood) oddělený, umožňuje nejen říkat tomu správně způsob, ale také nastavit obecné finitní sloveso při dekódování sad značek, které způsob nezachycují. Otázka je, jestli v takovém případě není vždy způsob oznamovací. Divně by to mohlo vypadat v jazycích, kde se způsob tvoří výhradně analyticky, pokud takové jsou. Pokud tyto rysy zůstanou oddělené, mohli zavést nový test (jehož výsledkem by nebyla chyba, ale jen varování), který by hlídal, že když je nastaven způsob, je slovesný tvar nastaven na ''fin''.   * Sloučit vlastnosti ''verbform'' a ''mood''? V současnosti (29.3.2008) se ''mood'' vyskytuje v ar::conll, bg::conll, cs::pdt, da::conll, de::stts, sv::hajic a sadách z nich odvozených. Všude se vyskytuje pouze u určitých sloves (''verbform = fin''), pouze u sv::hajic se vyskytuje ještě u supina, ale tam je stejně uveden indikativ a nic se tím nerozlišuje. Na druhou stranu to, že máme způsob (mood) oddělený, umožňuje nejen říkat tomu správně způsob, ale také nastavit obecné finitní sloveso při dekódování sad značek, které způsob nezachycují. Otázka je, jestli v takovém případě není vždy způsob oznamovací. Divně by to mohlo vypadat v jazycích, kde se způsob tvoří výhradně analyticky, pokud takové jsou. Pokud tyto rysy zůstanou oddělené, mohli zavést nový test (jehož výsledkem by nebyla chyba, ale jen varování), který by hlídal, že když je nastaven způsob, je slovesný tvar nastaven na ''fin''.
Line 31: Line 36:
   * Přejmenovat number = plu na plur?    * Přejmenovat number = plu na plur?
   * Zrušit ''subpos = voc''. Zatím se používá pro vokalizované tvary českých předložek v cs::pdt (a odvozeném cs::conll; nikde jinde). Místo toho by se ale dalo využít ''variant = long''. U tříd předložek to teď narušuje členění na předložky, záložky a "okololožky" (cirkumpozice). **Problém:** jak vokalizované, tak nevokalizované předložky se také vyskytují s ''variant = 1''. Nemůžu do jednoho rysu nacpat současně ''long'' a ''1'', a nemůžu ani říct, že z ''1'' taky plyne vokalizovanost.   * Zrušit ''subpos = voc''. Zatím se používá pro vokalizované tvary českých předložek v cs::pdt (a odvozeném cs::conll; nikde jinde). Místo toho by se ale dalo využít ''variant = long''. U tříd předložek to teď narušuje členění na předložky, záložky a "okololožky" (cirkumpozice). **Problém:** jak vokalizované, tak nevokalizované předložky se také vyskytují s ''variant = 1''. Nemůžu do jednoho rysu nacpat současně ''long'' a ''1'', a nemůžu ani říct, že z ''1'' taky plyne vokalizovanost.
 +  * Define new value //pluralia tantum// (''ptan'') of ''number''? It is present in the Bulgarian CoNLL tagset and it could theoretically be present in other languages, including Czech.
  
 ===== Specific drivers ===== ===== Specific drivers =====
  
   * cs::pdt - reimplement "type L" pronouns as collective pronouns (introduced due to Bulgarian)   * cs::pdt - reimplement "type L" pronouns as collective pronouns (introduced due to Bulgarian)
 +  * cs::pdt - use the new feature ''prepcase'' (introduced due to Portuguese) in distinguishing pronoun forms "jemu" vs. "němu"

[ Back to the navigation ] [ Back to the content ]