• na portalu prezentovany tri hry: Shannon Game (pro dva hrace), Place the Space (pro jednoho hrace), PlayCoref (pro jednoho a pro dva hrace)
• vsechny tri hratelne v anglictine s vetami a s odstavci z Sherlocka Holmese
• pro kazdou hru existuje demo cesky i anglicky a how to play pruvodce anglicky, pro Shannona i cesky
• prvni predstaveni portalu sirsi odborne verejnosti Play the Language Competition, december 2010

• Barbora Hladka (koordinace)
• Jiri Mirovsky (data)
• Jan Kohout (implementace her)
• Vladimir Rovensky (sprava LGame)

• 31. ledna, 11:30, chodba k S1

• Ukoly pro Honzu

1. Presun LGame na novy server. Realizace s Milanem Fucikem. (Do konce ledna)
   • JK: Myslim, ze nam staci Apache server + PHP + PostgreSQL, pro zacatek asi nejlip ve stejne verzi, jako jsou na soucasnem serveru, aby nenastaly nahodou problemy s kompatibilitou.
2. Kliknuti na vlajecku znamena, ze se zobrazi lokalizace odpovidajiciho jazyka (nebo jineho, predem stanoveneho, napr. thajstina –> anglictina). Zaroven to znamena, zase az na vyjimky, ze s texty prislusneho jazyka chce hrac hrat. Proto doplnit vlajecky k demum. (Do 4. unora))
   • JK: Pridavani novych jazykovych verzi her je uz ted docela dobre navrzene, co se Flashe tyce, tak to nepotrebuje menit program, staci, kdyz se prida dalsi xml s prekladem jednotlivych popisku GUI. V PHP by to take nemelo vyzadovat vetsi zasahy (co se API jednotlivych her tyce).
3. Na vhodnych forech hledat designera. (Vyvesit inzerat do konce ledna)
4. Zvetsit velikost hracich oken ve spolupraci s Vladimirem. (Do 25. ledna)
5. Programatorska dokumentace. (Do konce unora)
6. Export dat ze souteze PlayCoref –> preslat Jirkovi. (Do konce ledna)
7. Uzivatelske zprijemneni. System by si mel pamatovat, s jaky nastavenim portalu hrac skoncil. Pri naslednem prihlaseni se objevi prave toto nastaveni. (tj. jakou hru, jaky jazyk ma uzivatel rad:-))
8. Data. Pokud nemame “spolehliva” data, brat vystupy z predchozich partii. Prvni hrac je na tom nejhur, pro nej se pouzije automaticka procedura - zohlednit pri pocitani skore. Spolehlivost anotace. Vyzkouset u PlayCoref.
9. Shannon Game
   • Pro jednoho hrace.
   • Ze stareho svn repozitare vytahnout zdrojak Shannona.
10. Place the Space
    • Implementovat verzi pro dva hrace.
    • Podrobnosti na strance Place the space.

• Ukoly pro Jirku

1. Najit Conana Doyla v cestine. (JM: Studie v šarlatové nalezeny dvě; první v překladu z roku 1907 (bezpochyby “free”, ale jazykově spíš nepoužitelná), druhá novější na serveru http://ld.johanesville.net/doyle-06-studie-v-sarlatove?page=1, ale nic tam nepíšou o roku překladu a o autorských právech)
2. Thajske texty pro PtS. (ani cinstina, ani hindi nejsou vhodnymi kandidaty - bud se tam mezery pisou nebo je to jeste jinak komplikovany). Korpus s mezerama. (Do 15. unora - navrhuji vzhledem k deadlinu na IJCNLP 20. kvetna)
3. exportovana data z prosincove souteze nachystat tak, abychom je mohli analyzovat (Do konce unora)
4. vypsat projekty (Do konce unora)

• Ukoly pro Baru

1. sjednotit anglickou a ceskou lokalizaci LGame (Do konce ledna)
2. promluvit s Nathanem Greenem - on ma rovnez nejake hry, snad i pro Named Entity. (Do konce ledna)
3. nachystat osnovu clanku do PBMl (Do konce brezna, deadline mame na konci kvetna); viz svn \playlang_UFAL\doc\papers\2011_PBML_96
4. vypsat rocnikove projekty (Do konce unora)
   1. implementace Place the Space pro iPhone a Android
   2. nova hra: koherence textu: na urovni vety: prehazet poradi slov ve vete, uzivatel rekonstruuje puvodni poradek slov ve vete - implementovat pro iPhone, Android.

• Ukoly pro Vladimira

1. zmenit proporce na strankach LGame tak, aby uzivatel nemusel scrollovat, aby videl napriklad odkayz pod hlavnim oknem (Do konce ledna)

—

• Pro kazdou hru mit automatickou proceduru, ktera se nasadi jako (virtualni) protihrac.
• Nove hry
  • Pojmenovane entity - viz PlayNE.
  • Koherence vety/odstavce. Na vstupu prehazena slova vety, hrac je usporada dle jeho citu “spravne”. Na urovni odstavcu by se zamichalo s poradim vet.
  • …
• Vypsat rocnikove projekty, bakalarky, diplomky! VOlnost v technologiich, ale pozor na PLUGINS!!!

• GACR 2012 (po trech neuspesnych pokusech frustrace, ale … )
• PBML 96, rozsah: 20 stranek, deadline: May 30, 2011.
• IJCNLP, Chiang Mai, Thailand, Nov 8-13, System Demo, deadline: May 20, 2011.
• …

1. OON
   1. Jan Kohout, student, 24 tis.
   2. Vladimir Rovensky, student, 5 tis.
2. Sluzby
   1. Design her, 20 tis.
3. Naklady na prezentaci, 20 tis.
4. LGame hosting, cca 2 tis. (nevim presne)

• images, tunes, “nějaká” data z ESP Game a z Peekaboom jsou ke stažení (zalistuj trochu níž)
• ontologies (semantic web)
• Carolina Parada with Fred Jelinek
• text (náš LGame)
• Phrase Detectives anaphora resolution
  • JM Docela pekny. Vzdycky se ptaji na jednu konkretni vec, to se podoba mymu puvodnimu navrhu. Chvilku jsem to zkousel, nevim ale, jak dlouho by me to bavilo, moc asi ne. Graficky je to nezajimavy (hra se odehrava jen v kousku obrazovky na obycejnem textu), tam je prostor ke zlepseni hratelnosti.
  • BH
  1. Napad s detektivem se mi libi.
  2. Graficky je uvodni strana celkem pekna, ale na muj vkus je tam prilis mnoho informaci. Musim toho pomerne dost precist, abych mohla zacit hrat.
  3. Postradam dynamiku.
  4. Vzdy se ma najit “closest” - nevim, co se stane, kdyz nevyberu nejblizsi.
• Human Computation Workshop Paris, France, June 2009

• Open Mind
• Amazon Mechanical Turk is an online labor market where workers are paid small amount of money to complete small tasks.
• Yahoo answers
• ANAWIKI - pod timto projektem vznika Phrase Detectives - viz vyse
• Flash hry - jak pekne muze vypadat design hry

• (Snow et al., 2008) Cheap and Fast - But is it Good? ... , Proceedings of the Conference on Empirical Methods in Natural Language Processing, Waikiki, Honolulu, Hawaii, 2008, pp. TBA. affect recognition, word similarity, recognizing textual entailment, event temporal ordering, word sense disambiguation; see discussion at Dolores' blog
  • Bara's summary:
    • the units under the consideration: headlines (i.e. a single sentence), word-pairs, two sentences, paragraphs (I do not know what is the average length of them (sentences/words)?) So the documents are still real challenge:-))
    • a term “crowdsourcing”
    • their annotation tasks deal with labels of a broad scale. That is why they present a numerical (probabilistic) method to correct the non-expert annotations - I have to go through it!
    • when comparing non-expert and expert annotations, one has to say who are the experts!!!! - I miss it in the paper.
• Coling 2008 workshop on Human judgments in Computational Linguistics.
• Google TechTalks July 26, 2006 Luis von Ahn
• Google Technology RoundTable, Mike Cohen, Franz Josef Och

Date: Fri, 10 Oct 2008 09:42:43 +0200, updated on Tue, 7 Apr 2009
From: Jiří Mírovský

napadly me dve dalsi jazykove hry, ale bohuzel nejsou lingvisticky uzitecne
(nenapada me, jak ta data vyuzit) - jen by mohly byt zabavne pro hrace a
naladit je na jine, mene zabavne lingvisticke hry.
Plus jedna, ktera by uzitecna byt mohla.

1. Hraci dostanou vetu bez mezer mezi slovy a jejich ukolem je nadelat tam mezery, tedy provest tokenizaci. Jediny mozny uplatneni vidim na jazycich jako je thajstina, kde se mezery mezi slovy opravdu nepisou a na konferencich se prednasi o tom, jak to automaticky delat. viz Place the space
2. Hraci dostanou vetu s prehazenejma slovama (kazdy jinak, nahodne). Jejich cilem je sestavit puvodni vetu. Hraji, dokud se neshodnou, vyhrava ten, kdo to mel driv. Tady uz vubec nevidim zadne vyuziti vlastnich dat, ale mohlo by to fungovat jako reklama na lingvisticke hry, protoze bych rekl, ze tohle hrace bude bavit. Aby to bylo spravedlive, algoritmus na nahodne prehazeni slov by musel byt chytry, aby to prehazel pro oba hrace ruzne, ale stejne obtizne.
3. Speech reconstruction (nebo jak se tomu odborne rika) - hraci dostanou vetu z rozpoznavace reci a jejich ukolem je udelat z toho standardni ceskou vetu - bez koktani, opakovani apod.
4. Koherence textu - hráči dostanou text s přeházenými větami - dostanou množinu vět. Cílem je sestavit původní text - seřadit věty. Lucie tvrdí, že to jde vždy, když je text dobře napsaný. Měla na to diplomku. Já tvrdím, že jsou případy, kdy to nejde rozhodnout. Ale hra by z toho mohla být pěkná.

• Projit si hry, ktere vydavaji velka vydavatelstvi (Hasbro, …) a hledat motivaci.

Projekt využívá SVN repozitář, návod k použití zde:
https://svn.ms.mff.cuni.cz/projects/PlayLang

Samotná textová data nejsou ovšem součástí repozitáře (k pracovní kopii se jen přilinkují, viz návod v odkazu výše), k nalezení jsou zde:

/net/projects/playlang_shared

Date: Wed, 24 Dec 2008
Updates: 6 Jan 2009, 27 Mar 2009, 21 Jan 2011
From: Jiří Mírovský

Důvody:

• automatická lemmatizace a morfologická disambiguace textů je uspokojivě zvládnutý problém, pro nás téměř zadarmo
• rozdělení textu na věty je až na morfologické rovině
• automatické procedury pro předzpracování textů (např. detekce kandidátů pro koreferenci) budou lemmatizaci a morfologii nejspíš potřebovat
• morfologická rovina jde dobře zobrazit v Tredu

Alternativně používáme také rozšíření a-roviny z PDT 2.0.

Data pro projekt playlang jsou v adresáři: {ROOT}/playcoref/data/shared

PML schémata jsou zde: {ROOT}/playcoref/tred_extension/package/playlang/resources

• obě schémata (a- i m-) obsahují rozšíření o atribut coref - seznam struktur pro anotaci koreference; o strukturu jde proto, aby šly snadno přidat další atributy (podobně jako v projektu anotování rozšířené textové koreference); obsahuje atributy:
  • target-node.rf - id antecedenta
  • type - určuje, o jakou koreferenci jde: textual, grammatical nebo chained (chained znamená: na povrchové rovině je to jeden link, na tekto rovině je to více linků vedoucích přes uzel, který nemá povrchové vyjádření)
  • lock - pro účely hry PlayCoref zamyká či odemyká jednotlivé šipky (hodnoty: locked/unlocked)
• dalším rozšířením obou schémat je možnost vkládat informaci o pojmenovaných entitách, a to ve struktuře named_entity s těmito atributy:
  • last_member.rf - id uzlu, kde pojmenovaná entita končí (začíná na aktuálním uzlu)
  • head_member.rf - id uzlu, který je hlavou pojmenované entity

V adresáři {ROOT}/playcoref/scripts jsou skripty pro převod textové a gramatické koreference z rozšířené tektogramatické roviny projektu bridging do rozšířené m-roviny nebo do rozšířené a-roviny:

• _change_mschema_to_playlang.sh - změní schéma m-souborů na mdata_schema_playlang.xml
• _change_aschema_to_playlang.sh - změní schéma a-souborů na adata_schema_playlang.xml (m-soubor je pak klasický z PDT 2.0)

• coreference_extract_surface_joint.ntred - prochází textovou a gramatickou koreferenci na t-rovině z projektu anotování rozšířené textové koreference a vypíše seznam koreferenčních dvojic - identifikátorů příslušných koreferenčních lemmat na m-rovině; pokud antecedent nemá povrchové vyjádření, hledá se nejbližší antecedent v řetězci, který povrchové vyjádření má
• coreference_extract_surface_a_joint.ntred - totéž, ale pro a-rovinu, tj. vypisují se identifikátory a-uzlů odpovídajících koreferenčním dvojicím z t-roviny

• coreference_add_m.ntred - ze seznamu bere dvojice identifikátorů koreferenčních lemmat na m-rovině a tyto koreference vkládá do rozšířené m-roviny
• coreference_add_a.ntred - ze seznamu bere dvojice identifikátorů koreferenčních lemmat na a-rovině a tyto koreference vkládá do rozšířené a-roviny

• coreference_lock.ntred - koreferenční šipky opatří správnými hodnotami atributu lock

• To se provádí v TectoMT (kde se ostatně pojmenované entity v souborech automaticky označí). Skript pro vytvoření seznamu pojmenovaných entit se jmenuje ne_atrees_to_txt.pl a nachází se v TectoMT repozitáři v adresáři personal/mirovsky/coreference.

• named_entities_add_a.ntred - ze seznamu bere id uzlů a informaci o pojmenovaných entitách vkládá do rozšířené a- nebo m-roviny

Pro vkládání dat do herní databáze používáme formát csts.

• convert_atrees_to_csts.ntred - skript pro převod rozšířené a-roviny obsahující koreferenci (a případně pojmenované entity) do rozšířeného csts

Pro Tred existuje rozšíření Play the Language (playlang), nainstalovat lze přes Session→Manage Extensions.
(zdroj: {ROOT}/playcoref/tred_extension)
Umožňuje otevřít rozšířené m-soubory nebo rozšířené a-soubory a zobrazit koreferenční šipky. Nastavuje zobrazení kontextových “stromů” a kontextových vět a v nich zvýrazňuje prvky koreferenčních řetízků, ve kterých se účastní aktuální slovo. Zamčené a nezamčené koreferenční šipky zobrazuje odlišně.
Pozor, při otvírání souborů s maskou *.m.gz v souborovém dialogu v Tredu je potřeba přepnout filtr souborů na “všechny soubory”, aby byly soubory s touto maskou vidět.

Ovládání:
Ctrl+t - zapne/vypne zobrazení šipek koreference a zvýraznění prvků koreferenčních řetízků aktuálního slova v kontextových větách
Alt+p - přepne do čistě morfologického módu - nejsou zobrazeny kontextové “stromy” a věty, nezobrazují se koreferenční šipky
Alt+c - přepne do módu playcoref - zobrazují se kontextové “stromy” a věty, zobrazují se koreferenční šipky i slova

Aktuální uzel lze měnit jak kliknutím na uzel, tak i jednoduchým kliknutím na slovo v kontextových větách.