Finding your way through the woods with GrETEL Liesbeth Augustinus Vincent Vandeghinste Ineke Schuurman Frank Van Eynde TABU-dag - June 14, 2013
GrETEL Greedy Extraction of Trees for Empirical Linguistics Query engine for treebanks Nederbooms project Exploitation of Dutch treebanks for research in linguistics
GrETEL Greedy Extraction of Trees for Empirical Linguistics Query engine for treebanks Nederbooms project Exploitation of Dutch treebanks for research in linguistics Goals o User-friendly tools o Access to large data files o Fast and accurate
GrETEL Greedy Extraction of Trees for Empirical Linguistics Query engine for treebanks Treebank = syntactically annotated corpus e.g. Penn Treebank (English), TüBa (German), LASSY, CGN (Dutch)
TREEBANKS
GrETEL Greedy Extraction of Trees for Empirical Linguistics Query engine for treebanks Treebank = syntactically annotated corpus e.g. Penn Treebank (English), TüBa (German), LASSY, CGN (Dutch) Parser e.g. Alpino (Van Noord 2006)
ALPINO PARSER Dit is een zin. >> ALPINO parser >> “This is a sentence.”
ALPINO PARSER Dit is een zin. >> ALPINO parser >> “This is a sentence.” XML trees Query language: XPath
XPATH and and and and and
XPATH and and and and and
XPATH and and and and and
XPATH
GrETEL Greedy Extraction of Trees for Empirical Linguistics Query treebanks by example
GrETEL Greedy Extraction of Trees for Empirical Linguistics Query treebanks by example First version => only for LASSY treebank New release => GrETEL for CGN treebank => update based on user reviews
GrETEL Example sentence Indicate relevant items of the sentence (Adapt XPath) Select treebank Inspect results Parser (Alpino) Automatically generate XPath expression Present results the user
OUTLINE GrETEL in a nutshell GrETEL demo o Case study o Search options Conclusions and future work
CASE STUDY Verbs with fixed preposition o E.g. Hij keek met een bang hartje naar de heks. ‘he was looking at the witch with a heavy heart.’ o VERB + (…+) PREP LASSY: Xpath query and and and
CASE STUDY Verbs with fixed preposition o E.g. Hij keek naar de heks. ‘he was looking at the witch.’ Discontinuous constructions! o E.g. Hij keek met een bang hartje naar de heks. ‘he was looking at the witch with a heavy heart.’ o VERB + (…+) PREP
GrETEL ONLINE
INPUT
ANNOTATION MATRIX
ANNOTATION GUIDELINES
XPATH GENERATOR
Other treebank, other format … Hij keek met een bank hartje naar de heks CGN and and and LASSY and and and
Other treebank, other format … Hij keek met een bang hartje naar de heks CGN and and and LASSY and and and
TREEBANK SELECTION
RESULTS Verb plus fixed preposition o E.g. Hij keek naar de heks. ‘A number of trees fell down.’ o VERB + (…+) PREP 4004 matches in 3881 sentences
RESULTS: table
RESULTS: data
RESULTS: trees
OUTLINE GrETEL in a nutshell GrETEL demo o Case study o Search options Conclusions and future work
SEARCH OPTIONS Below annotation matrix
SEARCH OPTIONS Green versus red word order in Dutch o green: past participle – auxiliary De NAVO stelt dat ze er alles aan gedaan heeft o red: auxiliary – past participle De NAVO stelt dat ze er alles aan heeft gedaan “The NATO claim that they have done everything in their power” (deredactie.be)
SEARCH OPTIONS
OUTLINE GrETEL in a nutshell GrETEL demo o Case study o Search options Conclusions and future work
CONCLUSIONS GrETEL: search engine for Dutch treebanks Input = natural language example Output = sample of similar sentences Syntactic concordancer Available online (via Mozilla Firefox) No installation required
FUTURE WORK GrETEL 2.0 o Include SoNaR corpus (ca 500M tokens) o More generic AfriBooms o GrETEL for Afrikaans o Include other treebank formats
CASE STUDY Collective noun constructions o E.g. Een aantal bomen zijn omgevallen. ‘A number of trees fell down.’ o DET + NOUN + PLURAL NOUN Discontinuous constructions! o E.g. Een groot aantal oude bomen zijn omgevallen. ‘A large number of old trees fell down.’
Thanks for your attention! Try it yourself at
Waaraan vs Waar … aan Waar denk je aan ? and and and and and and (4 results) Waar bemoei je je mee? Wanneer gaat een koortsstuip over in epilepsie ?
Waaraan denk je ? and and and (38 results) Waarom werken we ? Waartoe verbind ik mij als ouder door dit formulier in te vullen ? Vanwaar die gulle hand van een Turkse overheid die in de schulden zwemt ?
Hij klom de boom in and and and and and and and (37 results) Door haar winst komt Clijsters de top-20 binnen. In feite ging minder dan de helft van Dorsets de rivier over. Nederland gaat de bezettingstijd in.