Redigerer Dependensparsing (avsnitt)

=== ''2007: Dependency Parsing: Multilingual & Domain Adaptation'' ===

I 2007 ble oppgaven fra året før, utvikling av en parser som skal fungere på tvers av språk, videreført med et nytt utvalg av språk. Samtidig ble en sideoppgave innført der en parser for engelsk skulle videreutvikles til å fungere på et nytt felt, eller domene.<ref name="CoNLL 2007 Shared Task">Nivre et al.: [http://www.aclweb.org/anthology/D07-1096 «The CoNLL 2007 Shared Task on Dependency Parsing»]</ref>

De flerspråklige parserne ble i denne oppgaven evaluert på et utvalg av språk som skulle representere en større grad av [[Språktypologi|typologisk]] variasjon. På disse språkene fikk Nilsson best resultat for LAS (80,32) og Nakagawa best resultat for UAS (86,55). Når man ser på de fire språkene som overlappet med 2006-oppgaven ble resultatet for to språk forbedret og ett språk forverret, mens det siste stod på sted hvil. Her turte Nivre et al. å konkludere med at språk med mye morfologi ga konsekvent lavere resultater enn språk med lite morfologi.<ref name="CoNLL 2007 Shared Task" />

Domenetilpasningsoppgaven gikk ut på å tilpasse en parser som var trent på nyheter til å fungere på tekster i det kjemiske domenene samt [[CHILDES]]-korpuset, som består av transkriberte tekster av barn som lærer sitt førstespråk. Vinnersystemet fra Sagae og Tsuji oppnådde for de kjemiske tekstene en LAS på 81,06, sammenlignet med 89,01 for den flerspråklige oppgaven, mens CHILDES-korpuset jevnt over ga dårlige resultater for alle deltakerne. Det ble konkludert med at det hovedsakelige problemet lå i konverteringen fra parsernes annoteringsformat til formatet som ble brukt i oppgaven.<ref name="CoNLL 2007 Shared Task" />