Turkish Natural Language Processing

1 Turkish and its Challenges for Language and Speech Processing . . . . 1 1.1 Introduction . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1
1.2 Turkish Morphology . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 3 1.3 Constituent Order and Morphology-Syntax Interface . . . . . . . . . . . . 7 1.4 Applications . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 10 1.5 State-of-the-art Tools and Resources for Turkish . . . . . . . . . . . . . . . 15 References . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 17 2 Morphological Processing for Turkish . . . . . . . . . . . . . . . . . . . . . . . . . . 21 2.1 Introduction . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 21 2.2 Overview of Turkish Morphology . . . . . . . . . . . . . . . . . . . . . . . . . . . . 22 2.3 Morphophonology and Morphographemics . . . . . . . . . . . . . . . . . . . . 23 2.4 Root Lexicons and Morphotactics . . . . . . . . . . . . . . . . . . . . . . . . . . . 27 2.4.1 Representational Convention . . . . . . . . . . . . . . . . . . . . . . . . 28 2.4.2 Nominal Morphotactics . . . . . . . . . . . . . . . . . . . . . . . . . . . . 29 2.4.3 Verbal Morphotactics . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 29 2.4.4 Derivations . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 30 2.4.5 Examples of Morphological Analyses . . . . . . . . . . . . . . . . 32 2.5 The Architecture of the Turkish Morphological Processor . . . . . . . . 34 2.6 Processing Real Texts . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 35 2.6.1 Acronyms . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 35 2.6.2 Numbers . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 36 2.6.3 Foreign Words . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 36 2.6.4 Unknown Words . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 36 2.7 Multiword Processing . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 37 2.7.1 Lexicalized Collocations . . . . . . . . . . . . . . . . . . . . . . . . . . . 38 2.7.2 Semi-lexicalized Collocations . . . . . . . . . . . . . . . . . . . . . . . 38 2.7.3 Non-lexicalized Collocations . . . . . . . . . . . . . . . . . . . . . . . . 40 2.8 Conclusions . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 44 References . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 50
3 Morphological Disambiguation for Turkish . . . . . . . . . . . . . . . . . . . . . . 53 3.1 Introduction . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 53 3.2 Challenges . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 55 3.3 Previous Work . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 55 3.3.1 Rule-based Methods . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 56 3.3.2 Learning the Rules . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 57 3.3.3 Models Based on Inflectional Group n-grams . . . . . . . . . . 59 3.3.4 Discriminative Methods for Disambiguation . . . . . . . . . . . 60 3.4 Discussion . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 63 3.4.1 Data Sets . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 63 3.4.2 Experimental Results . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 64 3.5 Conclusions . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 65 References . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .