Postavljanje vejic v slovenščini s pomočjo strojnega učenja
| Autor: | Krajnc, Anja |
|---|---|
| Přispěvatelé: | Robnik Šikonja, Marko |
| Jazyk: | slovinština |
| Rok vydání: | 2015 |
| Předmět: |
vejica
naključni gozdovi strojno učenje language manipulation SVM ločila Slovenian language punctuation mark jezikovne tehnologije undersampling prečno preverjanje cross-validation slovenski jezik podvzorčenje comma natural language processing language technologies procesiranje naravnega jezika obdelava jezika random forest machine learning |
| Popis: | Cilj diplomske naloge se je naučiti postavljanja vejic s strojnim učenjem. Naš pristop temelji na generiranju novih atributov na podlagi slovničnih pravil za slovenski jezik, ki z dodatno informacijo omogočijo boljše učenje, tj. višjo natančnost in priklic. Osredotočili smo se na postavljanje vseh vejic v besedilu. Izhajali smo iz že obstoječe raziskave za postavljanje vejic v slovenščini, ki smo jo dopolnili z drugačnimi metodami učenja, drugačnimi parametri, vzorčenjem neuravnoteženih množic ter z dodatnimi informativnimi atributi. Za analizo smo uporabili korpus Šolar in izboljšano verzijo tega korpusa. Za modeliranje smo uporabili sistem za strojno učenje WEKA. Najboljše rezultate smo dosegli z algoritmi naključna drevesa, alternirajoče odločitveno drevo ter odločitvena tabela. We aim to learn comma placing using machine learning. Our approach is based on adding new attributes created from grammatical rules for the Slovenian language, which provides more information and thus enable better learning, i.e., higher precision and recall. We focus on placing all the commas in the text. We modify an existing research with additional learning methods, different parameters, undersampling and knowledge based attributes. We use corpus Šolar and improved corpus Šolar for testing and machine learning toolkit WEKA. Best results were achieved with random forests, alternating decision tree and decision table models. |
| Databáze: | OpenAIRE |
| Externí odkaz: |
|