蒙古文停用詞表和詞干提取對蒙古文文本分類的影響.pdf

1、伴隨著網絡的發(fā)展，文本分類技術成為信息處理領域中重要的研究方向，通常用于處理和組織大量文本數(shù)據。蒙古語在中國來說是少數(shù)民族語言，蒙古文信息處理發(fā)展較慢，但在民族文化傳承和發(fā)展中起著重要的作用。因此研究蒙古文文本分類技術具有非常重要的意義。
　　 本文的研究工作主要包含了以下三方面：(1)語料對分類系統(tǒng)的影響十分大，直接關系到分類系統(tǒng)性能。收集基于蒙古文國際標準編碼的蒙古文文本，進行人工分類，構造用于實驗的小型集合。(2)不同停用

2、詞選擇方法對分類效果的影響不同，迄今為止，關于蒙古文停用詞的研究成果還非常少。分析常用的停用詞統(tǒng)計方法(主要有TF方法、DF方法、EC方法等)，統(tǒng)計出相應的停用詞表。在研究蒙古文詞法、語法的基礎上，提出基于翻譯的停用詞選擇方法。通過實驗比較不同停用詞表對蒙古文文本分類系統(tǒng)的影響。(3)利用蒙古文后綴表進行詞干提取處理。最后采用支持向量機算法作為分類算法，構建蒙古文文本分類系統(tǒng)。
　　 作者收集了850篇蒙古文文本，共分為9個類別