基于規(guī)則的藏語句法分析研究.pdf

1、本文對基于規(guī)則的藏語句法分析進行了研究。句法分析是自然語言處理過程中一項基礎(chǔ)性的工作，從二十世紀(jì)四十年代末到現(xiàn)在，國內(nèi)外學(xué)者們設(shè)計了很多自然語言處理的形式模型，這些模型有基于短語結(jié)構(gòu)語法的形式模型、基于合一運算的形式模型、基于依存和配價的形式模型、基于詞匯主義的形式模型、N元語法、數(shù)據(jù)平滑和隱馬爾可夫模型等，它們都對自然語言處理中的句法分析研究做出了積極的貢獻。文中所提基于規(guī)則的句法分析方法主要是指chomsky的上下文無關(guān)文法，也是基

2、于短語結(jié)構(gòu)的語法。分詞、詞性標(biāo)注以及句法結(jié)構(gòu)的樹形圖表示，都屬于句法分析的研究范疇。在描述分詞部分時，對分詞歧義類型及消歧方法做了詳細(xì)的分析。除了利用傳統(tǒng)的最大概率匹配法分詞外，還提出了一種利用轉(zhuǎn)移概率消解分詞歧義的方法，文中稱這種方法為詞性轉(zhuǎn)移概率消歧法，它在消解分詞歧義上比最大概率匹配法更優(yōu)越。自動詞性標(biāo)注是在藏語HMM模型基礎(chǔ)上，用Viterbi算法進行的，還對藏語中的典型詞性歧義及其消解方法做了分析。在句法結(jié)構(gòu)的自動表示上，首先

3、把藏語句型分成六個大類，并以此為依據(jù)，構(gòu)建了一個規(guī)模為480余個句法樹的樹庫，然后利用詞性串匹配法，以樹形圖表示出藏語句子的句法結(jié)構(gòu)。考慮到文中所用句法分析方法不能像線圖算法、LR算法和Earley算法那樣表示歧義句的句法結(jié)構(gòu)。因此，對藏語中的常見歧義句做了分類，歸納出歧義句中存在的一些規(guī)律，利用概率上下文無關(guān)語法對句子歧義做了處理，使本文的句法分析系統(tǒng)具備解決簡單歧義問題的能力。文中設(shè)計的句法分析器，能按照詞性串匹配算法把樹庫中的所有