自然語言處理中的概率語法

上下文無關(guān)語法在處理句法歧義時遇到了困難,概率上下文無關(guān)語法和概率詞匯化上下文無關(guān)語法為解決句法歧義問題提供了有力的手段.概率語法給一個句子或者單詞的符號串指派一個概率,從而捕捉比一般的上下文無關(guān)語法更加細致的句法信息.概率上下文無關(guān)語法也是一種上下文無關(guān)語法,其中的每一個規(guī)則都標上選擇該規(guī)則的概率,處理每一個上下文無關(guān)規(guī)則時,都假定它們在條件上是獨立的,一個句子的概率使用剖析該句子時每一個規(guī)則的概率的乘積來計算.CYK算法是一種自底向上的動態(tài)規(guī)劃剖析算法,經(jīng)過概率上下文無關(guān)語法增強之后,概率CYK算法就可以計算在剖析一個句子時的剖析概率.概率上下文無關(guān)語法的概率可以通過統(tǒng)計已經(jīng)剖析好的語料庫(樹庫)中的規(guī)則而得到,也可以通過直接剖析尚未加工過的語料庫而得到.當剖析的句子有歧義的時候,可以使用向內(nèi)向外算法來處理.概率詞匯化上下文無關(guān)語法要考慮每一個規(guī)則的詞匯中心語,規(guī)則的概率要以詞匯中心語和鄰近的中心語作為它的條件,這樣就進一步增強了規(guī)則的功能.

作 者： 馮志偉 Feng,Zhiwei   作者單位： 韓國科學(xué)技術(shù)院  刊 名： 當代語言學(xué)  PKU CSSCI 英文刊名： CONTEMPORARY LINGUISTICS  年，卷(期)： 2005 7(2)  分類號： H0  關(guān)鍵詞： 上下文無關(guān)語法   概率上下文無關(guān)語法   概率CYK算法   概率詞匯化上下文無關(guān)語法  

【自然語言處理中的概率語法】相關(guān)文章：

心理測驗中的趨中回歸與超常分數(shù)重現(xiàn)概率04-26

概率統(tǒng)計方法在企業(yè)風(fēng)險管理中的應(yīng)用04-27

淺談英語教學(xué)中的趣味語法04-26

淺談城市中垃圾的處理04-26

速分技術(shù)在中水處理中的應(yīng)用04-26

曝氣生物濾池在中水處理中的應(yīng)用04-25

幾種中水處理技術(shù)簡介04-26

Excel中VBA處理數(shù)據(jù)的優(yōu)勢04-27

電絮凝在水處理中的應(yīng)用04-27

人工濕地在水處理中的應(yīng)用04-25