第一章 语言模型(自然语言处理课程讲义,Michael Collins,哥伦比亚大学)1.1
介绍在这一节,我们将考虑一个问题,即如何为一个例句集建立语言模型。语言模型最初从语音识别发展起来;对现代的语言识别系统,语言模型依然起着中心作用。语言模型在其他自然语言处理应用中也被广泛应用。我们将在本章讨...
分类:
其他好文 时间:
2014-05-26 20:34:56
阅读次数:
1356
用数学的方法描述语言规律贾里尼克:一个句子是否合理,等同于判断其可能性的大小,用概率来衡量Markov模型:简化条件概率运算。二元模型 Bigram
model,N元模型为什么合理?上下文相关,短程依赖。不足之处:忽略长程依赖性 Long Distance DependencyN的取值?tradeo...
分类:
其他好文 时间:
2014-05-25 23:12:32
阅读次数:
262
第一章 语言模型(自然语言处理课程讲义,Michael Collins,哥伦比亚大学)1.1
介绍在这一节,我们将考虑一个问题,即如何为一个例句集建立语言模型。语言模型最初从语音识别发展起来;对现代的语言识别系统,语言模型依然起着中心作用。语言模型在其他自然语言处理应用中也被广泛应用。我们将在本章讨...
分类:
其他好文 时间:
2014-05-23 07:01:08
阅读次数:
489
第一章 语言模型(Michael Collins的自然语言处理课程讲义,哥伦比亚大学) 1.1
介绍在这一节,我们将考虑一个问题,即如何为一个例句集建立语言模型。语言模型最初从语音识别发展起来;对现代的语言识别系统,语言模型依然起着中心作用。语言模型在其他自然语言处理应用中也被广泛应用。我们将在本章...
分类:
其他好文 时间:
2014-05-21 19:57:32
阅读次数:
404
语言模型 概率语言模型 神经概率语言模型 Deeplearning...
分类:
其他好文 时间:
2014-05-07 08:28:47
阅读次数:
431
先看一下语言模型的格式
[html]
view plaincopyprint?
\data\ ngram 1=64000 ngram 2=522530 ngram 3=173445 \1-grams: -5.24036 'cause -0.2084827 -4.675221 'em -0.221857 -...
分类:
其他好文 时间:
2014-05-07 06:04:11
阅读次数:
388