【发布时间】:2019-08-12 13:22:54
【问题描述】:
我想知道unigram,bigram和posgram之间的含义和区别。我已经搜索了互联网,但我找不到一个全面的答案。任何帮助将不胜感激。
【问题讨论】:
标签: nlp n-gram natural-language-processing
我想知道unigram,bigram和posgram之间的含义和区别。我已经搜索了互联网,但我找不到一个全面的答案。任何帮助将不胜感激。
【问题讨论】:
标签: nlp n-gram natural-language-processing
“这是一个例句”
Unigram:一次考虑一个词 -> “This”或“is”或“an”...
Bigram(或n-gram):考虑n-word组合(bi->n=2)->“This is”、“is an”、“an example”、“example sentence”
Posgram(对此不太确定):同时考虑词性上下文(例如“名词”“动词”...)以预测更多信息。更正式地说,它降低了所选择内容的维度(减少到从名词集中选择一个词,而不是从所有词的更大集合中挑选一个东西)。
【讨论】: