Stanford POS Tagger - Windows 和 MapReduce (Linux) 之间的依赖关系

Question

我有以下方法返回一个带有 POS 标签的句子：

String Sentence = "STEERING COLUMN MOVES"
MaxentTagger taggerObject = new MaxentTagger("left3words-wsj-0-18.tagger");
String TaggedSentence = getTaggedSentence(Sentence, taggerObject);

在 Windows 环境中，单词“STEERING COLUMN”返回：NN NN（这是正确的） 但是，在 MapReduce 中实现的完全相同的代码返回：VBG NN

由于某种原因，当我在 MapReduce 的 Mapper 类中调用此方法时，它会将 STEERING 和 COLUMN 标记为单独的对象/概念，而不是一个。

MapReduce 中标记的对象中有 90% 与 Windows 匹配。 10% 是错误的，90% 的错误标签中有 STEERING 字样。

例子：

    Object           |      Windows     |      MapReduce (Linux)
---------------------------------------------------------------------
STEERING COLUMN      |       NN NN      |          VBG NN
STEERING WHEEL       |       NN NN      |          VBG NN
POWER STEERING       |       NN NN      |          NN VBG

任何有关调试这些差异的指导将不胜感激！

Answer 1

事实证明，Java 8 中的标记器更准确。

Windows 版本在 Java 8 中运行，而 MapReduce 版本在 Java 7 中运行。