注释语料库（Syntaxnet）

Question

我在Syntax official documentation on Github 之后下载并安装了 SyntaxNet。按照文档（注释语料库），我尝试通过 SyntaxNet 读取名为wj.conll 的.conll 文件并将结果写入wj-tagged.conll，但我不能。我的问题是：

1. SyntaxNet 是否总是读取.conll 文件？ （不是.txt 文件？）。我有点困惑，因为我知道 SyntaxNet 读取 .conll 文件以进行训练和测试过程，但我有点怀疑是否有必要将 .txt 文件转换为 .conll 文件才能获得他们的词性和依赖解析。

2. 如何使 SyntaxNet 从文件中读取（我厌倦了 GitHub 文档中有关 SyntaxNet 的所有可能方式的解释，但它对我不起作用）

Answer 1

将这些声明行添加到文件末尾的“context.pbtxt”。这里的“inp”和“out”是syntexnet根目录下的文本文件。

   input {
   name: 'inp_file'
   record_format: 'english-text'
     Part {
     file_pattern: 'inp'
     }
   }
   input {
   name: 'out_file'
   record_format: 'english-text'
     Part {
     file_pattern: 'out'
     }
   }

将句子添加到您希望为其完成标记的“inp”文件中，并在下次使用 --input 和 --output 标签运行 syntaxnet 时在 shell 中指定它们。

为了对您有更多帮助，我粘贴了一个示例 shell 命令。

bazel-bin/syntaxnet/parser_eval \
--input inp_file \
--output stdout-conll \
--model syntaxnet/models/parsey_mcparseface/tagger-params \
--task_context syntaxnet/models/parsey_mcparseface/context.pbtxt \
--hidden_layer_sizes 64 \
--arg_prefix brain_tagger \
--graph_builder structured \
--slim_model \
--batch_size 1024 | bazel-bin/syntaxnet/parser_eval \
--input stdout-conll  \
--output out_file \
--hidden_layer_sizes 512,512 \
--arg_prefix brain_parser \
--graph_builder structured \
--task_context syntaxnet/models/parsey_mcparseface/context.pbtxt \
--model_path syntaxnet/models/parsey_mcparseface/parser-params \
--slim_model --batch_size 1024

在上面的脚本中，第一个shell命令的输出（POS标记）被用作第二个shell命令的输入，其中两个shell命令用“|”分隔

Answer 2

如果您想将 demo 的输出保存在 .txt 文件中，这只是一个快速帮助：

试试echo "open file X with application Y" | ./demo.sh > output.txt 它为您提供当前目录的句子树。