我们可以在拉丁语言中使用什么样的分割规则来编写测试用例？

Question

我们需要为基于拉丁语的语言编写分段逻辑的测试用例。 w.r.t 我发现了很多网站，文档的分段逻辑规则，与我有一个链接“http://www.lisa.org/fileadmin/standards/srx20.pdf”相关，但我们不想使用这个。 现在我们正在寻找可以支持所有拉丁语言的更相关的分词规则，并且可以在分词后使用这些分词规则来测试用于拉丁语言的标点符号、句号、逗号和其他符号的所有可能性？

感谢期待， 文殊菩萨

Answer 1

基于拉丁语的通用分词规则的最佳来源是处理文本分词的 Unicode 标准附件： http://www.unicode.org/reports/tr29/

特别是参见本附件中的segmentation rules for sentences。