如何在 Erlang 中将重音字符串转换为常规字符串？

Question

我想将一些带有重音字符的城市名称转换为普通字符串。例如：

<<"Sosúa">>  to  <<"Sosua">>

<<"Luperón">> to <<"Luperon">>

关于如何做到这一点的任何线索？

Answer 1

1. 应用Unicode Canonical Decomposition (NFD) 来重写两个代码点o (U+6F) 中的ó 等字符，后跟unicode:characters_to_nfc_binary/1 的分隔组合重音符号(U+301)
2. 使用正则表达式 \p{Mn}，替换 (re:replace/4) 所有组合变音符号（非空格标记）的所有那些，如上面的 U+301
3. 可选：应用 Unicode 规范组合 (NFC) 将剩余和可能的代码点重新组合在一起

String = "Luperón",
{ok, Re} = re:compile("\\p{Mn}", [unicode]),
Output = unicode:characters_to_nfc_binary(
  re:replace(
    unicode:characters_to_nfd_binary(String),
    Re,
    "",
    [global]
  )
),
Output.

等效于 Elixir，供参考和信息（因为它也是基于 Erlang 的 unicode 模块）：

string = "Luperón"
output = 
  Regex.replace(~R<\p{Mn}>u, string |> :unicode.characters_to_nfd_binary(), "")
  |> :unicode.characters_to_nfc_binary()