如何使用 Go 标准库将非 ASCII 文本输入规范化为 ASCII？

将文本输入规范化为 ASCII

许多应用程序需要能够解析用户输入并识别书写错误。但是，处理非 ASCII 字符（例如大引号）可能是一个挑战。

使用 stdlib 进行字符串替换

一种常见的方法是使用函数进行字符串替换就像字节一样。替换。虽然对于特定的已知字符有效，但此方法对于处理各种字符可能很乏味。

使用 Strings.Map 函数

Go 标准库提供了更通用的解决方案使用 strings.Map 函数。此函数允许将符文（Unicode 代码点）映射到其他符文。通过定义自定义映射函数，您可以将非 ASCII 字符转换为其等效的 ASCII 字符。

示例

<code class="go">import (
    "fmt"
    "strings"
)

func normalize(in rune) rune {
    switch in {
    case '“', '‹', '”', '›':
        return '"'
    case '‘', '’':
        return '\''
    }
    return in
}

func main() {
    data := "Hello “Frank” or ‹François› as you like to be ‘called’"
    fmt.Printf("Original: %s\n", data)
    cleanedData := strings.Map(normalize, data)
    fmt.Printf("Cleaned: %s\n", cleanedData)
}</code>

输出：

Original: Hello “Frank” or ‹François› as you like to be ‘called’
Cleaned: Hello "Frank" or "François" as you like to be 'called'

以上是如何使用 Go 标准库将非 ASCII 文本输入规范化为 ASCII？的详细内容。更多信息请关注PHP中文网其他相关文章！