Rumah > pembangunan bahagian belakang > Golang > Bagaimana untuk Mengeluarkan Diakritik dengan Cekap daripada Rentetan UTF-8 dalam Go?

Bagaimana untuk Mengeluarkan Diakritik dengan Cekap daripada Rentetan UTF-8 dalam Go?

Susan Sarandon
Lepaskan: 2024-12-08 14:03:11
asal
580 orang telah melayarinya

How to Efficiently Remove Diacritics from UTF-8 Strings in Go?

Mengalih keluar Diakritik dalam Go

Apabila bekerja dengan rentetan yang dikodkan UTF8, mungkin perlu mengalih keluar diakritik, seperti aksen daripada "žůžo " untuk mendapatkan "zuzo". Untuk mengendalikan senario sedemikian dengan cekap, terdapat perpustakaan dan teknik standard yang tersedia dalam Go.

Satu pendekatan melibatkan memanfaatkan fungsi unicode.Is() untuk mengenal pasti diakritik (aksara yang dikelaskan sebagai "Mn" untuk tanda bukan jarak).

Coretan kod berikut menunjukkan cara mengalih keluar diakritik daripada rentetan tertentu menggunakan unikod/norma dan pakej golang.org/x/text/transform:

package main

import (
    "fmt"
    "unicode"

    "golang.org/x/text/transform"
    "golang.org/x/text/unicode/norm"
)

func isMn(r rune) bool {
    return unicode.Is(unicode.Mn, r) // Mn: nonspacing marks
}

func main() {
    t := transform.Chain(norm.NFD, transform.RemoveFunc(isMn), norm.NFC)
    result, _, _ := transform.String(t, "žůžo")
    fmt.Println(result)
}
Salin selepas log masuk

Kod ini mengalih keluar diakritik dengan menggunakan siri transformasi:

  1. Penguraian Borang Normal (NFD): Memecahkan rentetan kepada aksara Unikod asasnya, termasuk diakritik.
  2. RemoveFunc(isMn): Menapis keluar aksara yang merupakan tanda bukan jarak (diakritik).
  3. Gubahan Borang Normalisasi (NFC): Menggubah Semula rentetan tanpa diakritik.

Sebagai hasilnya, output akan menjadi rentetan diakritik yang dilucutkan, seperti dalam contoh: "žůžo" => "zuzo".

Atas ialah kandungan terperinci Bagaimana untuk Mengeluarkan Diakritik dengan Cekap daripada Rentetan UTF-8 dalam Go?. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!

sumber:php.cn
Kenyataan Laman Web ini
Kandungan artikel ini disumbangkan secara sukarela oleh netizen, dan hak cipta adalah milik pengarang asal. Laman web ini tidak memikul tanggungjawab undang-undang yang sepadan. Jika anda menemui sebarang kandungan yang disyaki plagiarisme atau pelanggaran, sila hubungi admin@php.cn
Artikel terbaru oleh pengarang
Tutorial Popular
Lagi>
Muat turun terkini
Lagi>
kesan web
Kod sumber laman web
Bahan laman web
Templat hujung hadapan