Rumah >pembangunan bahagian belakang >Golang >Bagaimana untuk Mengeluarkan Diakritik dengan Cekap daripada Rentetan UTF-8 dalam Go?

Bagaimana untuk Mengeluarkan Diakritik dengan Cekap daripada Rentetan UTF-8 dalam Go?

Susan Sarandon
Susan Sarandonasal
2024-12-08 14:03:11616semak imbas

How to Efficiently Remove Diacritics from UTF-8 Strings in Go?

Mengalih keluar Diakritik dalam Go

Apabila bekerja dengan rentetan yang dikodkan UTF8, mungkin perlu mengalih keluar diakritik, seperti aksen daripada "žůžo " untuk mendapatkan "zuzo". Untuk mengendalikan senario sedemikian dengan cekap, terdapat perpustakaan dan teknik standard yang tersedia dalam Go.

Satu pendekatan melibatkan memanfaatkan fungsi unicode.Is() untuk mengenal pasti diakritik (aksara yang dikelaskan sebagai "Mn" untuk tanda bukan jarak).

Coretan kod berikut menunjukkan cara mengalih keluar diakritik daripada rentetan tertentu menggunakan unikod/norma dan pakej golang.org/x/text/transform:

package main

import (
    "fmt"
    "unicode"

    "golang.org/x/text/transform"
    "golang.org/x/text/unicode/norm"
)

func isMn(r rune) bool {
    return unicode.Is(unicode.Mn, r) // Mn: nonspacing marks
}

func main() {
    t := transform.Chain(norm.NFD, transform.RemoveFunc(isMn), norm.NFC)
    result, _, _ := transform.String(t, "žůžo")
    fmt.Println(result)
}

Kod ini mengalih keluar diakritik dengan menggunakan siri transformasi:

  1. Penguraian Borang Normal (NFD): Memecahkan rentetan kepada aksara Unikod asasnya, termasuk diakritik.
  2. RemoveFunc(isMn): Menapis keluar aksara yang merupakan tanda bukan jarak (diakritik).
  3. Gubahan Borang Normalisasi (NFC): Menggubah Semula rentetan tanpa diakritik.

Sebagai hasilnya, output akan menjadi rentetan diakritik yang dilucutkan, seperti dalam contoh: "žůžo" => "zuzo".

Atas ialah kandungan terperinci Bagaimana untuk Mengeluarkan Diakritik dengan Cekap daripada Rentetan UTF-8 dalam Go?. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!

Kenyataan:
Kandungan artikel ini disumbangkan secara sukarela oleh netizen, dan hak cipta adalah milik pengarang asal. Laman web ini tidak memikul tanggungjawab undang-undang yang sepadan. Jika anda menemui sebarang kandungan yang disyaki plagiarisme atau pelanggaran, sila hubungi admin@php.cn