Bopomofo

De CJK Unified Ideographs vertegenwoordigen een van de meest ambitieuze ondernemingen van Unicode: het samenvoegen van de overlappende karakterreeksen van het Chinees, Japans en Koreaans in één enkele, uniforme codering. Met meer dan 97.000 ideogrammen in het basisblok en de uitbreidingen is dit veruit de grootste verzameling in Unicode. Elk karakter is een semantische eenheid — een concept samengeperst in penseelstreken — waardoor de geschreven communicatie mogelijk wordt van talen die door meer dan 1,5 miljard mensen worden gesproken. De ondersteunende blokken voor radicalen, penseelstreken en compatibiliteitsvormen bieden de infrastructuur voor invoermethoden, woordenboeken en tekstverwerking.

Chinese karakters zijn meer dan 3.000 jaar geleden ontstaan als orakelbotinscripties die in schildpadschilden en dierenbotten werden gegraveerd tijdens de Shang-dynastie. Door de millennia heen evolueerde het schrift via bronzen inscripties, zegelschrift, klerikaal schrift en het reguliere schrift dat vandaag de dag wordt gebruikt. Toen Japan en Korea Chinese karakters overnamen (respectievelijk kanji en hanja), stapelden regionale variaties zich op. Het CJK-unificatieproject, dat eind jaren tachtig werd gestart door geleerden uit alle drie de landen, probeerde te identificeren welke regionale varianten daadwerkelijk hetzelfde karakter waren. Dit controversiële proces, bekend als Han-unificatie, produceerde het CJK Unified Ideographs-blok in Unicode 1.0. Daaropvolgende uitbreidingen hebben tienduizenden zeldzame, historische en regionale variantkarakters toegevoegd om een uitgebreide dekking te garanderen.

Veelvoorkomend gebruik

• Tekstweergave voor de Chinese, Japanse en Koreaanse talen
• Backends voor woordenboek- en naslagwerktoepassingen
• Machinale vertaling en natuurlijke taalverwerking
• Kalligrafietoepassingen en lettertypeontwerptools
• Digitalisering van historische documenten en archiefsystemen

Technische opmerkingen: CJK-tekstverwerking brengt unieke uitdagingen met zich mee. Er zijn geen spaties tussen woorden in het Chinees en Japans, wat geavanceerde segmentatie-algoritmen vereist. Het Ideographic Description Characters-blok (U+2FF0–U+2FFF) maakt algoritmische beschrijving van karaktercompositie mogelijk, nuttig wanneer een benodigd ideogram nog niet is gecodeerd. Lettertypebestanden voor volledige CJK-dekking worden gemeten in tientallen megabytes. Het Kangxi Radicals-blok (U+2F00–U+2FDF) codeert de 214 traditionele radicaalvormen die worden gebruikt voor woordenboekordening, verschillend van de radicalen die als componenten binnen ideogrammen verschijnen.

Culturele context: Han-unificatie blijft een van de meest bediscussieerde beslissingen in de Unicode-geschiedenis. Critici beweren dat het samenvoegen van verschillende regionale tradities belangrijke culturele verschillen uitwist — een karakter dat anders is geëvolueerd in China, Japan en Korea kan in elke cultuur verschillende connotaties dragen. Voorstanders antwoorden dat unificatie een praktische noodzaak is voor interoperabele computers en dat op lettertypen gebaseerde variatie (via locatiespecifieke lettertypen) visuele onderscheidingen behoudt. De IVD (Ideographic Variation Database) biedt een mechanisme voor het selecteren van specifieke glyphvarianten wanneer culturele precisie vereist is.