Hemligheterna bakom UTF-8 och Unicode

Problem med teckenkodning kan få vem som helst att drömma mardrömmar. Nördkomikern Tom Scott förklarar både problematiken och möjliga lösningar, inklusive finurliga UTF-8.

Många har snubblat över webbsidor och program där både enstaka tecken och hela textstycken blir felaktigt representerade. Problemet är extra tydligt för oss i Sverige, där bokstäverna Å, Ä och Ö ställer till med en hel del oreda.

tomscott.jpg

Grundproblemet är att teckenkodningen ASCII beskriver det engelska alfabetet med stödtecken, men inte de bokstäver som används i de nordiska språken. Lösningen är Unicode med kodningen UTF-8, där över 100 000 tecken finns representerade.

För den som verkligen vill göra en djupdykning i ämnet har Computerphile sytt ihop en video i ämnet. En entusiastisk Tom Scott berättar dels om hur teckenkodning fungerar i allmänhet, men även hur UTF-8 löser komplicerade problem.

Kommentarer till artikeln

42 debattinlägg

Skicka en rättelse
55

FZ bygger färdigt 75 000-kronorsdatorn Heart of Darkness

Efter tre månader har nu FZ färdigställt sitt datorbygge Heart of Darkness, som utrustas med bland annat 128 GB primärminne och Intel Core i9-7900X. Läs mer

177

Forumet: Vad döper du din hårddisk/dator till?

Vissa användare väljer att döpa sina hårddiskar och datorer efter olika teman, medan andra nöjer sig med standardnamnen. Vilken grupp tillhör du och vad döper du din dator/hårddisk till? Dela med dig i forumet! Läs mer

23

Intel visar grafikkortsprototyp

Att Intel har siktet inställt på bättre grafiklösningar är känt sedan tidigare och under ISSCC visar bolaget en prototyp, som övergripande illustrerar hur en framtida lösning kan se ut. Läs mer

69

Rykte: Samsung återupptar tillverkningen av OLED-TV

Efter att ha övergett OLED för TV-apparater uppges nu Samsung återigen satsa på detta. Det handlar om QD-OLED som bland annat ska erbjuda bättre färger och betraktningsvinklar. Läs mer

24

AOC uppdaterar AG352UCG med ny design och 120 Hz

Den ultrabreda spelskärmen AG352UCG från AOC släpps inom kort i en ny version, med en design som går helt i svart och en något högre uppdateringsfrekvens på 120 Hz. Läs mer

141

Bahnhof släpper bredband på 10 000 Mbit/s för privatpersoner

Morgondagens kapacitet redan idag. Så beskriver Bahnhof sin nya bredbandstjänst där de erbjuder hastigheter på hela 10 000 Mbit/s och tio gånger högre för företagspersoner. Läs mer

196

Tävla och vinn ett Geforce GTX 1080 Ti med bredbandsleverantören Ownit

Under rådande grafikkortsbrist kommer Ownit till undsättning med en ny tävling för SweClockers medlemmar, som får chansen att vinna ett Asus Geforce GTX 1080 Ti ROG Strix Gaming. Läs mer

11

Out of the box av "BjK"

Medlemmen "BjK" visar sitt senaste bygge Out of the box, med ett egentillverkat chassi av akrylplast. Läs mer

19

AT&T: "Hotspot-enheter blir först ut med 5G"

Enligt mobiloperatören AT&T blir de första produkterna med 5G-nätverk inte smarta telefoner, utan tekniken kommer först implementeras i mobila hotspot-enheter. Läs mer

62

Samsung avtäcker SSD-enhet med 30 TB lagringsutrymme

Samsung presenterar nu sitt senaste tillskott i lagringssegmentet, vars 30 TB lagringsutrymme gör den till den största av sitt slag. Läs mer

35

Forumet: Hur påverkar GDPR din arbetsplats?

EU:s dataskyddsförordning GDPR träder i kraft den 25 maj och innebär en hel del förändringar i hur personuppgifter lagras och stärker individens rättigheter. Hur kommer dataskyddsreformen implementeras på ditt jobb? Läs mer

41

AMD ger processorer och grafikkort stöd för att strömma video i 4K och HDR under 2018

Senare under året får processorer och grafikkort från AMD stöd för att strömma video i 4K och HDR via Netflix, något som i dagsläget endast är möjligt med hårdvara från Intel och Nvidia. Läs mer