Hemligheterna bakom UTF-8 och Unicode

Problem med teckenkodning kan få vem som helst att drömma mardrömmar. Nördkomikern Tom Scott förklarar både problematiken och möjliga lösningar, inklusive finurliga UTF-8.

Många har snubblat över webbsidor och program där både enstaka tecken och hela textstycken blir felaktigt representerade. Problemet är extra tydligt för oss i Sverige, där bokstäverna Å, Ä och Ö ställer till med en hel del oreda.

tomscott.jpg

Grundproblemet är att teckenkodningen ASCII beskriver det engelska alfabetet med stödtecken, men inte de bokstäver som används i de nordiska språken. Lösningen är Unicode med kodningen UTF-8, där över 100 000 tecken finns representerade.

För den som verkligen vill göra en djupdykning i ämnet har Computerphile sytt ihop en video i ämnet. En entusiastisk Tom Scott berättar dels om hur teckenkodning fungerar i allmänhet, men även hur UTF-8 löser komplicerade problem.

Kommentarer till artikeln

42 debattinlägg

Skicka en rättelse
0

Finaldags i Geeks Gamings CS:GO-turnering

Efter en intensiv vecka står det nu mellan två lag i Geeks Gamings CS:GO-turnering. Följ sista bataljen på gängets Twitch-kanal, med start klockan 19:00 ikväll. Läs mer

7

Testpilot: AOC Agon AG251FZ – 240 Hz för den otålige

Testpiloten David Kvist tar pulsen på Agon AG251FZ, den senaste spelskärmen från AOC med en bilduppdateringsfrekvens på 240 Hz och en upplösning på 1 920 x 1 080 pixlar. Läs mer

6

Live från SweClockers monter på Dustin Expo

SweClockers återvänder till Dustin Expo med egen monter och direktsänder hela evenemanget direkt via Youtube. Läs mer

48

Nintendo väntas sälja 20 miljoner Switch-enheter under första året

Nintendo uppskattar att de totalt kommer sälja 20 miljoner Switch-enheter under konsolens första år, en siffra som dock kan komma att påverkas av nya lanseringar från Microsoft och Sony. Läs mer

48

Battle.net får nytt namn – döps om till Blizzard

Ett halvår efter tillkännagivandet att tjänsten Battle.net skulle döpas om har nu Blizzard gjort just detta. Namnbytet görs bland annat för att få in tjänsten under företagets eget varumärke. Läs mer

91

AMD Ryzen 5 prislistas hos svenska återförsäljare

Om mindre än en månad lanserar AMD Ryzen 5, vilket innebär fyra nya processorer med fyra och sex kärnor. Inför detta läggs de nu upp för förbokning hos två svenska återförsäljare. Läs mer

37

Moderkortsförsäljningen minskar trots nya processorlanseringar

Trots nya processorer från både AMD och Intel minskade försäljningen av moderkort under årets första kvartal, med rekordlåga siffror för både Asus och Gigabyte. Läs mer

20

Futuremark lägger till stöd för Vulkan i 3DMark

Det syntetiska speltestet 3DMark får en uppdatering som lägger till stöd för det populära grafikgränssnittet Vulkan, vilket ersätter det AMD-skapade Mantle i API Overhead-testet. Läs mer

40

Snabbtitt: Corsair One Pro

Corsair ger sig ut på nya jaktmarker med färdigbyggda speldatorer. Vattenkylda Corsair One Pro med Core i7-7700K och Geforce GTX 1080 under huven dyker in i testlabbet för en snabbtitt! Läs mer

43

Vulkan med flera grafikkort är inte låst till Windows 10

Inom kort väntas det bli möjligt att använda Vulkan med mer än ett grafikkort. Nu meddelar utvecklarna av Vulkan att stöd för detta kommer finnas på såväl Windows som Linux. Läs mer

26

Krönika: "Lita på det gröna hänglåset?"

Det gröna hänglåset i webbläsaren är bra, men kan invagga användare i falsk trygghet. Det menar gästkrönikören Karl Emil Nikka, och presenterar samtidigt möjliga lösningar på problemet. Läs mer

50

Qualcomm Snapdragon 835 i tidiga prestandatester

Qualcomms nya systemkrets Snapdragon 835 introduceras inom kort i ett flertal flaggskeppstelefoner, men redan nu har utvald media fått chansen att prestandatesta denna. Läs mer