Kodowanie znaków dla początkujących

Co to jest kodowanie i dlaczego jest ważne?

Po pierwsze, dlaczego jest ważne

Jeśli stosuje się znaki inne niż znaki podstawowe np.: języka angielskiego czy polskiego, czytelnicy mogą nie odczytać takiego tekstu, chyba że sprecyzuje się jakie kodowanie zostało zastosowane.

Na przykład, zamierzeniem jest, żeby tekst wyglądał następująco:

jednak może się on wyświetlać w taki sposób:

Niewłaściwe kodowanie może nie tylko pogorszyć czytelność tekstu ale również sprawić, że tekst nie będzie znajdowany przez wyszukiwarki lub będzie przetwarzany w inny sposób.

Co to jest kodowanie znaków?

Znaki grupowane są w zbiory znaków, które określa się mianem zbioru kodów znaków, ponieważ każdy znak otrzymuje swój numeryczny identyfikator, który w komputerze jest przedstawiony w postaci bajtów.

Oznacza to, że wszystkie znaki są przechowywane w formie kodu, podobnie jak w szyfrach szpiegowskich. Kodowanie znaków jest kluczem do kodu. Jest zbiorem określającym powiązania pomiędzy bajtami reprezentującymi numery w komputerze i znakami w zbiorze kodów znaków. Bez klucza dane wyglądają nieciekawie.

Często używa się błędnego terminu 'charset' do określania tego co w rzeczywistości jest kodowaniem znaków. Należy wiedzieć, że taki termin istnieje, ale lepiej używać terminu 'kodowanie znaków'.

Niestety istnieje wiele zbiorów znaków i kodowań znaków, jak również wiele różnych sposobów łączenia bajtów, numerów i znaków. Poniższy artykuł przedstawia więcej szczegółów dla zainteresowanych.

Moga pojawic się dalsze komplikacje poza opisanymi powyżej (np.: kolejność bajtów i sekwencje łamań), ale przedstawione szczegóły pokazują dlaczego ważnym jest aby aplikacja na której się pracuje wiedziała jakie kodowanie znaków jest najlepsze dla konkretnych danych i jak obsługiwać dane kodowanie.

W większości przypadków nie będziesz musiał poznawać tych wszystkich szczegółów. Będziesz natomiast musiał zapoznać się z sekcją Jaki to ma wpływ na mnie? , która znajduje sie poniżej.

Jak się do tego maja czcionki?

Czcionki są zbiorem definicji symboli, tz. definicjami kształtów poszczególnych znaków.

Kiedy aplikacja rozpoznaje rodzaje znaków, wyszukuje ona ich symbole graficzne aby móc je odpowiednio przedstawić na ekranie lub w druku. (Oczywiście, jeśli kodowanie było niewłaściwe, odszuka ona symbole niewłaściwych czcionek.)

Rodzaj czcionki zazwyczaj przedstawia pojedynczy zbiór znaków lub, w przypadku zbioru tak dużego jak Unicode, podzbiór kodów znaków. Jeśli rodzaj czcionki nie posiada symbolu dla konkretnego znaku, niektóre aplikacje będą poszukiwać brakującego znaku w innych rodzajach czcionek systemu na którym pracujesz (oznacza to, że symbol może byc w innym stylu niż otaczające go symbole). W przeciwnym razie pojawi sie jedynie mały kwadracik lub inny znak. Na przykład:

Jaki to ma wpływ na mnie?

Jako autor treści lub deweloper, powinieneś wybrać najlepsze kodowanie znaków dla treści witryny lub danych na niej zawartych. Kodowanie Unicode jest najczęściej bardzo dobrym wyborem, ponieważ używa pojedynczego kodu dla większości istniejących znaków, co ułatwia nam pracę. Stosowanie systemu Unicode eliminuje śledzenie używanych kodów znaków oraz niezbędne zmiany kodowania .

Twórcy stron internetowych powinni wiedzieć w jakim kodzie zapisuje znaki ich edytor oraz jak zapisać tekst w innym kodzie. Proszę pamiętać, że deklaracja innego kodowania nie zmieni liczby bajtów, dlatego należy zapisać tekst w danym kodowaniu.

Autorzy stron powinni wiedzieć jak deklarować kodowanie znaków zastosowanych w danym formacie dokumentu. Powinno się również sprawdzić czy serwer podaje dokumenty z właściwą deklaracją nagłówka HTTP.

Deweloperzy powinni stworzyć stytuację, w której wszystkie części systemu komunikują sie między sobą, wiedząc jakie kodowanie jest stosowane i posiadając wsparcie dla wszsytkich kodowań i znaków.

Poniższe linki prowadzą do dalszych artykułów na w/w tematy.