Исходная кодировка windows 1251

From Wikipedia, the free encyclopedia

Windows-1251

MIME / IANA windows-1251
Alias(es) cp1251 (Code page 1251)
Language(s) Russian, Ukrainian, Belarusian, Bulgarian, Serbian Cyrillic, Bosnian Cyrillic, Macedonian, Rotokas, Rusyn, English
Created by Microsoft
Standard WHATWG Encoding Standard
Classification extended ASCII, Windows-125x
Other related encoding(s) Amiga-1251, KZ-1048,
RFC 1345’s «ECMA-Cyrillic»

Windows-1251 is an 8-bit character encoding, designed to cover languages that use the Cyrillic script such as Russian, Ukrainian, Belarusian, Bulgarian, Serbian Cyrillic, Macedonian and other languages.

On the web, it is the second most-used single-byte character encoding (or third most-used character encoding overall), and most used of the single-byte encodings supporting Cyrillic. As of January 2024, 0.3% of all websites use Windows-1251.[1][2] It’s by far mostly used for Russian, while a small minority of Russian websites use it, with 94.6% of Russian (.ru) websites using UTF-8,[3][4][5] and the legacy 8-bit encoding is distant second. In Linux, the encoding is known as cp1251.[6] IBM uses code page 1251 (CCSID 1251 and euro sign extended CCSID 5347) for Windows-1251.[7][8][9][10][11][12][13]

Windows-1251 and KOI8-R (or its Ukrainian variant KOI8-U) are much more commonly used than ISO 8859-5 (which is used by less than 0.0004% of websites).[14] In contrast to Windows-1252 and ISO 8859-1, Windows-1251 is not closely related to ISO 8859-5.

Unicode (e.g. UTF-8) is preferred to Windows-1251 or other Cyrillic encodings in modern applications, especially on the Internet, making UTF-8 the dominant encoding for web pages. (For further discussion of Unicode’s complete coverage, of 436 Cyrillic letters/code points, including for Old Cyrillic, and how single-byte character encodings, such as Windows-1251 and KOI8-R, cannot provide this, see Cyrillic script in Unicode.)

The following table shows Windows-1251. Each character is shown with its Unicode equivalent and its Alt code.

Windows-1251[15]

0 1 2 3 4 5 6 7 8 9 A B C D E F
0x NUL SOH STX ETX EOT ENQ ACK BEL BS HT LF VT FF CR SO SI
1x DLE DC1 DC2 DC3 DC4 NAK SYN ETB CAN EM SUB ESC FS GS RS US
2x  SP  ! » # $ % & ‘ ( ) * + , — . /
3x 0 1 2 3 4 5 6 7 8 9 : ; < = > ?
4x @ A B C D E F G H I J K L M N O
5x P Q R S T U V W X Y Z [ \ ] ^ _
6x ` a b c d e f g h i j k l m n o
7x p q r s t u v w x y z { | } ~ DEL
8x Ђ Ѓ ‚ ѓ „ … † ‡ € ‰ Љ ‹ Њ Ќ Ћ Џ
9x ђ ‘ ’ “ ” • – — ™ љ › њ ќ ћ џ
Ax NBSP Ў ў Ј ¤ Ґ ¦ § Ё © Є « ¬ SHY ® Ї
Bx ° ± І і ґ µ · ё № є » ј Ѕ ѕ ї
Cx А Б В Г Д Е Ж З И Й К Л М Н О П
Dx Р С Т У Ф Х Ц Ч Ш Щ Ъ Ы Ь Э Ю Я
Ex а б в г д е ж з и й к л м н о п
Fx р с т у ф х ц ч ш щ ъ ы ь э ю я

An altered version of Windows-1251 was standardised in Kazakhstan as Kazakh standard STRK1048, and is known by the label KZ-1048. It differs in the rows shown below:

KZ-1048 (STRK1048-2002)[16]

0 1 2 3 4 5 6 7 8 9 A B C D E F
8x Ђ Ѓ ‚ ѓ „ … † ‡ € ‰ Љ ‹ Њ Қ Һ Џ
9x ђ ‘ ’ “ ” • – — ™ љ › њ қ һ џ
Ax NBSP Ұ ұ Ә ¤ Ө ¦ § Ё © Ғ « ¬ SHY ® Ү
Bx ° ± І і ө µ · ё № ғ » ә Ң ң ү

  Differences from Windows-1251

Code Page 1174 is another variant created for the Kazakh language, which matches Windows-1251 for the Russian subset of the Cyrillic letters. It differs from KZ-1048 by moving the Cyrillic letter Shha from 8E/9E to 8A/9A.

Code page 1174[17]

0 1 2 3 4 5 6 7 8 9 A B C D E F
8x Ђ Ѓ ‚ ѓ „ … † ‡ € ‰ Һ ‹ Њ Қ Ћ Џ
9x ђ ‘ ’ “ ” • – — ™ һ › њ қ ћ џ
Ax NBSP Ұ ұ Ә ¤ Ө ¦ § Ё © Ғ « ¬ SHY ® Ү
Bx ° ± І і ө µ · ё № ғ » ә Ң ң ү

  Different from Windows-1251

Windows Latvian + Russian is a modification of Windows-1251 to support the Latvian language.

Windows Latvian + Russian

0 1 2 3 4 5 6 7 8 9 A B C D E F
8x Ū Ģ ‚ ō „ … † ‡ Ž ‰ Š ‹ Ē Ķ Č ģ
9x ū ‘ ’ “ ” • – — ž ™ š › ē ķ č Ō
Ax NBSP Ā ā Ļ ¤ ļ ¦ § Ё © Ņ « ¬ SHY ® ¯
Bx ° ± Ī ī ´ µ · ё № ņ » ¼ ½ ¾ ×

  Differences from Windows-1251

Windows Cyrillic + Finnish is a modification of Windows-1251 that was used by Paratype to cover the Finnish language. This encoding is supported by FontLab Studio 5.[18] This variant is missing the letters Š and Ž which are used in loanwords in Finnish and can be replaced by the digraphs SH and ZH.

Windows Cyrillic + Finnish

0 1 2 3 4 5 6 7 8 9 A B C D E F
8x Ђ Ѓ ‚ ѓ „ … † ‡ ˆ ‰ Љ ‹ Њ Ќ Ћ Џ
9x ђ ‘ ’ “ ” • – — ˜  ™ љ › њ ќ ћ џ
Ax NBSP Ў ў Ó ¤ Ґ ¦ § Ё © Ä « ¬ SHY ® Ö
Bx ° ± Å å ґ µ · ё № ä » ó É é ö

  Differences from Windows-1251

Amiga-1251

MIME / IANA Amiga-1251
Alias(es) Ami1251
Language(s) English, Russian
Classification extended ASCII
Based on Windows-1251, ISO-8859-1, ISO-8859-15

Russian Amiga OS systems used a version of code page 1251 which matches Windows-1251 for the Russian subset of the Cyrillic letters, but otherwise mostly follows ISO-8859-1. This version is known as Amiga-1251,[19] under which name it is registered with the IANA.[20]

Amiga-1251[19]

0 1 2 3 4 5 6 7 8 9 A B C D E F
8x XXX XXX BPH NBH IND NEL SSA ESA HTS HTJ VTS PLD PLU RI SS2 SS3
9x DCS PU1 PU2 STS CCH MW SPA EPA SOS XXX SCI CSI ST OSC PM APC
Ax NBSP ¡ ¢ £ €[a] ¥ ¦ § Ё © №[b] « ¬ SHY ® ¯
Bx ° ± ² ³ ´ µ · ё ¹ º » ¼ ½ ¾ ¿

  Different from Windows-1251 to match ISO-8859-1

  Different from both Windows-1251 and ISO-8859-1

  1. ^ Matching ISO-8859-15; at a different location than in Windows-1251
  2. ^ Present in Windows-1251, but in a different location (absent from ISO-8859-1/15)
  • Latin script in Unicode
  • Cyrillic script in Unicode
  • Unicode
  • Universal Character Set
    • European Unicode subset (DIN 91379)
  • UTF-8
  1. ^ «Historical trends in the usage of character encodings, January 2024». Retrieved 2024-01-01.
  2. ^ «Frequently Asked Questions».
  3. ^ «Distribution of Character Encodings among websites that use .ru». w3techs.com. Retrieved 2024-01-01.
  4. ^ «Distribution of Character Encodings among websites that use Russian». w3techs.com. Retrieved 2023-01-16.
  5. ^ «Distribution of Character Encodings among websites that use Russian Federation». w3techs.com. Retrieved 2021-11-05.
  6. ^ «cp1251(7) — Linux manual page». man7.org. Retrieved 2018-07-01.
  7. ^ «Code page 1251 information document». Archived from the original on 2016-03-03.
  8. ^ «CCSID 1251 information document». Archived from the original on 2014-11-29.
  9. ^ «CCSID 5347 information document». Archived from the original on 2014-11-29.
  10. ^ Code Page CPGID 01251 (pdf) (PDF), IBM
  11. ^ Code Page CPGID 01251 (txt), IBM
  12. ^ International Components for Unicode (ICU), ibm-1251_P100-1995.ucm, 2002-12-03
  13. ^ International Components for Unicode (ICU), ibm-5347_P100-1998.ucm, 2002-12-03
  14. ^ «Usage Statistics of Character Encodings for Websites». w3techs.com. Archived from the original on 2012-05-30.
  15. ^ Steele, Shawn (1998). CP1251 to Unicode table. Unicode Consortium. CP1251.TXT.
  16. ^ Whistler, Ken (2007). KZ-1048 to Unicode. Unicode Consortium. KZ1048.TXT.
  17. ^ ibm-1174_X100-2007.ucm, IBM
  18. ^ «FontLab Studio 5. Classic pro font editor for Mac & Windows».
  19. ^ a b Malyshev, Michael (2003). «Amiga-1251 to Unicode table». Registration of new charset [Amiga-1251]. IANA.
  20. ^ «Character Sets». IANA.
  • Kornai, Andras; Birnbaum, David J.; da Cruz, Frank; Davis, Bur; Fowler, George; Paine, Richard B.; Paperno, Slava; Simonsen, Keld J.; Thobe, Glenn E.; Vulis, Dimitri; van Wingen, Johan W. (1993-03-13). «CYRILLIC ENCODING FAQ Version 1.3». Retrieved 2020-06-24.
  • Windows 1251 reference chart
  • IANA Charset Name Registration
  • Unicode mappings of windows 1251 with «best fit»
  • Universal Cyrillic decoder, an online program that may help recovering unreadable Cyrillic texts with broken Windows-1251 or other character encodings.

Источник

Материал из РУВИКИ — свободной энциклопедии

Windows-1251
Описывается по ссылке iana.org/assignments/cha…
msdn.microsoft.com/en-us…
microsoft.com/typography…
unicode.org/Public/MAPPI…
unicode.org/Public/MAPPI…
ibm.com/docs/en/db2/11.5…

Windows-1251 — набор символов и кодировка, являющаяся стандартной 8-битной кодировкой для русских версий Microsoft Windows до 10-й версии. В прошлом пользовалась довольно большой популярностью. Была создана на базе кодировок, использовавшихся в ранних «самопальных» русификаторах Windows в 1990—1991 гг. совместно представителями «Параграфа», «Диалога» и российского отделения Microsoft. Первоначальный вариант кодировки сильно отличался от представленного ниже в таблице (в частности, там было значительное число «белых пятен»). Но, однако был вариативным и представленным в 6 формах применения.

В современных приложениях отдаётся предпочтение Юникоду (UTF-8). На 1 апреля 2019 лишь на 1 % всех веб-страниц используется Windows-1251.[1]

Windows-1251 выгодно отличается от других 8‑битных кириллических кодировок (таких как CP866, KOI8-R и ISO 8859-5) наличием практически всех символов, использующихся в русской типографике для обычного текста (отсутствует только значок ударения); она также содержит все символы для других славянских языков: украинского, белорусского, сербского, македонского и болгарского.

Windows-1251 имеет два недостатка:

  • строчная буква «я» имеет код 0xFF (255 в десятичной системе). Она является «виновницей» ряда неожиданных проблем в программах без поддержки чистого 8-го бита, а также (гораздо более частый случай) использующих этот код как служебный (в CP437 он обозначает «неразрывный пробел», в Windows-1252 — ÿ, оба варианта практически не используются; число же -1, в дополнительном коде длиной 8 бит представляющееся числом 255, часто используется в программировании как специальное значение). Тот же недостаток имеет и KOI8-R, но в ней 0xFF есть заглавный твёрдый знак, который применяется редко (только при написании одними лишь заглавными буквами).
  • отсутствуют символы псевдографики, имеющиеся в CP866 и KOI8 (хотя для самих Windows, для которых она предназначена, в них не было нужды, это делало несовместимость двух использовавшихся в них кодировок заметнее).

Также как недостаток может рассматриваться отдельное расположение буквы «ё», тогда как остальные символы расположены строго в алфавитном порядке. Это усложняет программы лексикографического упорядочения.

Синонимы: CP1251; ANSI (только в русскоязычной ОС Windows).

Первая половина таблицы кодировки (коды от 0x00 до 0x7F) полностью соответствует кодировке ASCII. Числа под буквами обозначают шестнадцатеричный код подходящего символа в Юникоде.

Кодировка Windows-1251[править | править код]

.0 .1 .2 .3 .4 .5 .6 .7 .8 .9 .A .B .C .D .E .F
 
8.
  		Ђ
402 		Ѓ
403 		‚
201A 		ѓ
453 		„
201E 		…
2026 		†
2020 		‡
2021 		€
20AC 		‰
2030 		Љ
409 		‹
2039 		Њ
40A 		Ќ
40C 		Ћ
40B 		Џ
40F
 
9.
  		ђ
452 		‘
2018 		’
2019 		“
201C 		”
201D 		•
2022 		–
2013 		—
2014 		™
2122 		љ
459 		›
203A 		њ
45A 		ќ
45C 		ћ
45B 		џ
45F
 
A.
  		 
A0 		Ў
40E 		ў
45E 		Ј
408 		¤
A4 		Ґ
490 		¦
A6 		§
A7 		Ё
401 		©
A9 		Є
404 		«
AB 		¬
AC 		­
AD 		®
AE 		Ї
407
 
B.
  		°
B0 		±
B1 		І
406 		і
456 		ґ
491 		µ
B5
B6 		·
B7 		ё
451 		№
2116 		є
454 		»
BB 		ј
458 		Ѕ
405 		ѕ
455 		ї
457
 
C.
  		А
410 		Б
411 		В
412 		Г
413 		Д
414 		Е
415 		Ж
416 		З
417 		И
418 		Й
419 		К
41A 		Л
41B 		М
41C 		Н
41D 		О
41E 		П
41F
 
D.
  		Р
420 		С
421 		Т
422 		У
423 		Ф
424 		Х
425 		Ц
426 		Ч
427 		Ш
428 		Щ
429 		Ъ
42A 		Ы
42B 		Ь
42C 		Э
42D 		Ю
42E 		Я
42F
 
E.
  		а
430 		б
431 		в
432 		г
433 		д
434 		е
435 		ж
436 		з
437 		и
438 		й
439 		к
43A 		л
43B 		м
43C 		н
43D 		о
43E 		п
43F
 
F.
  		р
440 		с
441 		т
442 		у
443 		ф
444 		х
445 		ц
446 		ч
447 		ш
448 		щ
449 		ъ
44A 		ы
44B 		ь
44C 		э
44D 		ю
44E 		я
44F

  • Таблица основного кода ASCII

  • Таблица расширенного кода ASCII

Другие варианты[править | править код]

(Показаны только отличающиеся строки, поскольку всё остальное совпадает)

Официальная кодировка Amiga-1251 (Amiga Inc., 2004 г.)[править | править код]

.0 .1 .2 .3 .4 .5 .6 .7 .8 .9 .A .B .C .D .E .F
 
A.
  		 
A0 		¡
A1 		¢
A2 		£
A3 		€
20AC 		¥
A5 		¦
A6 		§
A7 		Ё
401 		©
A9 		№
2116 		«
AB 		¬
AC 		­
AD 		®
AE 		¯
AF
 
B.
  		°
B0 		±
B1 		²
B2 		³
B3 		´
B4 		µ
B5
B6 		·
B7 		ё
451 		¹
B9 		º
BA 		»
BB 		¼
BC 		½
BD 		¾
BE 		¿
BF

Официальная кодировка KZ-1048 (казахский стандарт)[править | править код]

Данная кодировка утверждена стандартом СТ РК 1048—2002 и зарегистрирована в IANA как KZ-1048 [1].

.0 .1 .2 .3 .4 .5 .6 .7 .8 .9 .A .B .C .D .E .F
 
8.
  		Ђ
402 		Ѓ
403 		‚
201A 		ѓ
453 		„
201E 		…
2026 		†
2020 		‡
2021 		€
20AC 		‰
2030 		Љ
409 		‹
2039 		Њ
40A 		Қ
49A 		Һ
4BA 		Џ
40F
 
9.
  		ђ
452 		‘
2018 		’
2019 		“
201C 		”
201D 		•
2022 		–
2013 		—
2014 		™
2122 		љ
459 		›
203A 		њ
45A 		қ
49B 		һ
4BB 		џ
45F
 
A.
  		 
A0 		Ұ
4B0 		ұ
4B1 		Ә
4D8 		¤
A4 		Ө
4E8 		¦
A6 		§
A7 		Ё
401 		©
A9 		Ғ
492 		«
AB 		¬
AC 		­
AD 		®
AE 		Ү
4AE
 
B.
  		°
B0 		±
B1 		І
406 		і
456 		ө
4E9 		µ
B5
B6 		·
B7 		ё
451 		№
2116 		ғ
493 		»
BB 		ә
4D9 		Ң
4A2 		ң
4A3 		ү
4AF

Кодировка Windows-1251 (чувашский вариант)[править | править код]

.0 .1 .2 .3 .4 .5 .6 .7 .8 .9 .A .B .C .D .E .F
 
8.
  		Ђ
402 		Ѓ
403 		‚
201A 		ѓ
453 		„
201E 		…
2026 		†
2020 		‡
2021 		€
20AC 		‰
2030 		Љ
409 		‹
2039 		Ӑ
4D0 		Ӗ
4D6 		Ҫ
4AA 		Ӳ
4F2
 
9.
  		ђ
452 		‘
2018 		’
2019 		“
201C 		”
201D 		•
2022 		–
2013 		—
2014 		™
2122 		љ
459 		›
203A 		ӑ
4D1 		ӗ
4D7 		ҫ
4AB 		ӳ
4F3

Татарский вариант[править | править код]

Эта кодировка была официально принята в Татарстане в 1996 г.

.0 .1 .2 .3 .4 .5 .6 .7 .8 .9 .A .B .C .D .E .F
 
8.
  		Ә
4D8 		Ѓ
403 		‚
201A 		ѓ
453 		„
201E 		…
2026 		†
2020 		‡
2021 		€
20AC 		‰
2030 		Ө
4E8 		‹
2039 		Ү
4AE 		Җ
496 		Ң
4A2 		Һ
4BA
 
9.
  		ә
4D9 		‘
2018 		’
2019 		“
201C 		”
201D 		•
2022 		–
2013 		—
2014 		™
2122 		ө
4E9 		›
203A 		ү
4AF 		җ
497 		ң
4A3 		һ
4BB
  1. ↑ Historical trends in the usage of character encodings, April 2019. Дата обращения: 11 февраля 2016. Архивировано 3 марта 2021 года.
  • История создании кодировки в сообщении Игоря Семенюка в эхоконференции SU.LAN от 14 января 1996

Источник

12820080ЂCyrillic capital letter Dje
12920181ЃCyrillic capital letter Gje
13020282‚Single low-9 quotation mark
13120383ѓCyrillic small letter gje
13220484„Double low-9 quotation mark
13320585…Horizontal ellipsis
13420686†Dagger
13520787‡Double dagger
13621088€Euro sign
13721189‰Per mille sign
1382128AЉCyrillic capital letter Lje
1392138B‹Single left-pointing angle quotation
1402148CЊCyrillic capital letter Nje
1412158DЌCyrillic capital letter Kje
1422168EЋCyrillic capital letter Tshe
1432178FЏCyrillic capital letter Dzhe
14422090ђCyrillic small letter dje
14522191‘Left single quotation mark
14622292’Right single quotation mark
14722393“Left double quotation mark
14822494”Right double quotation mark
14922595•Bullet
15022696–En dash
15122797—Em dash
15223098Unused
15323199™Trade mark sign
1542329AљCyrillic small letter lje
1552339B›Single right-pointing angle quotation mark
1562349CњCyrillic small letter nje
1572359DќCyrillic small letter Kje
1582369EћCyrillic small letter Tshe
1592379FџCyrillic small letter Dzhe
160240A0Non-breaking space
161241A1ЎCyrillic capital letter short U
162242A2ўCyrillic small letter short u
163243A3ЈCyrillic capital letter Je
164244A4¤Currency sign
165245A5ҐCyrillic capital letter Ghe with upturn
166246A6¦Pipe, broken vertical bar
167247A7§Section sign
168250A8ЁCyrillic capital letter Io
169251A9©Copyright sign
170252AAЄCyrillic capital letter Ukrainian Ie
171253AB«Left double angle quotes
172254AC¬Negation
173255AD­Soft hyphen
174256AE®Registered trade mark sign
175257AFЇCyrillic capital letter Yi
176260B0°Degree sign
177261B1±Plus-or-minus sign
178262B2ІCyrillic capital letter Byelorussian-Ukrainian I
179263B3іCyrillic small letter Byelorussian-Ukrainian i
180264B4ґCyrillic small letter ghe with upturn
181265B5µMicro sign
182266B6¶Pilcrow sign — paragraph sign
183267B7·Middle dot — Georgian comma
184270B8ёCyrillic small letter io
185271B9№Numero Sign
186272BAєCyrillic small letter Ukrainian ie
187273BB»Right double angle quotes
188274BCјCyrillic small letter je
189275BDЅCyrillic capital letter Dze
190276BEѕCyrillic small letter dze
191277BFїCyrillic small letter yi
192300C0АCyrillic capital letter A
193301C1БCyrillic capital letter Be
194302C2ВCyrillic capital letter Ve
195303C3ГCyrillic capital letter Ghe
196304C4ДCyrillic capital letter De
197305C5ЕCyrillic capital letter Ie
198306C6ЖCyrillic capital letter Zhe
199307C7ЗCyrillic capital letter Ze
200310C8ИCyrillic capital letter I
201311C9ЙCyrillic capital letter Short I
202312CAКCyrillic capital letter Ka
203313CBЛCyrillic capital letter El
204314CCМCyrillic capital letter Em
205315CDНCyrillic capital letter En
206316CEОCyrillic capital letter O
207317CFПCyrillic capital letter Pe
208320D0РCyrillic capital letter Er
209321D1СCyrillic capital letter Es
210322D2ТCyrillic capital letter Te
211323D3УCyrillic capital letter U
212324D4ФCyrillic capital letter Ef
213325D5ХCyrillic capital letter Ha
214326D6ЦCyrillic capital letter Tse
215327D7ЧCyrillic capital letter Che
216330D8ШCyrillic capital letter Sha
217331D9ЩCyrillic capital letter Shcha
218332DAЪCyrillic capital letter Hard Sign
219333DBЫCyrillic capital letter Yeru
220334DCЬCyrillic capital letter Soft Sign
221335DDЭCyrillic capital letter E
222336DEЮCyrillic capital letter Yu
223337DFЯCyrillic capital letter Ya
224340E0аCyrillic Small Letter A
225341E1бCyrillic small letter be
226342E2вCyrillic small letter ve
227343E3гCyrillic small letter ghe
228344E4дCyrillic small letter de
229345E5еCyrillic small letter ie
230346E6жCyrillic small letter zhe
231347E7зCyrillic small letter ze
232350E8иCyrillic small letter i
233351E9йCyrillic small letter short i
234352EAкCyrillic small letter ka
235353EBлCyrillic small letter el
236354ECмCyrillic small letter em
237355EDнCyrillic small letter en
238356EEоCyrillic small letter o
239357EFпCyrillic small letter pe
240360F0рCyrillic small letter er
241361F1сCyrillic small letter es
242362F2тCyrillic small letter te
243363F3уCyrillic small letter u
244364F4фCyrillic small letter ef
245365F5хCyrillic small letter ha
246366F6цCyrillic small letter tse
247367F7чCyrillic small letter che
248370F8шCyrillic small letter sha
249371F9щCyrillic small letter shcha
250372FAъCyrillic small letter hard sign
251373FBыCyrillic small letter yeru
252374FCьCyrillic small letter soft sign
253375FDэCyrillic small letter e
254376FEюCyrillic small letter yu
255377FFяCyrillic small letter ya

Источник

Материал из энциклопедии Руниверсалис

Windows-1251 — набор символов и кодировка, являющаяся стандартной 8-битной кодировкой для русских версий Microsoft Windows до 10-й версии. В прошлом пользовалась довольно большой популярностью. Была создана на базе кодировок, использовавшихся в ранних «самопальных» русификаторах Windows в 1990—1991 гг. совместно представителями «Параграфа», «Диалога» и российского отделения Microsoft. Первоначальный вариант кодировки сильно отличался от представленного ниже в таблице (в частности, там было значительное число «белых пятен»). Но, однако был вариативным и представленным в 6 формах применения.

В современных приложениях отдается предпочтение Юникоду (UTF-8). На 1 апреля 2019 лишь на 1 % всех веб-страниц используется Windows-1251.[1]

Особенности

Windows-1251 выгодно отличается от других 8‑битных кириллических кодировок (таких как CP866, KOI8-R и ISO 8859-5) наличием практически всех символов, использующихся в русской типографике для обычного текста (отсутствует только значок ударения); она также содержит все символы для других славянских языков: украинского, белорусского, сербского, македонского и болгарского.

Windows-1251 имеет два недостатка:

  • строчная буква «я» имеет код 0xFF (255 в десятичной системе). Она является «виновницей» ряда неожиданных проблем в программах без поддержки чистого 8-го бита, а также (гораздо более частый случай) использующих этот код как служебный (в CP437 он обозначает «неразрывный пробел», в Windows-1252 — ÿ, оба варианта практически не используются; число же -1, в дополнительном коде длиной 8 бит представляющееся числом 255, часто используется в программировании как специальное значение). Тот же недостаток имеет и KOI8-R, но в ней 0xFF есть заглавный твердый знак, который применяется редко (только при написании одними лишь заглавными буквами).
  • отсутствуют символы псевдографики, имеющиеся в CP866 и KOI8 (хотя для самих Windows, для которых она предназначена, в них не было нужды, это делало несовместимость двух использовавшихся в них кодировок заметнее).

Также как недостаток может рассматриваться отдельное расположение буквы «ё», тогда как остальные символы расположены строго в алфавитном порядке. Это усложняет программы лексикографического упорядочения.

Синонимы: CP1251; ANSI (только в русскоязычной ОС Windows).

Таблицы

Первая половина таблицы кодировки (коды от 0x00 до 0x7F) полностью соответствует кодировке ASCII. Числа под буквами обозначают шестнадцатеричный код подходящего символа в Юникоде.

Кодировка Windows-1251

.0 .1 .2 .3 .4 .5 .6 .7 .8 .9 .A .B .C .D .E .F
 
8.
  		Ђ
402 		Ѓ
403 		‚
201A 		ѓ
453 		„
201E 		…
2026 		†
2020 		‡
2021 		€
20AC 		‰
2030 		Љ
409 		‹
2039 		Њ
40A 		Ќ
40C 		Ћ
40B 		Џ
40F
 
9.
  		ђ
452 		‘
2018 		’
2019 		“
201C 		”
201D 		•
2022 		–
2013 		—
2014 		™
2122 		љ
459 		›
203A 		њ
45A 		ќ
45C 		ћ
45B 		џ
45F
 
A.
  		 
A0 		Ў
40E 		ў
45E 		Ј
408 		¤
A4 		Ґ
490 		¦
A6 		§
A7 		Ё
401 		©
A9 		Є
404 		«
AB 		¬
AC 		­
AD 		®
AE 		Ї
407
 
B.
  		°
B0 		±
B1 		І
406 		і
456 		ґ
491 		µ
B5
B6 		·
B7 		ё
451 		№
2116 		є
454 		»
BB 		ј
458 		Ѕ
405 		ѕ
455 		ї
457
 
C.
  		А
410 		Б
411 		В
412 		Г
413 		Д
414 		Е
415 		Ж
416 		З
417 		И
418 		Й
419 		К
41A 		Л
41B 		М
41C 		Н
41D 		О
41E 		П
41F
 
D.
  		Р
420 		С
421 		Т
422 		У
423 		Ф
424 		Х
425 		Ц
426 		Ч
427 		Ш
428 		Щ
429 		Ъ
42A 		Ы
42B 		Ь
42C 		Э
42D 		Ю
42E 		Я
42F
 
E.
  		а
430 		б
431 		в
432 		г
433 		д
434 		е
435 		ж
436 		з
437 		и
438 		й
439 		к
43A 		л
43B 		м
43C 		н
43D 		о
43E 		п
43F
 
F.
  		р
440 		с
441 		т
442 		у
443 		ф
444 		х
445 		ц
446 		ч
447 		ш
448 		щ
449 		ъ
44A 		ы
44B 		ь
44C 		э
44D 		ю
44E 		я
44F

  • Таблица основного кода ASCII

  • Таблица расширенного кода ASCII

Другие варианты

(Показаны только отличающиеся строки, поскольку всё остальное совпадает)

Официальная кодировка Amiga-1251 (Amiga Inc., 2004 г.)

.0 .1 .2 .3 .4 .5 .6 .7 .8 .9 .A .B .C .D .E .F
 
A.
  		 
A0 		¡
A1 		¢
A2 		£
A3 		€
20AC 		¥
A5 		¦
A6 		§
A7 		Ё
401 		©
A9 		№
2116 		«
AB 		¬
AC 		­
AD 		®
AE 		¯
AF
 
B.
  		°
B0 		±
B1 		²
B2 		³
B3 		´
B4 		µ
B5
B6 		·
B7 		ё
451 		¹
B9 		º
BA 		»
BB 		¼
BC 		½
BD 		¾
BE 		¿
BF

Официальная кодировка KZ-1048 (казахский стандарт)

Данная кодировка утверждена стандартом СТ РК 1048—2002 и зарегистрирована в IANA как KZ-1048 [1].

.0 .1 .2 .3 .4 .5 .6 .7 .8 .9 .A .B .C .D .E .F
 
8.
  		Ђ
402 		Ѓ
403 		‚
201A 		ѓ
453 		„
201E 		…
2026 		†
2020 		‡
2021 		€
20AC 		‰
2030 		Љ
409 		‹
2039 		Њ
40A 		Қ
49A 		Һ
4BA 		Џ
40F
 
9.
  		ђ
452 		‘
2018 		’
2019 		“
201C 		”
201D 		•
2022 		–
2013 		—
2014 		™
2122 		љ
459 		›
203A 		њ
45A 		қ
49B 		һ
4BB 		џ
45F
 
A.
  		 
A0 		Ұ
4B0 		ұ
4B1 		Ә
4D8 		¤
A4 		Ө
4E8 		¦
A6 		§
A7 		Ё
401 		©
A9 		Ғ
492 		«
AB 		¬
AC 		­
AD 		®
AE 		Ү
4AE
 
B.
  		°
B0 		±
B1 		І
406 		і
456 		ө
4E9 		µ
B5
B6 		·
B7 		ё
451 		№
2116 		ғ
493 		»
BB 		ә
4D9 		Ң
4A2 		ң
4A3 		ү
4AF

Кодировка Windows-1251 (чувашский вариант)

.0 .1 .2 .3 .4 .5 .6 .7 .8 .9 .A .B .C .D .E .F
 
8.
  		Ђ
402 		Ѓ
403 		‚
201A 		ѓ
453 		„
201E 		…
2026 		†
2020 		‡
2021 		€
20AC 		‰
2030 		Љ
409 		‹
2039 		Ӑ
4D0 		Ӗ
4D6 		Ҫ
4AA 		Ӳ
4F2
 
9.
  		ђ
452 		‘
2018 		’
2019 		“
201C 		”
201D 		•
2022 		–
2013 		—
2014 		™
2122 		љ
459 		›
203A 		ӑ
4D1 		ӗ
4D7 		ҫ
4AB 		ӳ
4F3

Татарский вариант

Эта кодировка была официально принята в Татарстане в 1996 г.

.0 .1 .2 .3 .4 .5 .6 .7 .8 .9 .A .B .C .D .E .F
 
8.
  		Ә
4D8 		Ѓ
403 		‚
201A 		ѓ
453 		„
201E 		…
2026 		†
2020 		‡
2021 		€
20AC 		‰
2030 		Ө
4E8 		‹
2039 		Ү
4AE 		Җ
496 		Ң
4A2 		Һ
4BA
 
9.
  		ә
4D9 		‘
2018 		’
2019 		“
201C 		”
201D 		•
2022 		–
2013 		—
2014 		™
2122 		ө
4E9 		›
203A 		ү
4AF 		җ
497 		ң
4A3 		һ
4BB

Примечания

  1. ↑ Historical trends in the usage of character encodings, April 2019. Дата обращения: 11 февраля 2016. Архивировано 3 марта 2021 года.

Ссылки

  • История создании кодировки в сообщении Игоря Семенюка в эхоконференции SU.LAN от 14 января 1996
  • Юникод-коды символов на unicode.org

Источник

Отличие utf-8 и windows 1251. Рассмотрим, чем отличаются две кодировки «utf-8 и windows 1251» в теории и на практике. И как победить некоторые проблемы для кириллицы в utf-8!?

  • О кодировках utf-8 и windows 1251

    Самое главное. что нас интересует, как и меня — в чем же отличие кодировок utf-8 и windows 1251. И отличается только кириллица!

    Чем отличаются utf-8 и windows 1251

    UTF-8 — это много-байтовая кодировка, а Windows- 1251 однобайтовая. И более того, отличие только в кириллице.

    Количество байтов кириллицы в UTF-8 будет в 2 раза больше, чем 1). латиницы в UTF-8 и 2). латиницы + кириллицы в Windows- 1251 → пример

    Главное отличие кодировок – это используемый набор символов. В UTF-8 гораздо больше количество символов возможно представить, чем в Windows- 1251. Кодировка Windows- 1251 однобайтовая, т.е. представить в ней можно только 255 символов. Для кириллицы, впрочем, этого вполне достаточно, именно поэтому однобайтовые кодировки до сих пор так массово применяются.

    Что такое кодировка windows 1251

    Windows-1251 – набор символов и кодировка, являющаяся стандартной 8-битной кодировкой для всех русских версий Microsoft Windows. Пользуется довольно большой популярностью. Windows-1251 выгодно отличается от других 8‑битных кириллических кодировок (таких как CP866, KOI8-R и ISO 8859-5) наличием практически всех символов, использующихся в русской типографике для обычного текста; она также содержит все символы для близких к русскому языку языков: украинского, белорусского, сербского и болгарского.

    Что такое кодировка UTF-8

    UTF-8 – в настоящее время распространённая кодировка, реализующая представление Юникода, совместимое с 8-битным кодированием текста. Нашла широкое применение в операционных системах и веб-пространстве. Текст, состоящий только из символов Юникода с номерами меньше 128, при записи в UTF-8 превращается в обычный текст ASCII. Остальные символы Юникода изображаются последовательностями длиной от 2 до 6 байт.

    Символ в кодировке UTF-8 может кодироваться аж 6 байтами (пока используется только 4 и больше не планируется). Для русского языка, например, символ занимает 2 байта. Все символы, которые есть в таблице символов – поддерживаются этой кодировкой. К примеру, если вам нужен знак копирайта (©), то вам не нужно искать особый шрифт или же изображать символов в графическом формате.

  • Пример вывода текста в кодировках utf-8 латиницы

    Когда и если вы прочитали теорию о разнице кодировок utf-8 и windows 1251 — это уже победа!

    А если вы еще и поняли о чем идет речь, то вы вообще Эйнштейн! , то и смысла особого вам читать дальше нет.

    А для всех остальных продолжим…

    Чем отличается текст в кодировках utf-8 и windows 1251

    Теория — это конечно классно и круто, но как обстоит дело на практике!

    Как показать отличие двух кодировок!?

    У нас на сайте основная кодировка utf-8, и мы не напрягаясь можем посмотреть, что творится с текстом в этой кодировке!

    Нам понадобится какой-то текст на латинице:

    И… нам нужно такое слово, чтобы имело одинаковое количество букв в слове, ну пусть это будет моё имя…

    Пусть это будет слово — «Marat!»

    Далее нам потребуется функция var_dump.

    И выведем прямо здесь вот такую конструкцию :

    var_dump(‘Marat’);

    Результат:

    string(5) «Marat»

    Что мы здесь можем прочитать!?

    Что это строка, и что в ней 5 элементов.

  • Пример вывода текста в кодировках utf-8 кириллицы

    Теперь, проделаем тоже самое со строкой на кириллице:

    У нас все таже кодировка utf-8.

    Но теперь нам понадобится текст на кириллице:

    Пусть это будет слово — «Марат!»

    Опять var_dump.

    И выведем прямо здесь вот такую конструкцию :

    var_dump(‘Марат’);

    Результат:

    string(10) «Марат»

    И что мы здесь видим!?

    Что количество элементов в строке 10… Если вы читали теорию внимательно, то вот вам показатель того, что одна буква состоит из двух символов, а латиницы это не касается…!

    Поэтому, и возникают проблемы с текстом в кодировке utf-8 кириллицы, множество функций тупо не работают.

    Как пример…как-то я задолбался со strtolower в utf-8 для кириллицы, что решил написать собственную функцию strtolower, чтобы каждый раз не городить этажерку из нескольких функций…

  • Пример отличия в кодировках utf-8 и windows 1251

    Если вы поленились прочитать два верхних пункта, то ещё раз выведем результаты вывода текста на латинице и на кириллице с одним количеством букв.

    Результат вывода var_dump(‘Marat’);:

    string(5) «Marat»

    Результат var_dump(‘Марат’);:

    string(10) «Марат»

    Что делать, если функция для кириллицы на utf-8 не работают?

    Поскольку я давно занимаюсь сайтами, то могу сказать, что на самом деле таких случаев не так много, когда нужна какая-то специальная функция для обработки кириллицы на utf-8.

    Но если уж она возникала, то есть несколько вариантов решения!

    Это функции с приставкой «mb_», естественно надо проверять, работает ли она у вас на хостинге.

    Второй вариант, это написать собственную функцию, которая будет работать и для латиницы и кириллицы? как это я показал на функции strtolower

    И третий вариант перекодировать строку из utf-8 в windows 1251

    Рассмотрим, первый попавшийся на ум пример…

    Пусть это будет функция str_split и её аналог mb_str_split

    print_r (str_split(‘Марат’)); выдаст :

    Array

    (

    [0] => �

    [1] => �

    [2] => �

    [3] => �

    [4] => �

    [5] => �

    [6] => �

    [7] => �

    [8] => �

    [9] => �

    )

    print_r (mb_str_split(‘Марат’)); выдаст :

    Что делать, если функция для кириллицы на utf-8 не работают?

    Картинка с сайта: dwweb.ru

    Как видим… полный отстой…

    Мы далее разбирались с этим здесь.

  • Как перекодировать строку из utf-8 в windows 1251

    Итак… есть третий вариант, борьбы с квадратиками(непонимание кодировки) — перекодировать строку из utf-8 в windows 1251:

    iconv(«UTF-8», «windows-1251», $text)

    После того, как вы выполнили все намеченные действия с текстом, возвращаем его в исходную кодировку :

    iconv(«windows-1251», «UTF-8», $text)

    Рассмотрим пример перекодировки текста из UTF-8 в windows-1251 и обратно

    Мы использовали var_dump, и он посчитал не правильно, поскольку просто так, на страницу вывести данные с помощью var_dump нельзя, мы использовали вот такой костыль :

    ob_start();

    var_dump( ‘Марат’ );

    echo ob_get_clean();

    Теперь попробуем перекодировать строку прямо внутри :

    ob_start();

    var_dump(iconv(«UTF-8», «windows-1251», ‘Марат’)) ;

    echo ob_get_clean() ;

    Результат подсчета знаков верный, но видим что слово не было перекодировано обратно :

    Исправим:

    ob_start();

    var_dump(iconv(«UTF-8», «windows-1251», ‘Марат’)) ;

    echo iconv(«windows-1251», «UTF-8», ob_get_clean());

    Результат :

    Итак… вы видели процесс кодировки и перекодировки текста из utf-8 в windows 1251, а потом обратно!

    Вы наверное подумали :

    Что за дичь здесь происходит!? Это не дичь! Когда ты внутри, а не снаружи, то все кажется не простым, а очень простым.

    И чем больше ты в теме, это просто, как есть, пить, дышать… просто не задумываешься…

    Я не говорю, что всегда так, иногда бывает очень трудно какаю-то задачку решить…

  • Что лучше для кириллицы utf-8 или…

    Интересный поисковый запрос — «Что лучше для кириллицы utf-8 или…«…

    Дело в том, что я выбрал кодировку «utf-8» уже… 16 лет(число динамичное) назад… и… уже сейчас трудно вспомнить, почему именно её… но точно вам могу заявить, что когда-то пользовался «windows-1251″… и у неё были какие-то заморочки, в виде неадекватного вывода информации, что, я волей неволей перешел на «utf-8»

    Какие минусы у utf-8?

    Одна из самых главных проблем «utf-8» — это многобайтовость…

    Да! Это несколько неудобно в самом начале, но для всякой функции, которая не хочет работать с кириллицей, существуют замены.

    В процессе создания сайта у вас может возникнуть несколько проблем, которые вы решите и «тупо» забудете об этом…

    Задумывался ли я о переходе с кодировки utf-8 на другую?

    Смысл задумываться о переходе с кодировки utf-8 на другую, если всё работает так, как нужно!

    Источник

    Понравилась статья? Поделить с друзьями:
    0 0 голоса
    Рейтинг статьи
    Подписаться
    Уведомить о
    guest

    0 комментариев
    Старые
    Новые Популярные
    Межтекстовые Отзывы
    Посмотреть все комментарии
  • Логи запуска служб windows
  • Средство создания установочных носителей windows
  • Aircrack ng windows torrent
  • Windows 10 show thumbnails
  • Asrock m3a ucc драйвера windows 10