Поставить кириллицу. Выбор и изменение кодировки в Microsoft Word. ASCII — базовая кодировка текста для латиницы

MS Word заслужено является самым популярным текстовым редактором. Следовательно, чаще всего можно столкнуться с документами в формате именно этой программы. Все, что может в них отличаться, это лишь версия Ворда и формат файла (DOC или DOCX). Однако, не смотря на общность, с открытием некоторых документов могут возникнуть проблемы.

Одно дело, если вордовский файл не открывается вовсе или запускается в режиме ограниченной функциональности, и совсем другое, когда он открывается, но большинство, а то и все символы в документе являются нечитабельными. То есть, вместо привычной и понятной кириллицы или латиницы, отображаются какие-то непонятные знаки (квадраты, точки, вопросительные знаки).

Если и вы столкнулись с аналогичной проблемой, вероятнее всего, виною тому неправильная кодировка файла, точнее, его текстового содержимого. В этой статье мы расскажем о том, как изменить кодировку текста в Word, тем самым сделав его пригодным для чтения. К слову, изменение кодировки может понадобиться еще и для того, чтобы сделать документ нечитабельным или, так сказать, чтобы “конвертировать” кодировку для дальнейшего использования текстового содержимого документа Ворд в других программах.

Примечание: Общепринятые стандарты кодировки текста в разных странах могут отличаться. Вполне возможно, что документ, созданный, к примеру, пользователем, проживающим в Азии, и сохраненный в местной кодировке, не будет корректно отображаться у пользователя в России, использующего на ПК и в Word стандартную кириллицу.

Вся информация, которая отображается на экране компьютера в текстовом виде, на самом деле хранится в файле Ворд в виде числовых значений. Эти значения преобразовываются программой в отображаемые знаки, для чего и используется кодировка.

Кодировка — схема нумерации, в которой каждому текстовому символу из набора соответствует числовое значение. Сама же кодировка может содержать буквы, цифры, а также другие знаки и символы. Отдельно стоит сказать о том, что в разных языках довольно часто используются различные наборы символов, именно поэтому многие кодировки предназначены исключительно для отображения символов конкретных языков.

Выбор кодировки при открытии файла

Если текстовое содержимое файла отображается некорректно, например, с квадратами, вопросительными знаками и другими символами, значит, MS Word не удалось определить его кодировку. Для устранения этой проблемы необходимо указать правильную (подходящую) кодировку для декодирования (отображения) текста.

1. Откройте меню “Файл” (кнопка “MS Office” ранее).

2. Откройте раздел “Параметры” и выберите в нем пункт “Дополнительно” .

3. Прокрутите содержимое окна вниз, пока не найдете раздел “Общие” . Установите галочку напротив пункта “Подтверждать преобразование формата файла при открытии” . Нажмите “ОК” для закрытия окна.

Примечание: После того, как вы установите галочку напротив этого параметра, при каждом открытии в Ворде файла в формате, отличном от DOC, DOCX, DOCM, DOT, DOTM, DOTX, будет отображаться диалоговое окно “Преобразование файла” . Если же вам часто приходится работать с документами других форматов, но при этом не требуется менять их кодировку, снимите эту галочку в параметрах программы.

4. Закройте файл, а затем снова откройте его.

5. В разделе “Преобразование файла” выберите пункт “Кодированный текст” .

6. В открывшемся диалоговом окне “Преобразование файла” установите маркер напротив параметра “Другая” . Выберите необходимую кодировку из списка.

Совет: В окне “Образец” вы можете увидеть, как будет выглядеть текст в той или иной кодировке.

7. Выбрав подходящую кодировку, примените ее. Теперь текстовое содержимое документа будет корректно отображаться.

В случае, если весь текст, кодировку для которого вы выбираете, выглядит практически одинаков (например, в виде квадратов, точек, знаков вопроса), вероятнее всего, на вашем компьютере не установлен шрифт, используемый в документе, который вы пытаетесь открыть. О том, как установить сторонний шрифт в MS Word, вы можете прочесть в нашей статье.

Выбор кодировки при сохранении файла

Если вы не указываете (не выбираете) кодировку файла MS Word при сохранении, он автоматически сохраняется в кодировке Юникод , чего в большинстве случаев предостаточно. Данный тип кодировки поддерживает большую часть знаков и большинство языков.

В случае, если созданный в Ворде документ вы (или кто-то другой) планируете открывать в другой программе, не поддерживающей Юникод, вы всегда можете выбрать необходимую кодировку и сохранить файл именно в ней. Так, к примеру, на компьютере с русифицированной операционной системой вполне можно создать документ на традиционном китайском с применением Юникода.

Проблема лишь в том, что в случае, если данный документ будет открываться в программе, поддерживающей китайский, но не поддерживающей Юникод, куда правильнее будет сохранить файл в другой кодировке, например, “Китайская традиционная (Big5)” . В таком случае текстовое содержимое документа при открытии его в любой программе с поддержкой китайского языка, будет отображаться корректно.

Примечание: Так как Юникод является самым популярным, да и просто обширным стандартном среди кодировок, при сохранении текста в других кодировках возможно некорректное, неполное, а то и вовсе отсутствующее отображение некоторых файлов. На этапе выбора кодировки для сохранения файла знаки и символы, которые не поддерживаются, отображаются красным цветом, дополнительно высвечивается уведомление с информацией о причине.

1. Откройте файл, кодировку которого вам необходимо изменить.

2. Откройте меню “Файл” (кнопка “MS Office” ранее) и выберите пункт “Сохранить как” . Если это необходимо, задайте имя файла.

3. В разделе “Тип файла” выберите параметр “Обычный текст” .

5. Выполните одно из следующих действий:

Примечание: Если при выборе той или иной (“Другой” ) кодировки вы видите сообщение “Текст, выделенный красным, невозможно правильно сохранить в выбранной кодировке” , выберите другую кодировку (иначе содержимое файла будет отображаться некорректно) или же установите галочку напротив параметра “разрешить подстановку знаков” .

Если подстановка знаков разрешена, все те знаки, которые отобразить в выбранной кодировке невозможно, будут автоматически заменены на эквивалентные им символы. Например, многоточие может быть заменено на три точки, а угловые кавычки — на прямые.

6. Файл будет сохранен в выбранной вами кодировке в виде обычного текста (формат “TXT” ).

На этом, собственно, и все, теперь вы знаете, как в Word сменить кодировку, а также знаете о том, как ее подобрать, если содержимое документа отображается некорректно.

Здравствуйте, уважаемые читатели блога сайт. Сегодня мы поговорим с вами про то, откуда берутся кракозябры на сайте и в программах, какие кодировки текста существуют и какие из них следует использовать. Подробно рассмотрим историю их развития, начиная от базовой ASCII, а также ее расширенных версий CP866, KOI8-R, Windows 1251 и заканчивая современными кодировками консорциума Юникод UTF 16 и 8.

Кому-то эти сведения могут показаться излишними, но знали бы вы, сколько мне приходит вопросов именно касаемо вылезших кракозябров (не читаемого набора символов). Теперь у меня будет возможность отсылать всех к тексту этой статьи и самостоятельно отыскивать свои косяки. Ну что же, приготовьтесь впитывать информацию и постарайтесь следить за ходом повествования.

ASCII — базовая кодировка текста для латиницы

Развитие кодировок текстов происходило одновременно с формированием отрасли IT, и они за это время успели претерпеть достаточно много изменений. Исторически все начиналось с довольно-таки не благозвучной в русском произношении EBCDIC, которая позволяла кодировать буквы латинского алфавита, арабские цифры и знаки пунктуации с управляющими символами.

Но все же отправной точкой для развития современных кодировок текстов стоит считать знаменитую ASCII (American Standard Code for Information Interchange, которая по-русски обычно произносится как «аски»). Она описывает первые 128 символов из наиболее часто используемых англоязычными пользователями — латинские буквы, арабские цифры и знаки препинания.

Еще в эти 128 знаков, описанных в ASCII, попадали некоторые служебные символы навроде скобок, решеток, звездочек и т.п. Собственно, вы сами можете увидеть их:

Именно эти 128 символов из первоначального вариант ASCII стали стандартом, и в любой другой кодировке вы их обязательно встретите и стоять они будут именно в таком порядке.

Но дело в том, что с помощью одного байта информации можно закодировать не 128, а целых 256 различных значений (двойка в степени восемь равняется 256), поэтому вслед за базовой версией Аски появился целый ряд расширенных кодировок ASCII , в которых можно было кроме 128 основных знаков закодировать еще и символы национальной кодировки (например, русской).

Тут, наверное, стоит еще немного сказать про системы счисления, которые используются при описании. Во-первых, как вы все знаете, компьютер работает только с числами в двоичной системе, а именно с нулями и единицами («булева алгебра», если кто проходил в институте или в школе). , каждый из которых представляет из себя двойку в степени, начиная с нулевой, и до двойки в седьмой:

Не трудно понять, что всех возможных комбинаций нулей и единиц в такой конструкции может быть только 256. Переводить число из двоичной системы в десятичную довольно просто. Нужно просто сложить все степени двойки, над которыми стоят единички.

В нашем примере это получается 1 (2 в степени ноль) плюс 8 (два в степени 3), плюс 32 (двойка в пятой степени), плюс 64 (в шестой), плюс 128 (в седьмой). Итого получает 233 в десятичной системе счисления. Как видите, все очень просто.

Но если вы присмотритесь к таблице с символами ASCII, то увидите, что они представлены в шестнадцатеричной кодировке. Например, «звездочка» соответствует в Аски шестнадцатеричному числу 2A. Наверное, вам известно, что в шестнадцатеричной системе счисления используются кроме арабских цифр еще и латинские буквы от A (означает десять) до F (означает пятнадцать).

Ну так вот, для перевода двоичного числа в шестнадцатеричное прибегают к следующему простому и наглядному способу. Каждый байт информации разбивают на две части по четыре бита, как показано на приведенном выше скриншоте. Т.о. в каждой половинке байта двоичным кодом можно закодировать только шестнадцать значений (два в четвертой степени), что можно легко представить шестнадцатеричным числом.

Причем, в левой половине байта считать степени нужно будет опять начиная с нулевой, а не так, как показано на скриншоте. В результате, путем нехитрых вычислений, мы получим, что на скриншоте закодировано число E9. Надеюсь, что ход моих рассуждений и разгадка данного ребуса вам оказались понятны. Ну, а теперь продолжим, собственно, говорить про кодировки текста.

Расширенные версии Аски — кодировки CP866 и KOI8-R с псевдографикой

Итак, мы с вами начали говорить про ASCII, которая являлась как бы отправной точкой для развития всех современных кодировок (Windows 1251, юникод, UTF 8).

Изначально в нее было заложено только 128 знаков латинского алфавита, арабских цифр и еще чего-то там, но в расширенной версии появилась возможность использовать все 256 значений, которые можно закодировать в одном байте информации. Т.е. появилась возможность добавить в Аски символы букв своего языка.

Тут нужно будет еще раз отвлечься, чтобы пояснить — зачем вообще нужны кодировки текстов и почему это так важно. Символы на экране вашего компьютера формируются на основе двух вещей — наборов векторных форм (представлений) всевозможных знаков (они находятся в файлах со ) и кода, который позволяет выдернуть из этого набора векторных форм (файла шрифта) именно тот символ, который нужно будет вставить в нужное место.

Понятно, что за сами векторные формы отвечают шрифты, а вот за кодирование отвечает операционная система и используемые в ней программы. Т.е. любой текст на вашем компьютере будет представлять собой набор байтов, в каждом из которых закодирован один единственный символ этого самого текста.

Программа, отображающая этот текст на экране (текстовый редактор, браузер и т.п.), при разборе кода считывает кодировку очередного знака и ищет соответствующую ему векторную форму в нужном файле шрифта, который подключен для отображения данного текстового документа. Все просто и банально.

Значит, чтобы закодировать любой нужный нам символ (например, из национального алфавита), должно быть выполнено два условия — векторная форма этого знака должна быть в используемом шрифте и этот символ можно было бы закодировать в расширенных кодировках ASCII в один байт. Поэтому таких вариантов существует целая куча. Только лишь для кодирования символов русского языка существует несколько разновидностей расширенной Аски.

Например, изначально появилась CP866 , в которой была возможность использовать символы русского алфавита и она являлась расширенной версией ASCII.

Т.е. ее верхняя часть полностью совпадала с базовой версией Аски (128 символов латиницы, цифр и еще всякой лабуды), которая представлена на приведенном чуть выше скриншоте, а вот уже нижняя часть таблицы с кодировкой CP866 имела указанный на скриншоте чуть ниже вид и позволяла закодировать еще 128 знаков (русские буквы и всякая там псевдографика):

Видите, в правом столбце цифры начинаются с 8, т.к. числа с 0 до 7 относятся к базовой части ASCII (см. первый скриншот). Т.о. русская буква «М» в CP866 будет иметь код 9С (она находится на пересечении соответствующих строки с 9 и столбца с цифрой С в шестнадцатеричной системе счисления), который можно записать в одном байте информации, и при наличии подходящего шрифта с русскими символами эта буква без проблем отобразится в тексте.

Откуда взялось такое количество псевдографики в CP866 ? Тут все дело в том, что эта кодировка для русского текста разрабатывалась еще в те мохнатые года, когда не было такого распространения графических операционных систем как сейчас. А в Досе, и подобных ей текстовых операционках, псевдографика позволяла хоть как-то разнообразить оформление текстов и поэтому ею изобилует CP866 и все другие ее ровесницы из разряда расширенных версий Аски.

CP866 распространяла компания IBM, но кроме этого для символов русского языка были разработаны еще ряд кодировок, например, к этому же типу (расширенных ASCII) можно отнести KOI8-R :

Принцип ее работы остался тот же самый, что и у описанной чуть ранее CP866 — каждый символ текста кодируется одним единственным байтом. На скриншоте показана вторая половина таблицы KOI8-R, т.к. первая половина полностью соответствует базовой Аски, которая показана на первом скриншоте в этой статье.

Среди особенностей кодировки KOI8-R можно отметить то, что русские буквы в ее таблице идут не в алфавитном порядке, как это, например, сделали в CP866.

Если посмотрите на самый первый скриншот (базовой части, которая входит во все расширенные кодировки), то заметите, что в KOI8-R русские буквы расположены в тех же ячейках таблицы, что и созвучные им буквы латинского алфавита из первой части таблицы. Это было сделано для удобства перехода с русских символов на латинские путем отбрасывания всего одного бита (два в седьмой степени или 128).

Windows 1251 — современная версия ASCII и почему вылезают кракозябры

Дальнейшее развитие кодировок текста было связано с тем, что набирали популярность графические операционные системы и необходимость использования псевдографики в них со временем пропала. В результате возникла целая группа, которая по своей сути по-прежнему являлись расширенными версиями Аски (один символ текста кодируется всего одним байтом информации), но уже без использования символов псевдографики.

Они относились к так называемым ANSI кодировкам, которые были разработаны американским институтом стандартизации. В просторечии еще использовалось название кириллица для варианта с поддержкой русского языка. Примером такой может служить .

Она выгодно отличалась от используемых ранее CP866 и KOI8-R тем, что место символов псевдографики в ней заняли недостающие символы русской типографики (окромя знака ударения), а также символы, используемые в близких к русскому славянских языках (украинскому, белорусскому и т.д.):

Из-за такого обилия кодировок русского языка, у производителей шрифтов и производителей программного обеспечения постоянно возникала головная боль, а у нас с вам, уважаемые читатели, зачастую вылезали те самые пресловутые кракозябры , когда происходила путаница с используемой в тексте версией.

Очень часто они вылезали при отправке и получении сообщений по электронной почте, что повлекло за собой создание очень сложных перекодировочных таблиц, которые, собственно, решить эту проблему в корне не смогли, и зачастую пользователи для переписки использовали , чтобы избежать пресловутых кракозябров при использовании русских кодировок подобных CP866, KOI8-R или Windows 1251.

По сути, кракозябры, вылазящие вместо русского текста, были результатом некорректного использования кодировки данного языка, которая не соответствовала той, в которой было закодировано текстовое сообщение изначально.

Допустим, если символы, закодированные с помощью CP866, попробовать отобразить, используя кодовую таблицу Windows 1251, то эти самые кракозябры (бессмысленный набор знаков) и вылезут, полностью заменив собой текст сообщения.

Аналогичная ситуация очень часто возникает при , форумов или блогов, когда текст с русскими символами по ошибке сохраняется не в той кодировке, которая используется на сайте по умолчанию, или же не в том текстовом редакторе, который добавляет в код отсебятину не видимую невооруженным глазом.

В конце концов такая ситуация с множеством кодировок и постоянно вылезающими кракозябрами многим надоела, появились предпосылки к созданию новой универсальной вариации, которая бы заменила собой все существующие и решила бы, наконец, на корню проблему с появлением не читаемых текстов. Кроме этого существовала проблема языков подобных китайскому, где символов языка было гораздо больше, чем 256.

Юникод (Unicode) — универсальные кодировки UTF 8, 16 и 32

Эти тысячи знаков языковой группы юго-восточной Азии никак невозможно было описать в одном байте информации, который выделялся для кодирования символов в расширенных версиях ASCII. В результате был создан консорциум под названием Юникод (Unicode — Unicode Consortium) при сотрудничестве многих лидеров IT индустрии (те, кто производит софт, кто кодирует железо, кто создает шрифты), которые были заинтересованы в появлении универсальной кодировки текста.

Первой вариацией, вышедшей под эгидой консорциума Юникод, была UTF 32 . Цифра в названии кодировки означает количество бит, которое используется для кодирования одного символа. 32 бита составляют 4 байта информации, которые понадобятся для кодирования одного единственного знака в новой универсальной кодировке UTF.

В результате чего, один и тот же файл с текстом, закодированный в расширенной версии ASCII и в UTF-32, в последнем случае будет иметь размер (весить) в четыре раза больше. Это плохо, но зато теперь у нас появилась возможность закодировать с помощью ЮТФ число знаков, равное двум в тридцать второй степени (миллиарды символов , которые покроют любое реально необходимое значение с колоссальным запасом).

Но многим странам с языками европейской группы такое огромное количество знаков использовать в кодировке вовсе и не было необходимости, однако при задействовании UTF-32 они ни за что ни про что получали четырехкратное увеличение веса текстовых документов, а в результате и увеличение объема интернет трафика и объема хранимых данных. Это много, и такое расточительство себе никто не мог позволить.

В результате развития Юникода появилась UTF-16 , которая получилась настолько удачной, что была принята по умолчанию как базовое пространство для всех символов, которые у нас используются. Она использует два байта для кодирования одного знака. Давайте посмотрим, как это дело выглядит.

В операционной системе Windows вы можете пройти по пути «Пуск» — «Программы» — «Стандартные» — «Служебные» — «Таблица символов». В результате откроется таблица с векторными формами всех установленных у вас в системе шрифтов. Если вы выберете в «Дополнительных параметрах» набор знаков Юникод, то сможете увидеть для каждого шрифта в отдельности весь ассортимент входящих в него символов.

Кстати, щелкнув по любому из них, вы сможете увидеть его двухбайтовый код в формате UTF-16 , состоящий из четырех шестнадцатеричных цифр:

Сколько символов можно закодировать в UTF-16 с помощью 16 бит? 65 536 (два в степени шестнадцать), и именно это число было принято за базовое пространство в Юникоде. Помимо этого существуют способы закодировать с помощью нее и около двух миллионов знаков, но ограничились расширенным пространством в миллион символов текста.

Но даже эта удачная версия кодировки Юникода не принесла особого удовлетворения тем, кто писал, допустим, программы только на английском языке, ибо у них, после перехода от расширенной версии ASCII к UTF-16, вес документов увеличивался в два раза (один байт на один символ в Аски и два байта на тот же самый символ в ЮТФ-16).

Вот именно для удовлетворения всех и вся в консорциуме Unicode было решено придумать кодировку переменной длины . Ее назвали UTF-8. Несмотря на восьмерку в названии, она действительно имеет переменную длину, т.е. каждый символ текста может быть закодирован в последовательность длиной от одного до шести байт.

На практике же в UTF-8 используется только диапазон от одного до четырех байт, потому что за четырьмя байтами кода ничего уже даже теоретически не возможно представить. Все латинские знаки в ней кодируются в один байт, так же как и в старой доброй ASCII.

Что примечательно, в случае кодирования только латиницы, даже те программы, которые не понимают Юникод, все равно прочитают то, что закодировано в ЮТФ-8. Т.е. базовая часть Аски просто перешла в это детище консорциума Unicode.

Кириллические же знаки в UTF-8 кодируются в два байта, а, например, грузинские — в три байта. Консорциум Юникод после создания UTF 16 и 8 решил основную проблему — теперь у нас в шрифтах существует единое кодовое пространство . И теперь их производителям остается только исходя из своих сил и возможностей заполнять его векторными формами символов текста. Сейчас в наборы даже .

В приведенной чуть выше «Таблице символов» видно, что разные шрифты поддерживают разное количество знаков. Некоторые насыщенные символами Юникода шрифты могут весить очень прилично. Но зато теперь они отличаются не тем, что они созданы для разных кодировок, а тем, что производитель шрифта заполнил или не заполнил единое кодовое пространство теми или иными векторными формами до конца.

Кракозябры вместо русских букв — как исправить

Давайте теперь посмотрим, как появляются вместо текста кракозябры или, другими словами, как выбирается правильная кодировка для русского текста. Собственно, она задается в той программе, в которой вы создаете или редактируете этот самый текст, или же код с использованием текстовых фрагментов.

Для редактирования и создания текстовых файлов лично я использую очень хороший, на мой взгляд, . Впрочем, он может подсвечивать синтаксис еще доброй сотни языков программирования и разметки, а также имеет возможность расширения с помощью плагинов. Читайте подробный обзор этой замечательной программы по приведенной ссылке.

В верхнем меню Notepad++ есть пункт «Кодировки», где у вас будет возможность преобразовать уже имеющийся вариант в тот, который используется на вашем сайте по умолчанию:

В случае сайта на Joomla 1.5 и выше, а также в случае блога на WordPress следует во избежании появления кракозябров выбирать вариант UTF 8 без BOM . А что такое приставка BOM?

Дело в том, что когда разрабатывали кодировку ЮТФ-16, зачем-то решили прикрутить к ней такую вещь, как возможность записывать код символа, как в прямой последовательности (например, 0A15), так и в обратной (150A). А для того, чтобы программы понимали, в какой именно последовательности читать коды, и был придуман BOM (Byte Order Mark или, другими словами, сигнатура), которая выражалась в добавлении трех дополнительных байтов в самое начало документов.

В кодировке UTF-8 никаких BOM предусмотрено в консорциуме Юникод не было и поэтому добавление сигнатуры (этих самых пресловутых дополнительных трех байтов в начало документа) некоторым программам просто-напросто мешает читать код. Поэтому мы всегда при сохранении файлов в ЮТФ должны выбирать вариант без BOM (без сигнатуры). Таким образом, вы заранее обезопасите себя от вылезания кракозябров .

Что примечательно, некоторые программы в Windows не умеют этого делать (не умеют сохранять текст в ЮТФ-8 без BOM), например, все тот же пресловутый Блокнот Windows. Он сохраняет документ в UTF-8, но все равно добавляет в его начало сигнатуру (три дополнительных байта). Причем эти байты будут всегда одни и те же — читать код в прямой последовательности. Но на серверах из-за этой мелочи может возникнуть проблема — вылезут кракозябры.

Поэтому ни в коем случае не пользуйтесь обычным блокнотом Windows для редактирования документов вашего сайта, если не хотите появления кракозябров. Лучшим и наиболее простым вариантом я считаю уже упомянутый редактор Notepad++, который практически не имеет недостатков и состоит из одних лишь достоинств.

В Notepad ++ при выборе кодировки у вас будет возможность преобразовать текст в кодировку UCS-2, которая по своей сути очень близка к стандарту Юникод. Также в Нотепаде можно будет закодировать текст в ANSI, т.е. применительно к русскому языку это будет уже описанная нами чуть выше Windows 1251. Откуда берется эта информация?

Она прописана в реестре вашей операционной системы Windows — какую кодировку выбирать в случае ANSI, какую выбирать в случае OEM (для русского языка это будет CP866). Если вы установите на своем компьютере другой язык по умолчанию, то и эти кодировки будут заменены на аналогичные из разряда ANSI или OEM для того самого языка.

После того, как вы в Notepad++ сохраните документ в нужной вам кодировке или же откроете документ с сайта для редактирования, то в правом нижнем углу редактора сможете увидеть ее название:

Чтобы избежать кракозябров , кроме описанных выше действий, будет полезным прописать в его шапке исходного кода всех страниц сайта информацию об этой самой кодировке, чтобы на сервере или локальном хосте не возникло путаницы.

Вообще, во всех языках гипертекстовой разметки кроме Html используется специальное объявление xml, в котором указывается кодировка текста.

Прежде, чем начать разбирать код, браузер узнает, какая версия используется и как именно нужно интерпретировать коды символов этого языка. Но что примечательно, в случае, если вы сохраняете документ в принятом по умолчанию юникоде, то это объявление xml можно будет опустить (кодировка будет считаться UTF-8, если нет BOM или ЮТФ-16, если BOM есть).

В случае же документа языка Html для указания кодировки используется элемент Meta , который прописывается между открывающим и закрывающим тегом Head:

... ...

Эта запись довольно сильно отличается от принятой в , но полностью соответствует новому внедряемому потихоньку стандарту Html 5, и она будет стопроцентно правильно понята любыми используемыми на текущий момент браузерами.

По идее, элемент Meta с указание кодировки Html документа лучше будет ставить как можно выше в шапке документа , чтобы на момент встречи в тексте первого знака не из базовой ANSI (которые правильно прочитаются всегда и в любой вариации) браузер уже должен иметь информацию о том, как интерпретировать коды этих символов.

Удачи вам! До скорых встреч на страницах блога сайт

Вам может быть интересно

Что такое URL адреса, чем отличаются абсолютные и относительные ссылки для сайта
OpenServer - современный локальный сервер и пример его использования для установки WordPress на компьютер
Что такое Chmod, какие права доступа назначать файлам и папкам (777, 755, 666) и как это сделать через PHP
Поиск Яндекса по сайту и интернет-магазину

В данной статье пойдёт речь о кодировках в Windows. Все в жизни хоть раз использовали и писали консольные приложения как таковые. Нету разницы для какой причины. Будь-то выбивание процесса или же просто написать «Привет!!! Я не могу сделать кодировку нормальной, поэтому я смотрю эту статью!».

Тем, кто ещё не понимает, о чём проблема, то вот Вам:

А тут было написано:

В любом случае в Windows до 10 кодировка BAT и других языков, не использует кодировку поддерживающую Ваш язык, поэтому все русские символы будут писаться неправильно.

1. Настройка консоли в батнике

Сразу для тех, кто пишет chcp 1251 лучше написать это:

Assoc .bat = .mp4
Первый способ устранения проблемы, это Notepad++ . Для этого Вам нужно открыть Ваш батник таким способом:

Не бойтесь, у Вас откроется код Вашего батника, а затем Вам нужно будет сделать следующие действия:

Если Вам ничего не помогло, то преобразуйте в UTF-8 без BOM.

2. Написание консольных программ
Нередко люди пишут консольные программы(потому что на некоторых десктопные писать невозможно), а кодировка частая проблема.

Первый способ непосредственно Notepad++, но а если нужно сначала одну кодировку, а потом другую?

Сразу для использующих chcp 1251 пишите это:

Del C:\Program Data echo Mne pofig pause
Второй способ это написать десктопную программу, или же использовать Visual Studio. Если же не помогает, то есть первое: изменение кодировки вывода(Пример на C++).

#include #include int main() { SetConsoleCP(номер_кодировки); SetConsoleOutputCP(номер_кодировки); }
Если же не сработает:

#include //Не забываем про библиотеку Math. char bufRus; char* Rus(const char* text) { CharToOem(text, bufRus); return bufRus } int main { cout << "Тут пишите, что угодно!" << endl; system("pause") return 0 }
3. Изменение chcp 1251
Если же у Вас батник, то напишите в начало:

Chcp 1251 >nul for /f "delims=" %%A in ("Мой текст") do >nul chcp 866& echo.%%A
Теперь у Нас будет нормальный вывод в консоль. На других языках (С++):

SetConsoleOutputCP(1251) //А тут добавляете тот цикл, который был в батнике
4. Сделать жизнь мёдом
При использовании данного способа Вы не сможете:

• Разрабатывать приложения на Windows ниже 10
• Спасти мир от данной проблемы
• Думать о других людях
• Разрабатывать десктопные приложения, так как Вам жизнь покажется мёдом
• Сменить Windows на версию ниже 10
• Ну и понимать людей, у которых Windows ниже 10

Теги: bat, кодировка, абракадабра, привет тегочтецам, тегспам, проблема с кодировкой, как поменять кодировку, ааа мы все умрем

Ввод кириллицы с системной клавиатуры- предлагаемые раскладки (расположение букв)

Ввод кириллицы ссистемной клавиатуры, при "RU" внизу справа -

предлагаемые раскладки (расположение букв):

Внимание! Часто спрашивают:
жалобы на ввод русского в Интернете, еслибраузер (обозреватель) -MS Internet Explorer:
на экране этого браузера при вводе кириллицы появляются только странные символы типа
38B5 G09=8:C

Это никак не связано с темой даннойстраницы -с настройкамисистемной клавиатуры на ввод кириллицы.
Это некая программка, "присосавшаяся" к Internet Explorer, даёт такой эффект. Вот (пополняемая) инструкция по решению этой проблемы (откроется в новом окне):
"Internet Explorer: странные символы вместо русского при вводе текста"

На данной странице представлена инструкция по активации клавиатурных средств русскогоязыка -в основном для не русскойMS Windows (и даны ссылки на то же самое для Linux/Mac систем).

Имеется в виду активация встроенных в Windows, обычныхсистемных клавиатурных средств, черезControl Panel (Панель Управления),чтобы работал переключатель "RU" внизу справа и можно было по-русски писа ть в любом приложении.

Для каждого"языка ввода" (Input Language) , который отображается в правой части панели задач в виде"индикатора языка" ("EN", "RU", "FR",...),под Windows может существовать целыйнабор из нескольких разныхраскладок (Keyboard layout) .

Раскладка - это расположение букв и других символов на клавиатуре.

Данная страница показывает, как активировать,на выбор , одну из раскладок для русскогоязыка ("RU"):

• обычную,Стандартную русскую раскладку
• Фонетическую (транслитерационную) русскую раскладку, когда

  А-A, Б-B, Д-D, Ф-F, К-K, О-O, Т-T,...

  и значит можно вводить налатинской клавиатуребез нарисованных русских букв.

В поставке Windows для каждого поддерживаемого языка уже есть набор раскладок (в видефайлов , работающих ссистемными программными средствами управления клавиатурой, например, файл kbdru.dll для обычной русской раскладки).

Но Windows сама предлагаетпополнять этот набор, если пользователь хочет добавить новые раскладки в систему, чтобывыбор был шире.

Например, в поставку Windows входят следующие наборы раскладок для русского и американского английского:

Эти две Стандартные русские раскладки часто называют раскладками"йцукен" -по первым шести русским буквам в первом буквенном ряду клавиатуры.

Набор раскладок для любого языка можно пополнить, добавив в системуфайлы (не программы!)новых раскладок, которые будут работать с теми жесистемными программами управления вводом.

То есть,набор может быть как угодно большим.

Но для каждогоязыка ввода (для "RU", для "EN",...)активной (выбранной из набора для осуществления ввода) может быть толькоодна раскладка, чтоочевидно -
ведь например при переключении на "RU" система должна знать, где какие буквы/символы, а их расположение разное в разных раскладках из набора для языка ввода"Русский" ("Russian").

Примечание. Поэтому если вдруг у Вас не там буквы/знаки оказываются, где Вы ожидали (например, "Ё" после "Ю", а "?" вместо девятки), то может, у Вас активной выбрана 2-я Стандартная русская раскладка (см. её картинку выше)!
Ниже (ссылка в рамке) показано, как это исправить и сделатьактивной нужную раскладку.

Ниже -в рамке - информация поСтандартной раскладке, так что если Вам этоне нужно, то есть Вас интересуетФонетическая раскладка, тоне читайте текст в рамке , а переходите кпродолжению ниже рамки.

Как активироватьСтандартную русскую раскладку
под Windows Vista, Windows 7 или XP/2003
(про другие версии см. впродолжении ниже рамки)

Детали расположения символов при Фонетической раскладке

Обычно такаяФонетическая раскладка удобна для тех, кто на языке страны пребывания пишет намного больше, чемпо-русски -
отлично знаетлатинскую клавиатуру и совсемне знаетСтандартную русскую раскладку.

Возьмём для примера американский английский (Фонетическую раскладку можно иметь и для испанского и для французского,....)

Для описанной выше категории людей при Фонетической раскладкемаксимальное количество букв и символов при русском режимеввода ("RU")находитсятам же ,где они расположены при английском режимеввода ("EN"),то есть, напривычных для такого человека местах:

• буква "A" того и другого языка (при "RU" и "EN" соответственно) находится на том же месте для обоихязыков -где A на латинской клавиатуре нарисовано; буква "E" того и другогоязыка -где на клавиатуре E нарисовано,...,Б-B, Д-D, Ф-F, Г-G,...
• запятая (точка, двоеточие, апостроф,...) и при вводе русского, и при вводеанглийского -на одном и том жеместе -где символ нарисован на американской клавиатуре

Чотбы такого достичь, мне пришлось поместить одну русскую букву на клавишу с " + ", но символ "+" редко внутрирусского текста бывает (в отличие от "-" , который в качестве дефиса-тире используется).

Вот картинка моейфонетической раскладки:

Знак № , существующий в обычной русской раскладке, можно получитькомбинацией клавиш -Ctrl/Alt/5 .
Знак валютыЕвро -комбинацией клавишCtrl/Alt/E .

Если Вы хотите на принтере распечатать эту картинку, то зайдите сюда (откроется новом окне) :

Примечание. У Вас может быть физическая клавиатура, где клавиша "Enter" другой формы. Но клавиша с"Э" (та, где латинские символы "" и "|"),которую Вы видите на моем рисунке, всё равно у Вас есть, просто в другомместе -посмотри те и найдёте.

Это не совсем мой собственный вариант размещения русских букв, я взял за основу один из широко распространённых вариантов, их полно в Сети, ещё со времён
Разные группы пользователей привыкли к разным вариантам фонетической раскладки, например, пользователи бывшего популярным редактора ChiWriter использовали свой вариант, пользователи программысвой, сильно отличающийся, и т.п.

Я же взял за основу известный вариант Y aWert (соответствует назначению первых5-тибуквклавиатуры -"ЯВ ЕРТ" на английских "QW ERT"), предлагаемый, например, на одном из старейших сайтов"СовИнформБюро" , многие (и я сам) привыкли именно к такому расположения, когда "Ж" на "V", а русская "В" на "W".

Опять же, у разных людей могут быть разные предпочтения в плане расположения русских букв в Фонетической раскладке и вместо того, чтобы создавать большую коллекцию раскладок (и всё равно человек может другую хотеть) , я решил лучше написать короткую инструкцию на русском по модификации моей Фонетической раскладки, чтобы каждый мог при желании себе сделать нравящееся именно ему расположение.

Главка о модификации будет ниже, после главки об инсталляции моей раскладки (намного легче пару букв в моей переставить, чем с нуля новую раскладку делать).

Примечание. Один частый случай и простое решение для него.

Если Вас в моём варианте Фонетической раскладки (что на картинке чуть выше) НЕ устраиваеттолько одно -что
"ж " назначена на "v ", а русская "в " - на "w "
и Вы хотели бы, чтобы было ровнонаоборот - "Ж"-"W" и "В"-"V"(и этоединственное , что хотите), то Вамне придётся читать главку "Модификация", так как я уже сделал такую раскладку, именно с таким расположением, и этотвариант номер 2 будет предложен там же, где предлагается первый вариант.

Использование при "RU" Фонетической раскладки вместо Стандартной всегда можно отменить, выбрав в качестве активной раскладки Стандартную русскую.

Фонетический ввод -системный , то естьнет "сочетаний" (zh, ch, ...)

Так как Фонетическая раскладка - это режимсистемной клавиатуры -при "RU" в панели задач, то ввод, как и при Стандартной раскладке, естественно происходит в обычномсистемном режиме "1:1" -

нажалодну клавишу наклавиатуре -получил одну русскую букву.
Самый экономный режим, не надо 2-3 латинские для одной русской использовать!

А как же привычныеsh/zh/ch,... спросите вы? Да, все мы, кто сейчас пользуется Фонетической раскладкой, до этого многие годы писали такой"латиницей с сочетаниями",но нам НЕ составило труда перейти на Фонетическую раскладку:

смотрите,подавляющее большинство русскихбукв -24 из33-х (!) -имеют "стандартное", однозначное обозначение английскими буквами, что при транслите, что при любой Фонетической раскладке:
русская "А" всегда обозначается английской "A","Б" - всегда "B", "Д" - всегда "D", "K" - "K", "M" - "M",...

Поэтому, хоть Вам и придётся запоминать расположение некоторых букв, когда начнёте работать сФонетической раскладкой
(не забудьте, онамодифицируема , можете авторский вариант изменить; инструкция ниже),
но этих требующих запоминаниябукв -всего семь (девять если считать "Ё" и "Ъ", но при транслите Вы их обычно не использовали).

Для некоторых людей дажеменьше , чем 9 - кто писал "ч" как цифру "4", а не как "ch", тот может на Фонетической раскладке так и назначить "ч" на цифру "4";
и "Ь", "Ъ" тоже можно на привычные места назначить, если уж очень хочется):

Ж, Ч, Ш, Щ, Ю, Я, Ь, (редкая) Ъ, (редкая) Ё

Так ведь люди из бывшего СССР, живущие в разных странах мира, легко переходят с русского на язык страны пребывания и обратно, а тутвсего девять букв(или даже меньше) -за пару недель выучивается...

Зато как удобно с системной клавиатурой вводить/корректироватьтекст -сразу там, гденадо -в окне подготовкиe-mail,в MS Word, на форуме,...
вместо того, чтобы заходить для ввода на некий сайт"перекодировки транслита"и потом оттуда копировать (а если подправить текст надо, то снова туда идти и снова потом копировать!)

Да и в случае "спец. программы ввода", а не сайта - чтобы привыкнуть пользоваться"перекодировщиком сочетаний транслита",ТОЖЕ надо довольно многозапоминать -как многие буквы получаются (для НЕстандартных "сочетаний") и т.п.:

• нельзя "стандартное" для "щ" сочетание "sch", а то слова типа "schitayu" дадут "щитаю", а надо НЕстандартноечто-то -"shh" или "xh" и т.п.
• нельзя "стандартное" для русской "х" значение "h", а то "shodil" даст "шодил"
• нельзя всегда использовать "j" для "й" - в словах типа"pojti" -можно, а вот в словах типа "rajon" или"jod" -нельзя, а то будет "раён" и "ёд".
• нельзя всегда использовать "y" для "ы" - в словах типа"vysokij" -можно, а вот в словах типа"vyuchil" -нельзя, а то будет "вючил".
• и т.д. и т.п.

Получается, надо не только помнить Правила "правильных сочетаний", но и постоянно отслеживать/опознавать такие слова (а русский язык богат!), где Правила "перекодировщика" не работают.
Вместо того, чтобы на вводимом тексте сконцентрироваться.

Эта проблема "перекодировщиков сочетаний" описана, например, автором translit.ru вот тут ( (откроется в новом окне) :
Обходные Маневры (http://translit.ru/help)

То есть, ТОЖЕ надо что-то запоминать, осваивать, привыкать к чему-то новому.

Да и вообще, этостранный, НЕобычный метод писа тьпо-русски -путём ввода "сочетаний" типа"ya lyublyu zaschischayuschichsya "с последующим"угадывающим переводом в кириллицу"(как уж угадал).

Смотрите, сколько жалоб на translit.ru именно из-за того, что это странный метод ввода (страничка откроется в новом окне) :

Так лучше уж тогда привыкнуть к Фонетической раскладке, к тем девятибуквам -и можно вводить обычным образом, с системной клавиатурой!

Вводишь/корректируешь текст сразу там, где надо, да и вообще
нетничего удобнее и прощеобычногосистемного ввода !

Ведь именно так, ссистемными средствами ввода, а не со спец. средствами, вводят люди английские, греческие, чешские тексты...

Именно поэтому перешли на Фонетическую раскладку многие "забугорники" из тех, кто раньше писал транслитом, аСтандартную русскую раскладку забыл или вообще не знал, если до отъезда не имел дела с компьютерами.

Конец пояснений про Фонетическую раскладку

Сгрузить и активировать русскуюФонетическую раскладку
для Windows 7/Vista/XP/2003 (32/64 бит версии этих систем) -

• Важно!

  Чтобы добавить, со стороны, раскладку клавиатуры всистемный набор раскладок для некоего языка, пользовательдолжен войти (Log-in)в Windows какАдминистратор .

  Надомашнем компьютере это так и есть - владелец всегда имеет Права Администратора, а вот наработе это иногда проблематично.

  Если это компьютер на работе: учтите, ведь нужны права несетевого Администратора, атолько для Вашего компьютера, поэтому можно просто попросить системщика, чтобы он Вам дал такие права наэтот -Ваш -компьютер.

  Если всё же Вына работе ине имеете Прав Администратора, топропустите инструкцию по загрузке и активации Фонетической раскладкисистемной клавиатуры и переходи те к заключительному разделу, где будет рассказано, что делать втаком случае (то есть, случай"Чужой компьютер"):

Процесс добавления в систему и активации новой раскладки для русского языка оформлен в виде инсталлятораsetup.exe (один из файлов внутри сгружаемого.zip) ,
чтобы "вручную" не копировать файл раскладки в нужную папку и не регистрировать самому эту раскладку вРеестре (Registry) -больше ничего этот setup.exe не делает.

Инструкция сделана в виде 2-х частей:

• для болееопытных пользователей (которые точно знают, как достать файлы из архива .zip ; видят расширения имён файлов типа.exe)
• и для не очень опытных ( люди не очень хорошо знающие компьютеры), просилиподробнее описать процесс.

Сгрузить Фонетическую: выберитеВаш вариант инструкции

• инструкция для опытных пользователей - занимает где-то 3 минуты
• инструкция для НЕ очень опытных пользователей - около 20 минут

Сгрузить и за 3 минуты активировать Фонетическую раскладкусистемной клавиатуры
для Windows 7/Vista/XP/2003 (32/64 бит) -

ввод в режиме А-A, Б-B, Д-D, Ф-F, К-K, О-O, Т-T,...

• сгрузить файл-архивkbdru_Y.zip -обязательно выбрав опцию"Сохранить на диске" ("Save "),а не"Открыть" ("Open") -указав для сохранения любую пустую папку, например, c:Rus.

  Или же сгрузить другойфайл-архив -kbdru_ZH.zip , если больше нравится2-й вариант расположения русских"В" и "Ж" -

  вотоба варианта на картинках (страничка откроется новом окне) :

• Вынуть файлы из ZIP-архива (раз"архивировать/Extract) - обязательный шаг:нельзя вызывать инсталлятор во времяпросмотра архива.
• щёлкнуть по файлу setup .
  Это инсталлятор Фонетической раскладки и всё, что он делает, это кладёт нужный файл раскладки в нужное место (в зависимости от версии Windows) и регистрирует эту новую раскладку в системе:
  • появится на миг окошко Инсталлятора ипропадет -это так стандартно Windowsработает -подождите немного;

Всё! Теперь при "RU" работаетФонетическая раскладка.

Нужные Примечания

Иногда, вследствие тех или иных причин, у пользователей ОС Windows случается что-то такое, что приводит к сбою кодировок. Какая-та новоустановленная программа, вирус, манипуляции в реестре, мало-ли что… Вот слетели кодировки и все-тут!

На днях у меня тоже случилась подобная вещь. В некоторых русифицированных программах часть надписей интерфейса стала выглядеть так, как будто вместо букв туда вставили отпечатки лап птиц:

Скажу честно — я потратил на поиск решения проблемы почти два дня. На всех форумах и сервисах «вопросов и ответов», во всех мануалах и инструкциях, все как один повторяли тот-же рецепт решения, который возможно кому-то и помог. Но не мне. И только когда мои мозги уже начали закипать и всякая надежда на решения проблемы покинула меня, все стало на свои места.

Результаты же поисков я решил оформить в «Универсальное руководство по решению всех проблем с кодировкой в операционных системах Windows XP и Windows Vista/7 ». Хотя возможно оно не так уже и универсально… ;)

Решение проблем с кодировкой в Windows XP:

Пункт 1. Сначала нужно убедится, что для программ не поддерживающих Юникод установлен русский язык.

Открываем «Панель управления » и дважды кликаем по иконке «» . Переходим во вкладку «Дополнительно » «».

После этого найдите в списке, который размещен на этой-же вкладке пункт 20880 и поставте возле него галочку:

Пункт 2. Возможно, что проблемы с кодировкой вызваны нарушением системных настроек шрифтов.

Для восстановления настроек шрифтов скачайте этот архив

Пункт 3. Следующий этап — изменение ключей реестра которые отвечают за кодировки. Делать эти изменения желательно только в крайнем случае и только если все предыдущие пункты ни к чему не привели.

этот архив

Решение проблем с кодировкой в Windows Vista/7:

1. Как и в случае с Windows XP сначала убедитесь что для программ не поддерживающих Юникод установлен русский язык.

Открываем «Панель управления » и дважды кликаем по иконке «Язык и региональные стандарты » . Переходим во вкладку «Дополнительно » и устанавливаем русский язык в качестве «Языка программ, не поддерживающих Юникод »:

Сохраните изменения и перезагрузите компьютер. Если проблема не исчезла переходим к пункту 2.

2. Для восстановления настроек шрифтов скачайте этот архив и запустите файл который находится в нем игнорируя все предупреждения системы:

Перезапустите систему. Если проблема не исчезла переходим к пункту 3.

3. Следующий этап — изменение ключей реестра которые отвечают за кодировки. Делать эти изменения желательно только в крайнем случае и только если все предыдущие пункты ни к чему не привели.

Для выполнения этих изменений скачайте этот архив и запустите файл находящийся в нем. Как и в предыдущем пункте появятся предупреждения системы.

После этих изменений также нужно будет перезапустить систему.

4. Если все вышеуказанное не помогло нужно поменять имена следующих файлов кодовых страниц в папке C:\Windows\System32 :

Файл «c_1252.nls » на «c_1252.nls.bak »
Файл «c_1253.nls » на «c_1253.nls.bak »
Файл «c_1254.nls » на «c_1254.nls.bak »
Файл «c_1255.nls » на «c_1255.nls.bak »

Поскольку эти файлы защищены от изменения для выполнения этой операции желательно воспользоваться замечательной программой Скачать программу можно с