ユニコードではなく日本語固有のエンコーディングを使用するように導く問題は何ですか？

職場では、Shift-JISなどのエンコーディングの日本語のテキストファイルがたくさんあります。それは多くの原因が文字化け（判読できない文字）すべてのコンピュータユーザのための問題を。Unicodeは、すべての言語に単一の文字セットを定義することでこの種の問題を解決することを目的としており、インターネットでの使用にはUTF-8シリアル化が推奨されます。それでは、なぜ皆が日本語固有のエンコーディングからUTF-8に切り替えないのでしょうか？UTF-8のどのような問題や不利な点が人を引きつけていますか？

編集：W3CはUnicodeに関するいくつかの既知の問題をリストしていますが、これも理由でしょうか？

一言で言えば、レガシーです。

ユニコードが日本語をエンコードする唯一の方法であったため、Unicodeが利用可能/普及する前にShift-JISおよびその他のエンコーディングが使用されていました。企業は、Shift-JISのみをサポートするインフラストラクチャに投資しています。そのインフラストラクチャは、現在Unicodeをサポートしている場合でも、彼らはまだ至るまで、様々な理由からシフトJISで立ち往生していること-作品-SO-、ドントタッチ、それの上にエンコード-何を？migrating-all-existing-documents-is-too-costlyに移行します。

同じ理由でまだASCIIまたはlatin-1を使用している多くの西洋の企業がありますが、問題を引き起こしていないので誰も気づきません。

これらは、主に日本で開発されているスクリプト言語RubyのUTF-8または別のUnicode表現をデフォルトの文字エンコーディングにしないことを私が覚えていた理由です。

• 理由1：ハン統一。中国、韓国、日本に使用されている文字セット（ここで「アルファベット」が正しいかどうかはわかりません）は共通の歴史から発展したもので、詳細はわかりません。Unicodeコンソーシアムは、3つの言語すべてで外観が異なっていても、単一のUnicodeコードポイントのみを使用して、歴史的な同じ文字のすべてのバリアント（中国語、日本語、韓国語）をエンコードすることを決定しました。その理由は、テキストの表示に使用されるフォントによって外観を決定する必要があるということです。

どうやら、この推論は、ラテン語のアルファベットがギリシャ語のアルファベットから発展したので、ギリシャ語のアルファの単一のコードポイントを持っているだけで十分であると英語の読者に主張するのと同じくらい、日本のユーザーにとってばかげていると思われますα」およびラテン語「a」。使用するフォントによって外観を決定します。（「β」=「b」、「γ」=「g」などに同じ）

（スタックエクスチェンジの場合、ギリシャ文字をここに含めることはできないことに注意してください。）

• 理由2：非効率的な文字変換。 文字をUnicodeから従来の日本語エンコーディングに変換し、逆変換するにはテーブルが必要です。つまり、Unicodeコードポイント値から従来のコードポイント値へ、またはその逆への単純な計算はありません。また、あるエンコーディングのすべてのコードポイントが他のエンコーディングで一意の表現を持っているわけではないため、変換時に情報がいくらか失われます。

私はもう覚えていないというより多くの理由が与えられたかもしれません。

decezeの答えには非常に強い真実の要素がありますが、Shift-JISなどがまだ使用されているもう1つの理由があります。UTF -8は、一部の言語、ほとんどの場合CJKセットで恐ろしく非効率的です。Shift-JISはIIRCの2バイト幅のエンコードですが、UTF-8は通常、CJKなどのエンコードでは3バイト、場合によっては4バイトです。

主な理由の中で文字列サイズ/メモリ使用量をカウントします。

UTF-8では、東アジア言語の文字には3バイト以上が必要になることがよくあります。UTF-16を使用する場合よりも平均で50％多くのメモリが必要になります。後者は既にネイティブエンコーディングよりも効率が悪いです。

他の主な理由は、decezeが指摘するように、レガシーです。

他の人が言ったように、レガシーとストレージのサイズですが、もう1つあります。カタカナ文字です。

Shift-JISでカタカナ文字を表すのに1バイトしかかからないため、カタカナを含む日本語テキストの文字あたりのバイト数は2バイト未満（50/50の場合は1.5）、Shift-JISはUTF-16（2バイト/ char）、およびUTF-8（3バイト/ char）よりもはるかに効率的です。

安価なストレージにより、これははるかに小さな問題になっているはずですが、明らかにそうではありません。