文字セット間でテキストファイルを変換する最も速くて簡単なツールまたは方法は何ですか？

具体的には、UTF-8からISO-8859-15に、またはその逆に変換する必要があります。

すべてがうまくいきます：お好きなスクリプト言語のワンライナー、コマンドラインツール、またはOSやWebサイトなどのその他のユーティリティ。

これまでのベストソリューション：

Linux / UNIX / OS X / cygwinの場合：

• Troels Arvinによって提案されたGnu iconvは、フィルターとして最適に使用されます。それは普遍的に利用できるようです。例：

  $ iconv -f UTF-8 -t ISO-8859-15 in.txt > out.txt
  

  ベンが指摘したように、iconvを使用したオンラインコンバータがあります。

• ヌーのrecodeの（手動による提案）Cheekysoft変換するインプレースで一つまたは複数のファイルを。例：

  $ recode UTF8..ISO-8859-15 in.txt
  

  これはより短いエイリアスを使用します：

  $ recode utf8..l9 in.txt
  

  Recodeは、さまざまな行末タイプとエンコーディング間の変換に使用できるサーフェスもサポートしています。

  改行をLF（Unix）からCR-LF（DOS）に変換します。

  $ recode ../CR-LF in.txt
  

  Base64エンコードファイル：

  $ recode ../Base64 in.txt
  

  それらを組み合わせることもできます。

  Unixの行末でBase64エンコードされたUTF8ファイルを、Dosの行末でBase64エンコードされたLatin 1ファイルに変換します。

  $ recode utf8/Base64..l1/CR-LF/Base64 file.txt
  

Windows上のPowershell（ジェイBazuzi）：

• PS C:\> gc -en utf8 in.txt | Out-File -en ascii out.txt

  （ただし、ISO-8859-15はサポートされていません。サポートされている文字セットは、unicode、utf7、utf8、utf32、ascii、bigendianunicode、default、およびoemです。）

編集する

iso-8859-1サポートを意味しますか？「文字列」を使用すると、これが可能になります（その逆など）

gc -en string in.txt | Out-File -en utf8 out.txt

注：可能な列挙値は、「不明、文字列、ユニコード、バイト、BigEndianUnicode、UTF8、UTF7、ASCII」です。

• CsCvt- Kalyttaの文字セットコンバーターは、Windows用の優れたコマンドラインベースの変換ツールです。

スタンドアロンユーティリティアプローチ

iconv -f ISO-8859-1 -t UTF-8 in.txt > out.txt

-f ENCODING  the encoding of the input
-t ENCODING  the encoding of the output

これらの引数のいずれかを指定する必要はありません。デフォルトでは、現在のロケール（通常はUTF-8）が使用されます。

VIMを試す

あなたが持っている場合 vimならこれを使うことができます：

すべてのエンコーディングについてテストされていません。

これについてのクールな部分は、あなたがソースエンコーディングを知る必要がないということです

vim +"set nobomb | set fenc=utf8 | x" filename.txt

このコマンドはファイルを直接変更することに注意してください

説明部！

1. +：ファイルを開くときにコマンドを直接入力するためにvimによって使用されます。通常、特定の行でファイルを開くために使用されます。vim +14 file.txt
2. | ：複数のコマンドの区切り文字（ ; bashなど）
3. set nobomb ：utf-8 BOMなし
4. set fenc=utf8：新しいエンコーディングをutf-8 ドキュメントリンクに設定
5. x ：ファイルを保存して閉じます
6. filename.txt ：ファイルへのパス
7. "：パイプのため、引用はここにあります。（それ以外の場合、bashはそれらをbashパイプとして使用します）

Linuxでは、非常に強力なrecodeコマンドを使用して、異なる文字セット間での変換や、行末の問題を試すことができます。recode -lは、ツールが変換できるすべての形式とエンコーディングを表示します。非常に長いリストになる可能性があります。

iconv（1）

iconv -f FROM-ENCODING -t TO-ENCODING file.txt

また、多くの言語でiconvベースのツールがあります。

Get-Content -Encoding UTF8 FILE-UTF8.TXT | Out-File -Encoding UTF7 FILE-UTF7.TXT

入力BOMが正しいと想定できる場合の最短バージョン：

gc FILE.TXT | Out-File -en utf7 file-utf7.txt

iconv Bash関数を試す

私はこれを入れました.bashrc：

utf8()
{
    iconv -f ISO-8859-1 -t UTF-8 $1 > $1.tmp
    rm $1
    mv $1.tmp $1
}

..ファイルを次のように変換できるようにする：

utf8 MyClass.java

Notepad ++を試す

Windowsでは、Notepad ++を使用してISO-8859-1からUTF-8への変換を行うことができました。クリック"Encoding"してから"Convert to UTF-8"。

自動文字セット検出を備えた、findを使用したOneliner

一致するすべてのテキストファイルの文字エンコードが自動的に検出され、一致するすべてのテキストファイルがutf-8エンコードに変換されます。

$ find . -type f -iname *.txt -exec sh -c 'iconv -f $(file -bi "$1" |sed -e "s/.*[ ]charset=//") -t utf-8 -o converted "$1" && mv converted "$1"' -- {} \;

これらのステップを実行するために、サブシェルshで使用される-execと、ワンライナーを実行して、-cフラグ、位置引数としてファイル名を渡す"$1"と-- {}。その間、utf-8出力ファイルは一時的にと名付けられconvertedます。

これによりfile -bi：

• -b、--brief 出力行にファイル名を付加しません（簡易モード）。

• -i、--mime fileコマンドに、従来の人間が読める形式ではなく、MIMEタイプの文字列を出力させます。したがって、それはたとえばtext/plain; charset=us-asciiではなく言うかもしれませんASCII text。sedコマンドはこれをカットus-asciiなどにより必要とされますiconv。

findコマンドは、ファイル管理の自動化のために非常に有用です。こちらをクリックして、よりfind豊富。

PHP iconv（）

iconv("UTF-8", "ISO-8859-15", $input);

DOS / Windows：コードページを使用

chcp 65001>NUL
type ascii.txt > unicode.txt

コマンドchcpを使用して、コードページを変更できます。コードページ65001は、UTF-8のマイクロソフト名です。コードページを設定すると、次のコマンドで生成される出力はコードページセットになります。

プロパティファイル（Java）を書き込むには、通常これをLinux（mintおよびubuntuディストリビューション）で使用します。

$ native2ascii filename.properties

例えば：

$ cat test.properties 
first=Execução número um
second=Execução número dois

$ native2ascii test.properties 
first=Execu\u00e7\u00e3o n\u00famero um
second=Execu\u00e7\u00e3o n\u00famero dois

PS：特殊文字を強制するために、実行番号1/2をポルトガル語で書きました。

私の場合、最初の実行で次のメッセージを受け取りました。

$ native2ascii teste.txt 
The program 'native2ascii' can be found in the following packages:
 * gcj-5-jdk
 * openjdk-8-jdk-headless
 * gcj-4.8-jdk
 * gcj-4.9-jdk
Try: sudo apt install <selected package>

最初のオプション（gcj-5-jdk）をインストールしたとき、問題は終了しました。

これが誰かを助けることを願っています。

ルビーを使って：

ruby -e "File.write('output.txt', File.read('input.txt').encode('UTF-8', 'binary', invalid: :replace, undef: :replace, replace: ''))"

出典：https : //robots.thoughtbot.com/fight-back-utf-8-invalid-byte-sequences

次のPythonスクリプトを使用します。https：//github.com/goerz/convert_encoding.py どのプラットフォームでも機能します。Python 2.7が必要です。

このための私のお気に入りのツールは、2つの非常に便利な機能を持つJedit（Javaベースのテキストエディター）です。

• ユーザーが別のエンコーディングでテキストを再読み込みできるようにする（したがって、結果を視覚的に制御できる）
• 保存する前にユーザーがエンコード（および行末文字）を明示的に選択できるようにするもう1つの方法

現在の文字セットが示されているステータスバー（下部）の右側にあるIntelliJ IDEA IDEで読み込まれたファイルのエンコーディングを変更するだけです。リロードまたは変換を求められます。変換を使用します。事前に元のファイルをバックアップしてください。

macOS GUIアプリケーションがあなたのパンとバターなら、SubEthaEditは私が通常エンコーディングに使用するテキストエディターです。その「変換プレビュー」を使用すると、出力エンコーディングのすべての無効な文字を確認し、修正/削除できます。

そして、それは現在オープンソースなので、彼らにとってはいいですy。

ファイルの文字エンコードを修正する にはどうすればよいですか？Synalyze It！ICUライブラリでサポートされているすべてのエンコーディング間でOS Xで簡単に変換できます。

さらに、すべてのエンコーディングからUnicodeに変換されたファイルのいくつかのバイトを表示して、ファイルに適したものをすばやく確認できます。