Microsoft Excelは.csvファイルの発音区別符号を壊しますか？

プログラムでデータを（PHP 5.2を使用して）.csvテストファイルにエクスポートしています。
データの例：（ Numéro 1アクセント付きのeに注意してください）。データはutf-8（追加されたBOMなし）です。

このファイルをMS Excelで開くと、と表示されNuméro 1ます。

これを正しく表示するテキストエディター（UltraEdit）で開くことができます。UEは文字がであることを報告しますdecimal 233。

テキストデータを.csvファイルにエクスポートして、MS Excelで、できればインポートウィザードやデフォルト以外のウィザード設定を強制せずに正しくレンダリングできるようにするにはどうすればよいですか？

正しくフォーマットされたUTF8ファイルには、最初の3つのオクテットとしてバイトオーダーマークを含めることができます。これらは16進値0xEF、0xBB、0xBFです。これらのオクテットは、ファイルをUTF8としてマークするのに役立ちます（「バイトオーダー」情報としては関係がないため）。1 このBOMが存在しない場合、コンシューマー/リーダーは、テキストのエンコードタイプを推測する必要があります。UTF8非対応のリーダーは、バイトをWindows-1252などの他のエンコーディングとして読み取り、ファイルの先頭に文字を表示します。

Excelがファイルの関連付けを介してUTF8 CSVファイルを開くと、UTF8 BOMの存在を無視して、それらが1バイトエンコーディングであると想定する既知のバグがあります。これは、システムのデフォルトのコードページまたは言語設定では修正できません。BOMはExcelでは手掛かりを取得しません-機能しません。（少数の報告では、BOMが「テキストのインポート」ウィザードをトリガーすることがあると主張しています。）このバグはExcel 2003以前に存在するようです。ほとんどのレポート（ここで回答を確認）では、これはExcel 2007以降で修正されているとされています。

開いているファイルのエンコーディングを指定できる「テキストのインポート」ウィザードを使用して、ExcelでUTF8 CSVファイルをいつでも正しく*開くことができることに注意してください。もちろん、これはあまり便利ではありません。

この回答の読者は、Excel 2007を特にサポートしていない状況で最も可能性が高いですが、未加工のUTF8テキストをExcelに送信していますÃ。 UTF8 BOMを追加することは、おそらく最善かつ最も迅速な修正です。

古いExcelのユーザーに悩まされていて、ExcelがCSVの唯一の利用者である場合、UTF8ではなくUTF16をエクスポートすることでこれを回避できます。Excel 2000および2003は、これらを正しくダブルクリックして開きます。（他の一部のテキストエディターではUTF16で問題が発生する可能性があるため、オプションを慎重に検討する必要があります。）

_{*できない場合を除いて、（少なくとも）Excel 2011 for Macのインポートウィザードは、ユーザーの指示に関係なく、実際には常にすべてのエンコーディングで機能するわけではありません。</ anecdotal-evidence> :)}

ExcelがファイルをUTF-8として認識するという点で、BOM（\ uFEFF）を前に追加することで機能しました（Excel 2007）。それ以外の場合は、保存してインポートウィザードを使用しても機能しますが、あまり理想的ではありません。

以下は、Microsoft Excelをユーザーに送信するときにプロジェクトで使用するPHPコードです。

  /**
   * Export an array as downladable Excel CSV
   * @param array   $header
   * @param array   $data
   * @param string  $filename
   */
  function toCSV($header, $data, $filename) {
    $sep  = "\t";
    $eol  = "\n";
    $csv  =  count($header) ? '"'. implode('"'.$sep.'"', $header).'"'.$eol : '';
    foreach($data as $line) {
      $csv .= '"'. implode('"'.$sep.'"', $line).'"'.$eol;
    }
    $encoded_csv = mb_convert_encoding($csv, 'UTF-16LE', 'UTF-8');
    header('Content-Description: File Transfer');
    header('Content-Type: application/vnd.ms-excel');
    header('Content-Disposition: attachment; filename="'.$filename.'.csv"');
    header('Content-Transfer-Encoding: binary');
    header('Expires: 0');
    header('Cache-Control: must-revalidate, post-check=0, pre-check=0');
    header('Pragma: public');
    header('Content-Length: '. strlen($encoded_csv));
    echo chr(255) . chr(254) . $encoded_csv;
    exit;
  }

更新：ファイル名の改善とバグ修正により、正しい長さの計算。おかげTRIGと@ ivanhoe011

Excelバージョン（2003 + 2007）とファイルタイプのすべての組み合わせに対する答え

ここでの他のほとんどの回答は、Excelのバージョンにのみ関係し、必ずしも役立つとは限りません。回答がお使いのバージョンのExcelに当てはまらない場合があるためです。

たとえば、BOM文字を追加すると、列区切りの自動認識に問題が生じますが、Excelのすべてのバージョンに問題があるわけではありません。

ほとんどのExcelバージョンで機能するかどうかを決定する3つの変数があります。

• エンコーディング
• BOMキャラクターの存在
• セルセパレーター

SAPのストイックな人がすべての組み合わせを試し、結果を報告しました。最終結果？ほとんどのExcelバージョンで機能するように、BOMとタブ文字をセパレーターとしてUTF16leを使用します。

あなたは私を信じていませんか？私もそうしませんが、ここを読んで泣きます：http : //wiki.sdn.sap.com/wiki/display/ABAP/CSV+tests+of+encoding+and+column+separator

インポート時にUTF-8エンコードを選択します。Office 2007を使用している場合は、ここで選択します。ファイルを開いた直後です。

CSVデータを出力する前にUTF-8 BOMをエコーし​​ます。これにより、Windowsのすべてのキャラクターの問題が修正されますが、Macでは機能しません。

echo "\xEF\xBB\xBF";

Windows PCでのみ使用されるファイルを生成する必要があるため、これは私にとっては機能します。

BOM（U + ffefまたは0xEF、0xBB、0xBF、どちらも機能しない）の有無にかかわらず、サービスパックなしでは、UTF-8がOffice 2007で機能しません。先頭に追加。

UTF-16は、「utf-16-le」を0xff 0xef BOMを前に付加し、タブをセパレーターとして使用してPythonでエンコードするときに機能します。手動でBOMを書き出してから、「utf-16」ではなく「utf-16-le」を使用する必要がありました。それ以外の場合、各encode（）は、書き出されたすべての行にBOMを追加しました。 2行目以降。

spがインストールされていなくてもUTF-16が機能するかどうかはわかりません。はぁ

これはウィンドウズ上にあり、MACのオフィスについては知らない。

どちらの場合も、ブラウザーから直接ダウンロードを起動するとインポートが機能し、テキストインポートウィザードは機能しません。期待どおりに機能します。

Fregalが言ったように、\ uFEFFは進むべき道です。

<%@LANGUAGE="JAVASCRIPT" CODEPAGE="65001"%>
<%
Response.Clear();
Response.ContentType = "text/csv";
Response.Charset = "utf-8";
Response.AddHeader("Content-Disposition", "attachment; filename=excelTest.csv");
Response.Write("\uFEFF");
// csv text here
%>

少し前に質問に「回答」されたことにも気づきましたが、テキストウィザードを使用しないと、utf8でエンコードされたcsvファイルをExcelで正常に開けないという話を理解できません。

私の再現可能なエクスペリエンス：Old MacDonald had a farm,ÈÌÉÍØメモ帳に入力し、Enterキーを押してから、（UTF-8オプションを使用して）名前を付けて保存します。

Pythonを使用して実際にそこにあるものを示す：

>>> open('oldmac.csv', 'rb').read()
'\xef\xbb\xbfOld MacDonald had a farm,\xc3\x88\xc3\x8c\xc3\x89\xc3\x8d\xc3\x98\r\n'
>>> ^Z

良い。メモ帳は前面にBOMを配置しています。

Windowsエクスプローラーに移動し、ファイル名をダブルクリックするか、右クリックして[...で開く]を使用すると、期待どおりに表示されるExcel（2003）がポップアップ表示されます。

拡張子が 'xls'のHTMLファイルを保存すると、アクセント記号が機能します（少なくとも2007年以前）。

例：これを（メモ帳でSave utf8を使用して）test.xlsとして保存します。

<html>
<meta http-equiv="Content-Type" content="text/html" charset="utf-8" />
<table>
<tr>
  <th>id</th>
  <th>name</th>
</tr>
<tr>
 <td>4</td>
 <td>Hélène</td>
</tr>
</table>
</html>

これは文字エンコーディングの問題です。データをUTF-8としてエクスポートしているようです。UTF-8のéは2バイトのシーケンス0xC3 0xA9であり、Windows-1252で解釈するとéです。データをExcelにインポートするときは、使用している文字エンコードがUTF-8であることを必ず伝えてください。

CSV形式はExcelでUnicodeではなくASCIIとして実装されているため、発音区別符号を扱いません。私は、公式のCSV標準がExcelでASCIIベースであると定義されているという同じ問題を経験しました。

Excel 2007は、BOM（EF BB BF）でエンコードされたcsvでUTF-8を適切に読み取ります。

Excel 2003（およびおそらく以前のバージョン）では、BOM（FF FE）を使用してUTF-16LEを読み取りますが、コンマやセミコロンの代わりにTABを使用します。

ExcelでCSVを正しく解析するには、適切なバイトオーダーマークで始まるタブ区切りのリトルエンディアンUTF-16を使用する必要があります。

BOMを出力CSVファイルに書き込むと、Djangoで実際に機能しました。

def handlePersoonListExport(request):
    # Retrieve a query_set
    ...

    template = loader.get_template("export.csv")
    context = Context({
        'data': query_set,
    })

    response = HttpResponse()
    response['Content-Disposition'] = 'attachment; filename=export.csv'
    response['Content-Type'] = 'text/csv; charset=utf-8'
    response.write("\xEF\xBB\xBF")
    response.write(template.render(context))

    return response

詳細についてはhttp://crashcoursing.blogspot.com/2011/05/exporting-csv-with-special-characters.htmlみんなありがとう！

私が見つけた別の解決策は、結果をWindowsコードページ1252（Windows-1252またはCP1252）としてエンコードすることでした。これは、たとえば、Content-Type適切にtext/csv; charset=Windows-1252設定し、同様に応答ストリームの文字エンコーディングを設定することによって行われます。

UTF-8 BOMを含めることは必ずしも良い考えではないことに注意してください-ExcelのMacバージョンはそれを無視し、実際にBOMをASCIIとして表示します…スプレッドシートの最初のフィールドの先頭に3つの厄介な文字…

ファイルを生成しているエンコーディングを確認してください。Excelでファイルを正しく表示するには、システムのデフォルトコードページを使用する必要があります。

どの言語を使用していますか？.Netの場合は、ファイルの生成中にEncoding.Defaultを使用するだけで済みます。

私と同じようにvb.netにレガシーコードがある場合、次のコードがうまくいきました。

    Response.Clear()
    Response.ClearHeaders()
    Response.ContentType = "text/csv"
    Response.Expires = 0
    Response.AddHeader("Content-Disposition", "attachment; filename=export.csv;")
    Using sw As StreamWriter = New StreamWriter(Context.Response.OutputStream, System.Text.Encoding.Unicode)
        sw.Write(csv)
        sw.Close()
    End Using
    Response.End()

私は問題を解決する方法を見つけました。これは厄介なハックですが、機能します。OpenOfficeでドキュメントを開き、Excel形式で保存します。結果の.xlsor .xlsxはアクセント付き文字を表示します。

Ruby 1.8.7では、すべてのフィールドをUTF-16にエンコードし、BOMを破棄します（たぶん）。

次のコードは、active_scaffold_exportから抽出されます。

<%                                                                                                                                                                                                                                                                                                                           
      require 'fastercsv'                                                                                                                                                                                                                                                                                                        
      fcsv_options = {                                                                                                                                                                                                                                                                                                           
        :row_sep => "\n",                                                                                                                                                                                                                                                                                                        
        :col_sep => params[:delimiter],                                                                                                                                                                                                                                                                                          
        :force_quotes => @export_config.force_quotes,                                                                                                                                                                                                                                                                            
        :headers => @export_columns.collect { |column| format_export_column_header_name(column) }                                                                                                                                                                                                                                
      }                                                                                                                                                                                                                                                                                                                          

      data = FasterCSV.generate(fcsv_options) do |csv|                                                                                                                                                                                                                                                                           
        csv << fcsv_options[:headers] unless params[:skip_header] == 'true'                                                                                                                                                                                                                                                      
        @records.each do |record|                                                                                                                                                                                                                                                                                                
          csv << @export_columns.collect { |column|                                                                                                                                                                                                                                                                              
            # Convert to UTF-16 discarding the BOM, required for Excel (> 2003 ?)                                                                                                                                                                                                                                     
            Iconv.conv('UTF-16', 'UTF-8', get_export_column_value(record, column))[2..-1]                                                                                                                                                                                                                                        
          }                                                                                                                                                                                                                                                                                                                      
        end                                                                                                                                                                                                                                                                                                                      
      end                                                                                                                                                                                                                                                                                                                        
    -%><%= data -%>

重要な行は次のとおりです。

Iconv.conv('UTF-16', 'UTF-8', get_export_column_value(record, column))[2..-1]

Encodeでファイルcsvをnotepad ++ clicで開き、UTF-8に変換する（UTF-8に変換しない（BOMなし））を選択します。クリストフ・グリソンに役立つExcel Hopeでダブルクリックで開く