CSVの文字化けを直す

文字化けで何が起きているのか

CSVを開いて「縺ゅ＞縺・」や「繝・繝ｼ繧ｿ」と表示されたとき、データは壊れていません。ファイルの中身は正しいバイト列のまま、読み込む側が別の文字コードとして解釈しているだけです。

同じ「データ」という文字も、UTF-8で保存してShift-JISとして開けば「繝・繝ｼ繧ｿ」になります。つまり文字化けは保存側と読み込み側の文字コードの食い違いであり、正しい文字コードで開き直せば元に戻ります。

日本語CSVの2大文字コード

「BOM（バイトオーダーマーク）」はUTF-8ファイル先頭の目印で、ExcelはBOMがあるとUTF-8と判定できます。そのためExcelで開く前提なら「UTF-8（BOMあり）」＝Excelの「CSV UTF-8」形式が安全です。

原因の特定手順

1. メモ帳（またはVS Code）でファイルを開くエディタは通常、文字コードを自動判定します。正しく見えたら原因は開き方（Excelの想定）側にあります。
2. エディタでも化ける場合、別のエンコードで開き直すVS Codeなら「エンコード付きで再開」から Shift-JIS／UTF-8 を順に試します。どれかで正しく見えたら、その文字コードがファイルの本当の文字コードです。
3. 化けた状態で上書き保存していないか確認する上書き済みなら「直らない場合」の章へ。未保存なら次の修復手順に進めます。

直し方① Excelのインポートで開き直す（推奨）

1. CSVをダブルクリックせず、Excelの空ブックを開く
2. 「データ」→「テキスト/CSVから」でファイルを選ぶ
3. プレビューの「元のファイル」で文字コードを切り替えるUTF-8なら「65001」、Shift-JISなら「932」。プレビューの日本語が正しくなれば成功です。
4. そのまま「読み込み」を押す正しく表示された状態でシートに展開されます。

この方法ならファイルを書き換えないため、安全度がもっとも高いです。

直し方② 文字コードを変換して保存し直す

相手側が要求する文字コードに合わせてファイル自体を変換します。1ファイルならメモ帳で十分です。

1. メモ帳でファイルを開く正しく表示されるエンコードで開けている前提です。
2. 「名前を付けて保存」→「エンコード」を変更ANSI（＝Shift-JIS）またはUTF-8に変えて保存します。
3. 相手のシステムで開いて確認する必ず変換後に受入テストを行ってください。

大量のファイルを一括変換するならコマンドラインが早いです。

# フォルダ内の .csv をまとめて UTF-8（BOM付き）に変換
Get-ChildItem *.csv | ForEach-Object {
    $t = Get-Content $_.FullName -Encoding Default
    $t | Set-Content $_.FullName -Encoding UTF8
}

直し方③ プログラム側でエンコーディングを指定

コードで読む場合は、開くたびに明示的に指定するのが唯一の根本対策です。日本語CSVで使う指定は実質この4つです。

import pandas as pd

# Excel保存のCSVを読む（BOMの有無を気にしなくてよい）
df = pd.read_csv("data.csv", encoding="utf-8-sig")
# 日本国内の業務システムのCSV
df2 = pd.read_csv("data2.csv", encoding="cp932")

エラーが出た場合は 読み書きの専用ページ の「encoding指定の早見表」を参照してください。

二度と起きないための運用ルール

1. 受け渡しのたびに文字コードを取り決める「外部への提出はShift-JIS、ツール連携はUTF-8」のように口頭でなく文書で固定します。
2. ファイル名に文字コードを入れる「sales_2026_utf8.csv」のようにすれば、受け取った側が判断できます。
3. Excelで渡すときは「CSV UTF-8」に統一古い環境で化ける事例が出たときだけ、その相手に限りShift-JISへ。
4. 変換は必ず「コピー」に対して行う元ファイルは絶対に上書きしない。

直らない場合（上書きしてしまったとき）

対処の選択肢：

• 元データの取得源（システムのエクスポート元・送り主）から再入手する
• Outlook等のメール添付・共有フォルダの履歴に元ファイルが残っていないか探す
• ごく一部のパターン（UTF-8→SJIS→UTF-8 の往復など）では手動修復ツールが効くこともあるが、期待値は低い

「上書き前の状態に戻す」は文字化け対策ではなくバックアップ運用の問題です。重要なCSVは受け取った時点でコピーを取る習慣をつけてください。

よくある質問