LinuxでWindowsのCSVファイルをShift-JISからUTF-8に変換する方法

日本語版のExcelでCSVを作成するとShift-JIS（SJIS）で保存されるが、それを別のLinuxサーバー側のプログラムで読み込もうとすると、文字化けしてしまうことがよくある。
それは日本語版Windowsの標準文字コードがShift-JISであるのに対し、プログラム側は世界で最も使われているUTF-8を使用することが多いからだ。

サーバーにCSVファイルを渡す前に手動で文字コードを変更したり、プログラム側で変換するのはあまり効率的ではない。
そこで、Linuxのiconvコマンドを使って文字コードを変換する方法を紹介します。

Shift-JISからUTF-8へ変換

今回は、対象のCSVファイルをUTF-8に変換後、別のファイル名で出力する方法です。

iconv [その他オプション] -f [変換前の文字コード] -t [変換後の文字コード] [変換前のファイル名] > [変換後のファイル名]

上記を踏まえて以下に例を書きます。
変換できない場合は出力せずにスキップさせます。

iconv -c -f cp932 -t utf-8 data_sjis.csv > data_utf8.csv

「cp932」とはShift-JISのWindows拡張版らしいです。
Excelで作成したCSVならこっちの方が良いらしい（ここは調べてみてね！）
※Windows-31J(MS932)も同じようなものらしい

文字コードの問題って昔から大変ですよね。
早く全世界UTF-8に統一したら良いのに…

• Original:https://minory.org/linux-csv-encode.html
• Source:Minory
• Author:管理者

Amazonベストセラー