Pythonとpandasで日本語を含むCSVファイルを読み込もうとしたら、UnicodeDecodeError: 'utf-8' codec can't decode byte... というエラーが出て、ファイルが開けずに困ったことはありませんか？ファイルの中身は普通に見えるのに、なぜかプログラムだけが受け付けてくれない ...

Pythonとpandasでデータ処理を行い、さあ結果をCSVファイルに出力！…と、to_csv()を実行して作成したファイルをExcelで開いてみたら、日本語の部分が全部「???」や意味不明な記号になっていた…。そんな「文字化け」の経験はありませんか？ プログラム上では ...

あるアプリで作成したデータを別のアプリに取り込んで使う場面というのは意外と多いものです。その中でも多いのが、CSVファイルのインポートとエクスポートです。CSVであればExcelやGoogleスプレッドシートなどで開いて手軽に編集できます。 しかし、その ...

今回は、 文字コードに関連するセキュリティの話題では古参ともいえるUTF-8の冗長なエンコードというテーマについて紹介します。 UTF-8とは UTF-8は、 各文字を1～4バイトの可変長で表現するUnicodeの符号化方式のひとつです。 U＋0000からU＋007Fの範囲の文字を ...