業務で送られてきたCSVファイルが、なんと2GB！！ Excelでは開けない、VSCode（テキストエディタ）でも開けない🥺 でもPythonがあれば大丈夫なのです。 重たいCSVを開かないまま欲しいデータが取れるのです。 以前、フィルタリングについて書きましたが ...

CREFILエンジニアの米永です。 今回は Shift_JIS形式のテキストファイル（txt）を CSV形式 に変換する方法を紹介します。 普段データの変換は Google Apps Script を使用することが多いのですが、GASはShift_JIS形式に対応していなかったため、Pythonを使ってVSCodeでデータ ...

前回、Jupyterノートブックをインストールして、Pythonのコードを書いてすぐに試してみる方法を紹介した。今回は、Jupyterノートブックを利用して、CSVファイルの読み込み、および、視覚化に挑戦してみよう。 CSVファイルについて 日々、業務で使うデータの ...

ちょっと前まで専門家の領域だと思われていた機械学習、深層学習などAIによる処理がPythonのおかげでとても身近になった。Pythonのscikit-learnやTensorFlowなどのライブラリを使えばデータの自動分類ツールや予測ツールを自作できる。 ただし、そのためにはそれ ...