PostgreSQL
政府統計の問題が国会を賑わせていますが、毎月勤労統計のダウンロード可能なデータのフォーマットは本当にひどかったですよ。少なくとも去年の夏頃見た時は。 このさらに下には余白の行と別のテーブルヘッダーがついてページ2, ページ3というふうに続いてい…
Pandas側からDBとのやり取りはよくするのに、いつも書き方を忘れてしまうのでメモ代わりに残してみました。 流れ 環境変数を読み込む クエリを作ってデータフレーム化する です。 インストール まずモジュールのインストールから pip install -U python-dote…
時系列のデータを含んだテーブルがある場合、 前日比や前月比と言った以前の値との比較を出したくなります。 Pandasだとshiftメソッドを使えば可能ですが、PostgresだとWindow関数を使います。 こちらが元データ。 SELECT dt, x FROM data ORDER BY dt DESC …