電通デジタルでバックエンド開発をしている松田です。弊社ではデータパイプラインの構築や管理のために主にApache Airflowを利用しています[1, 2]。 本記事では、AirflowのOperatorを使ってタスク実行環境を分離する方法についてご紹介します。 タスク実行環境を ...

Python、ライブラリ、コマンドラインユーティリティで表形式のデータをプリティプリントします。 ライブラリの主な使用例は次のとおりです。 SQL の結果をそのまま印字する：MySQL や Oracle、PostgreSQL に SQL を実行した結果を編集することなく関数呼び出しで ...

電通デジタルでバックエンド開発をしている松田です。 前回の記事は「広告出稿プランニング業務におけるセグメントのマッピングと表示改善」でした。 Dentsu Digital Tech Advent Calendar 20209 日目の記事になります。この記事ではAirflow 2.0で追加された機能の一つ ...