PythonとPL/pgSQLでデータ処理を自動化
Shellスクリプト、PL/pgSQL、Python、Transact‑SQLでデータ処理を自動化
し、生産性と効率を向上させた。
2015 – 2022

状況.
繰り返すデータ処理が継続的に手作業で行われていた。時間を使うだけでな
く、同じ作業を何度も手で行えば少しずつ方法が変わり、その違いの一部が
誤りになるという、二重の問題があった。

課題. 作業を自動化し、時間を取り戻すとともに、確実に実行できるように
することを目指した。

行動.
対象のデータベースとシステムをまたいで、仕事に適した道具で自動化し
た。接続にはShell、データベース内にはPL/pgSQL・Transact‑SQL、SQLだけ
では足りない処理にはPythonを用いた。手動工程を毎回同じ動作のジョブへ
置き換えた。スクリプトは退屈せず、手順を飛ばさず、金曜の午後だからと
方法を変えないことが意味を持った。

結果. 生産性と効率が高まり、人の手作業負担が減った。データ処理は、小
さな反復ミスの原因ではなく、一貫して頼れるものになった。

カテゴリー:
1データベース	/ja/categories/databases/	engineer.company	70
1PostgreSQL	/ja/categories/postgresql/	engineer.company	70
1SQL	/ja/categories/sql/	engineer.company	70
1データエンジニアリング	/ja/categories/data-engineering/	engineer.company	70
1データパイプライン（ETL/ELT）	/ja/categories/data-pipelines/	engineer.company	70
1自動化・CI/CD	/ja/categories/automation/	engineer.company	70
1Python	/ja/categories/python/	engineer.company	70

サービス:
1データベース管理（DBA）	/ja/services/database-administration/	engineer.company	70
1データパイプライン開発（ETL/ELT）	/ja/services/data-pipeline-development/	engineer.company	70
1DevOps・CI/CD自動化	/ja/services/devops-cicd/	engineer.company	70

hこのページのウェブ版	URL:https://engineer.company/ja/portfolio/automated-data-processing-in-python-and-pl-pgsql/	engineer.company	70
