性能改善
30日分の電力データを180 msで処理
Python、SQL、Bash + Jqで時間別の電力消費量を集計する複数の実装を構築。Pythonの測定では、30日分のJSONLデータセット1つを180 msで処理した。
Python、SQL、Bash + Jqで電力消費量の集計を実装・測定し、Pythonで30日分のJSONLデータセットを180 msで処理した。
地理情報パイプラインを50倍に高速化
創業者のUtiligizeでの業務で、PostgreSQL、MS SQL、Google Cloud BigQueryのSQLとデータモデルを変更し、地理データパイプラインの50倍の改善を記録した。
創業者はUtiligizeで、PostgreSQL、MS SQL、BigQueryにまたがるSQLとデータモデルの作業により、地理データパイプラインの50倍の改善を記録している。
PostgreでGIS地図を10倍に高速化
データの切り替えを含め、データベースをMSSQLからPostgreSQLへ計画的に移行。処理とデータセキュリティを最適化し、地図アプリケーションの性能を10倍に向上させた。
MSSQLからPostgreSQLへの移行でGIS地図アプリケーションを10倍に高速化し、空間クエリを2.5秒から250 ms未満へ短縮した。
地理情報データの問題1,000件を解決
GDAL、ArcGIS、PostGIS、Mapbox、QGIS、SQL(PL/pgSQL、Transact‑SQL)、Bashを用いて地理情報・時系列データの問題1,000件を解決し、大規模データ処理の品質を確保した。
GDAL、PostGIS、ArcGIS、Mapbox、QGIS、SQLで地理情報・時系列大規模データの問題1,000件以上を解決し、クエリを35%高速化した。
Postgre・MS SQL・BigQueryのデータウェアハウス100個を運用
主にGIS・時系列データを扱うPostgreSQL、MS SQL、Google BigQueryのデータウェアハウス100個を設計・構築・管理し、性能と拡張性を最適化した。
GIS・時系列データ用のPostgreSQL、MS SQL、BigQueryデータウェアハウス100個を設計・運用し、クエリ時間を40–60%削減した。
UbuntuでPostgre・MS SQLサーバー10台を運用
Ubuntu Linux VPS上にPostgreSQL・MS SQLサーバー10台を設計・デプロイ・保守し、性能と信頼性を維持した。
Ubuntu Linux VPSでPostgreSQL・MS SQLサーバー10台を設計・保守し、稼働率99.9%と、調整によるクエリの30%高速化を達成した。
Postgreを10倍に高速化
インデックス、パーティション、クエリを計画的に最適化してPostgreSQLを10倍に高速化し、ユーザー、テナント、地理空間、電力時系列データの処理効率を改善した。
ユーザー、テナント、地理空間、時系列データ向けにPostgreSQLをインデックス・パーティション・クエリ調整で10倍に高速化し、資源使用を40%削減した。
フルスタックのGIS地図開発を指揮
PostgreSQL、Mapbox、ReactJS、NodeJSを統括してフルスタックのGIS地図開発を指揮し、統合されたソリューションを提供した。
PostgreSQL、Mapbox、React、Node.jsによるフルスタックのGIS地図開発を指揮し、統合され拡張可能な基盤の中核を提供した。
業務工程の刷新で8,000時間を削減
社内工程を見直し、ソフトウェア構成、システム、日程管理の効率化によって8,000時間を削減した。
社内の業務プロセスを見直して刷新し、約8,000時間を削減した。ソフトウェアのアーキテクチャとシステムを改善し、日程管理も効率化した。
30プロジェクト全体で月150時間を削減
作業手順と資源配分を最適化し、30件のプロジェクト全体で月150時間を削減した。
30プロジェクト全体で作業の進め方とリソース管理を最適化し、毎月約150時間を削減した。プロジェクト群全体に及ぶ、継続的な時間削減となった。
Apache・NginxでWebサイト40件を管理
Apache・Nginxを使用するUbuntu Linuxホスティングサーバー上で40件のWebサイトを管理し、高い可用性と性能を維持した。
Ubuntu Linux上のApache・Nginxで40件のWebサイトの可用性と性能を維持し、顧客が運用を気にせずに済むホスティングを提供した。
PL/pgSQL ETL/ELTパイプライン600本を構築
複数のPostgreSQL開発・本番環境にまたがる複雑なデータ処理を効率化するため、PL/pgSQLによるETL/ELTパイプライン600本を構築した。
PostgreSQLの開発環境と本番環境に、記録上600のPL/pgSQL ETL/ELTパイプラインを構築。増分読み込みとログ記録を含む。
PostgresからAPIへのJSONパススルーを設計
PostgreSQL関数が完成したJSONを返し、Go APIがそのまま転送するJSONパススルー構成を設計。中間のアンマーシャリングをなくし、フロントエンドをスキーマ変更から切り離した。
PostgreSQL関数が返す完成したJSONをGo APIがそのまま転送する仕組みを設計し、フロントエンドをスキーマから切り離した。
成長するデータモデルの時系列順キー
B‑treeインデックスの断片化を抑え、クエリを高速化するため、PostgreSQL 18の時系列順UUID v7をエンティティキーとして採用した。
PostgreSQL 18で時系列順のUUID v7キーを採用し、B-treeの断片化を減らして、エンティティのテーブルへの挿入と範囲クエリを改善することを狙った。
34のPostgresスキーマに348テーブルをモデル化
専門家、企業、船舶、求人、レビューなどの海事領域を、34個のPostgreSQLスキーマ内の348個の正規化テーブルにモデル化し、SMALLINTの参照値とUUID v7キーを用いた。
海事領域を34個のPostgreSQLスキーマと348個の正規化テーブルにモデル化し、SMALLINT参照、UUID v7、統一命名を採用した。
Next.js 16でSSR・SSG・CSRの画面を構築
SSR、SSG、CSRを意図的に使い分けたNext.js 16フロントエンドを構築。再利用可能な事前取得付きサーバーページ生成処理に移行した認証済みページから、N+1の連鎖的なデータ取得を除去した。
SSR/SSG/CSRとサーバー側の事前取得・ハイドレーションでNext.js 16フロントエンドを構築し、移行済みページのN+1データ取得を除去した。
Progressive Web Appに完全対応
next‑pwa経由のWorkboxランタイムキャッシュで、インストール可能かつオフラインでも使える、完全なProgressive Web App対応を実装した。
next-pwa経由のWorkboxランタイムキャッシュで、インストール可能かつオフライン対応のProgressive Web Appを実現した。
遅い処理をRiverジョブキューへ移行
時間のかかる処理をリクエスト経路からRiverジョブキューへ移し、15個のワーカーモジュール、8件の定期タスク、20件のpg_cronジョブにより、背後の作業が続く間も応答を返せるようにした。
遅い処理をRiverキューへ移し、15ワーカーモジュール、8定期タスク、20件のpg_cron保守ジョブでリクエスト経路を軽くした。
異常時拒否のレート制限・不正利用対策を構築
Redisによる22個のレートリミッター、Cloudflare Turnstile、リクエストの冪等性、オリジン制限を備え、異常時は拒否する不正利用対策を構築し、呼び出し元を無条件に信頼せずボットや大量アクセスを排除した。
Redisによる22レートリミッター、Cloudflare Turnstile、リクエストの冪等性、オリジン制限を備える、異常時拒否の不正利用対策を構築した。
Postgre内に独自の分析機能を構築
自動的に古いパーティションを削除するイベントテーブルと47個のPostgreSQL関数による独自の製品分析を構築し、定期変更するソルトで仮名化し、利用者の同意に基づいて動作させた。
古いパーティションを自動削除するテーブルと47関数で、PostgreSQL内の独自製品分析を構築。仮名化と同意に基づく実行を適用した。
ロイヤルティ残高、リーグ、バッジを構築
31テーブルの台帳と67個の関数に、リーグ、バッジ、特典交換ショップを備えるロイヤルティ・評判システムを構築し、残高の行ロックで二重使用の発生余地を塞いだ。
31テーブルの台帳と67関数にリーグ、バッジ、ショップを備えるロイヤルティ・評判システムを構築し、残高を行ロックで保護した。
小型サーバー上の公開サービス
利用可能メモリー464 MBを設計制約として、512 MB・1コアのホストで自社の公開サービスを運用。gitホスティング、7ドメインのWebサーバー、Tor、2つの代替プロトコルサーバー、不正接続元の遮断を備え、バックアップ自動化は別の実装として扱った。
昼食より安い月額のマシンで、記録された公開サービス構成を動かし、単なる節約以上に規律で設計が良くなった。気軽に追加する余裕を失ったため、メールは意図的に載せていない。必要な余力をこのマシンは使い切っており、別ホスト待ちの導入ひな形とした。後で発見するのでなく、その判断を記録した。
デッドマンズスイッチによるホスト監視を構築
メモリーとディスクが正常な間だけ通知を送るデッドマンズスイッチ監視を構築し、ホストの悪化を通知の停止で知らせるようにした。また、正しく測っていた「available」を「free」と記す変数名を6件発見。464 MBのホストでは両者に1桁の差があった。
期待した信号が届かなければ警報を出す仕組みを設け、誤解を招く変数名も修正した。信号の受信は、スクリプトが動作し、利用可能メモリーと空きディスク容量が設定した閾値の条件を満たしたことを確認する。ホスト全体の健全性や、サイトが配信できていることを証明するものではない。
3言語の多言語Hugoサイトを構築
53個のpartialを含む108個のHugoテンプレートで多言語静的サイトを構築。1つのコンテンツツリーから3言語・4形式で各ページを公開し、同じツリーから7つの専門分野別サブドメインも構築した。
その段階では、1つのツリーから3言語・4形式を提供し、リクエスト時に動くアプリケーションのバックエンドや、別料金のアプリケーションサービスを必要としなかった。唯一のJavaScriptには、静的検査で適用する規約があった。その例外を除き、対話的な機能はビルド時に実現するか、追加を見送る必要があった。
30分も待たずに済む品質検査
最長の検査から順に、最大4並列のワーカープールへ割り当て、ブラウザーを使うサイト品質ゲートを1,636秒から615秒に短縮。名前順では224秒に対して320秒を要するという測定を踏まえた。
直列の総費用は増えたが、全体は1,636秒から615秒になり、検査範囲も広がった。もっともらしい全同時実行と記述順実行が、別案より実測で悪かったという測定こそ残す価値があった。
CSSバンドルを87 KBから31 KBに削減
base64フォントを取り出してスタイルシートバンドルを87 KBから31 KBに削減し、毎回デプロイされながら参照元がない22ファイル756 KBも除去した。
CSSは87 KBでなく31 KBとなり、未使用756 KBの配布をやめた。各判断に測定を添え、採用しなかった選択こそ、より有用な記録として残った。
522行のQR符号器を同梱
実行時の3つ目の依存関係を追加せず、GF(256)上のReed‑Solomon、固定モジュール配置、8つのマスクパターンを持つQR符号器を522行で同梱し、独立に実装した復号器で完成行列を読み戻して検証した。
実行時依存を2つに保ち、符号器は唯一の同梱部品となった。汎用実装ではなく、文書が使うモードと版だけに対応する。成熟ライブラリより優れるという主張でなく、依存数の予算が率直な採用理由だった。
macOSアプリのイベントパイプラインに上限を設定
毎秒41 MBの増加と、36 GB端末で111 GBの圧縮ページを記録したmacOSの障害を受け、イベントバッファとログ出力に上限を設定。記録された全テスト実行では、コアのログ行が610,996から1,411へ減った。
障害記録には全テスト実行の比較があり、コアのログ行が610,996から1,411へ、取得ログ量が63 MBから388 KBへ減った。記録されたテスト実行の測定であって、本番トラフィックのベンチマークや修正後メモリーの実測ではない。ログ変更だけでは別の終了タイムアウトを直せず、それには別の修正が必要だった。
C上にSwift 6の厳密並行処理を採用
インターフェースに必要な順序がイベントごとのタスク生成で失われると確認し、独自アクターを用いずSwift 6の完全な厳密並行処理を採用。ブロッキングCイベントループとメインアクターを、生産者1つ、消費者1つ、順序1つで接続した。
抑制なしの完全検査でコンパイルでき、順序は期待でなく構造となった。一方、全体が1消費者を通るため可能なほど並列ではない。ここが制約になれば、安全に並べ替えられるイベントを導出し直す必要がある。それは、まさに今回避けた分析だった。
テスト群を8.9秒に短縮
メインスレッドを測定し、4,017サンプル中3,989サンプルを費やす2つの呼び出しを除去。6テストで60秒の制限を超えていたテスト群を、135テストが8.9秒で通る状態に改善した。
6テストが60秒超、実時間74秒の状態から、135テストが8.9秒で通り、保存ごとに実行できる範囲へ入った。ただし共有固定データは結合点で、変更するテストが別テストを壊し得る。速度はコンパイラーが守らない読み取り専用の規律に依存する。