本文へ移動
Engineerデータ
メニュー
デザイン
日本語

Engineer / データ / 実績紹介

遅い処理をRiverジョブキューへ移行

時間のかかる処理をリクエスト経路からRiverジョブキューへ移し、15個のワーカーモジュール、8件の定期タスク、20件のpg_cronジョブにより、背後の作業が続く間も応答を返せるようにした。

状況. メール、検索インデックス再構築、文書生成、順位再計算などは、利用者を待たせながら行うべき仕事ではなかった。リクエスト内では求めていない処理の待機表示を見せ、goroutineなら、デプロイ中の再起動で、実行予定だった記録もなく消えてしまう。

課題. 再起動に耐え、失敗を再試行し、未実行を確認できる、永続的なバックグラウンド処理の置き場が必要だった。

行動. 主にPostgreSQL内にキューを持つことからRiverを選んだ。DBはすでに記録の正本なので、ジョブと対象行を一緒にコミット・ロールバックでき、別の基盤を運用して理解する必要がない。15のワーカーモジュールと8定期タスクを設けた。その下では20個のpg_cronジョブが、パーティション削除、ソルト更新、集約更新など、DB自身に適した保守を担う。気になるほど遅い作業を、このどちらかへ移した。

結果. リクエストは早く返り、遅い作業も完了し、未完了なら再試行と履歴が残る。専用ブローカーでなくPostgresに置くのは意図的な限界であり、無限には伸びず、一定量では不適切になる。いずれにせよDBが制約となる基盤では、使わない余力より可動部分を1つ減らすことに価値を置いた。

お問い合わせ

必要なことを整理している段階ですか?

うまくいっていないことや、つくりたいものをお聞かせください。何が必要か、おおよそいくらかかるか、私たちが適任かどうかをお伝えします。

時間単価は1,400 DKKから(VAT別)で、ご依頼期間が長いほど下がります。

welcome@engineer.company +45 50 10 61 84 デンマーク、コペンハーゲン