定期実行のAIバッチ処理をVPSでスケジュールする

レン

毎日たまったデータを、夜のうちにAIでまとめて要約しておきたいんだけど、どう組めばいい？

プロクラ

決まった時間に自動で処理を走らせる、いわゆるバッチ処理の形が向いているね。VPSなら、決まった時刻にプログラムを起動する仕組みを使って、待てる処理を夜間にまとめて片付けられるよ。

バッチ処理が向く場面

• その場で即座に結果が必要ない処理
• まとめて処理したほうが効率が良い処理（1件ずつ呼ぶより、まとめて渡すほうが速いこともある）
• 利用者が少ない時間帯に負荷をかけたい処理

レン

1件ずつリアルタイムで処理するのと比べて、何が変わるの？

プロクラ

利用者を待たせない代わりに、結果が出るまでに時間差ができる、というのが一番の違いだよ。『今すぐ知りたい』用途には向かないけど、『翌朝には結果が欲しい』程度の用途なら十分に噛み合う。

失敗に気づける仕組み

夜間に動く処理は、失敗してもすぐには気づけません。朝になって『昨夜の処理が動いていなかった』と気づくのでは遅く、利用者への影響が出てから発覚することになります。処理の成功・失敗を必ず記録し、失敗時には通知が届く仕組みを、最初から組み込んでおいてください。

• 処理の開始・終了・成功や失敗を記録する
• 失敗した場合に、担当者へ通知が届くようにする
• 処理が想定より長くかかっている場合にも気づけるようにする

AI呼び出し特有の注意

バッチ処理でAIを大量に呼び出す場合、1回あたりの費用が小さくても、件数が多いと合計は無視できない金額になります。処理を始める前に、件数と1件あたりの費用からおおよその合計を見積もり、想定外に膨らんでいないかを確認してください。

レン

処理件数が多くて、夜間だけでは終わらなかったらどうすればいい？

プロクラ

終わらなかった分を翌日に持ち越す設計にしておけば、無理に一晩で終わらせようとしなくても大丈夫だよ。件数が増え続けているなら、それはプランを見直すサインでもあるから、処理時間の推移も合わせて見ておくといいね。

プロクラ

夜間バッチは地味な仕組みだけど、うまく使えば利用者の体感速度と費用の両方に効いてくるよ。急ぐ必要のない処理を見極めるところから、ぜひ試してみてね。

処理の重複実行を防ぐ

前日の処理がまだ終わっていないのに、次の実行時刻が来て新しい処理が二重に始まってしまう、という事故もバッチ処理では起こりがちです。同じ処理が同時に2つ動くと、結果が重複したり、AIへの呼び出しが無駄に増えたりします。前の処理が終わっていることを確認してから次を始める、あるいは同時に1つしか動けないよう制御する仕組みを入れておいてください。

• 前回の処理が終わっているかを確認してから、次の処理を始める
• 同じ処理が同時に複数動かないよう、実行の重複を防ぐ制御を入れる
• 処理時間が伸び続けている場合は、次の実行と重ならないか特に注意する

レン

待てる処理はまとめて夜間に。失敗の気づき方まで含めて設計するんだね。