リランを考慮したデータの考え方

リランを考慮したデータの考え方

リランを考慮したデータの考え方についてです。

夜間のバッチで大量データを処理する場合、バルク処理で例えば5000件ずつ処理してコミットしたい場合などがあります。

10万件データがあったとして、9万1件目のデータが不正なデータでバッチ処理がこけた場合、リランすると思いますが、残りの1万件だけを処理するように設計します。

例えば以下のようにデータを持ちます。

単位 数量 料金 料金年月日
100 5 500 (null)

バッチ処理は、料金年月日 is nullのデータを取得するようにし、処理し終わったら料金年月日をsysdateでアップデートします。

これでリランするときは、途中でこけても残りのデータだけ処理するようなデータになります。

コメント

株式会社CONFRAGE ITソリューション事業部をもっと見る

今すぐ購読し、続きを読んで、すべてのアーカイブにアクセスしましょう。

続きを読む

タイトルとURLをコピーしました