ma28商店:分析処理・バッチをビッグデータ対応DB利用に変更。計算速度を15倍以上に。ma28商店:分析処理・バッチをビッグデータ対応DB利用に変更。計算速度を15倍以上に。WEBシステム2019.07.06ma28商店:分析処理・バッチをビッグデータ対応DB利用に変更。計算速度を15倍以上に。RedShift服飾販売業様向けの販売・在庫管理システム「ma28商店」について、長らく使っていただいてるお客様にて、分析を行うと計算時間が長い、夜間バッチが朝方までかかり、業務開始に差し掛かりそう、という問題がございました。遡って様々な集計軸で計算が可能です。自由度が高い分、大量のデータを処理する必要がありました。様々な方向から検討を重ねて、RedShiftを利用して計算速度を改善する事ができました。実測速度(過去数年の生データで実測。)今後もデータ量や使用頻度により、速度アップが必要になった場合に対応しやすい。(ノードを増やして並列処理を行うなど)分析の集計・計算処理は、ほぼ書き直しになりましたが、結果として、計算時間が30分以上かかっていたものが、2分以下程度で計算でき、また、計算処理を外部データベースをメインに移行した事で、システム全体の動作も軽くする事ができました。お客様に、今後も末永く、弊社システムをご活用頂ければと思います。お問い合わせプライバシーポリシ。