株式会社フロムスクラッチが開発・提供する、マーケティングプラットフォーム「b→dash（ビーダッシュ）」に、ビッグデータ処理の際に発生しやすい障害を最小限に抑え、且つコストをかけずに処理し、ビッグデータ分散処理クラスタを安定化させる基幹技術「Data Processing Conductor」を開発いたしましたのでお知らせします。この技術は、Amazon EMR（Amazon Elastic MapReduce）を使用した独自のビッグデータ分散処理基盤管理の仕組みを開発することにより、これまでデータ活用において多くの企業で課題とされてきた「データ処理時の安定性の確保」と「コスト削減」の両立を実現しました。
【基幹技術開発の背景】
ビッグデータの分散処理クラスタは、EMRに限らず、その一部に障害が発生することを前提として構築されており、それ故に安定的なサービス提供に苦労する傾向にあります。フロムスクラッチではこのようなビッグデータの分散処理クラスタの抱える安定性の問題に対し、独自のEMRクラスタ管理システムを構築することで機能の障害を極少化し、マーケティング担当者が毎日安定的に安心してビックデータを活用いただける環境を低コストで実現いたしました。