このページの本文へ移動
  1. ホーム >
  2. プレスリリース >
  3. HPC技術の応用によりビッグデータ処理の高速化を検証

PRESS RELEASE (システムプラットフォーム)

2013年5月7日
富士通株式会社

HPC技術の応用によりビッグデータ処理の高速化を検証

株式取引の利益予測や商品需要予測の処理時間を、HPC並列分散処理技術により大幅短縮

当社は、HPC技術およびプラットフォームの一般業務分野での活用推進の一環として、今般、HPCの並列分散処理技術を用いて、ビッグデータ領域におけるBusiness Analytics(BA)(注1)業務を計算するベンチマークテストを実施しました。実施したのは、株価予測から取引戦略を策定する金融分野、店舗における商品需要を予測する流通分野の2種のプログラムです。その結果、両分野とも計算時間が、サーバ1台の並列処理で約12分の1に、また、サーバ2台で約21分の1に短縮するなど、HPC技術の並列効果がリニアに性能へ反映される良好な結果が得られました。

これにより、統計分析・予測では、お客様業務のデータ処理量や処理時間短縮の目標に合わせて、最適な規模の並列分散処理用サーバを利用することにより、BA業務を高速化することが期待できます。

当社は、HPCの高速処理技術の適用分野拡大に向け、今後も様々な分野での性能検証を進めていく予定です。

ベンチマークテストの実施内容と結果

従来、BA業務を行う際、データ収集から分析モデルの作成、分析・予測処理まで実行すると、膨大な時間がかかる場合がありました。今回のベンチマークテストでは、分析・予測計算部分だけを別サーバに切り出し、並列分散処理することの効果検証を行いました。

統計解析向けプログラミング言語「R(注2)」で記述されたシミュレーション・プログラムを、最新のPCクラスタプラットフォームでの並列分散処理に対応させて実行した結果、金融分野、流通分野ともに大幅な処理時間短縮を実現しました。

ベンチマークテストの実施内容

  1. 金融分野

    過去2年間の株価変動実績から株価を予測し、予測した株価から売買注文ルールごとに利益予測するシミュレーションです。今回、約2,000銘柄それぞれについて、株価予測と利益予測を行いました。

    [約2,000銘柄の株式戦略取引の利益予測計算所要時間]

    ・並列分散処理対応前  :  90分間
    ・並列分散処理対応後[PCサーバ PRIMERGY×1台(16コア)追加]  :  7分間(約12分の1)
    ・並列分散処理対応後[PCサーバ PRIMERGY×2台(32コア)追加]  :  4分間(約21分の1)
  2. 流通分野

    過去の売上データから店舗別、商品別の需要予測するシミュレーションです。今回、100店舗における1,000商品の需要予測を行い、需要予測の精度向上のために複数のシミュレーション手法を用いて予測しました。

    [100店舗、それぞれ1,000商品の需要予測計算所要時間]

    ・並列分散処理対応前  :  45時間
    ・並列分散処理対応後[PCサーバ PRIMERGY×1台(16コア)追加]  :  4時間(約11分の1)
    ・並列分散処理対応後[PCサーバ PRIMERGY×2台(32コア)追加]  :  2時間(約19分の1)

結果の詳細については、PCクラスタ性能検証結果に掲載しています。

当社はHPCの高速処理技術のビッグデータ領域への適用を目指し、今後も引き続き性能検証を実施し、結果を公開していきます。

商標について

記載されている製品名などの固有名詞は、各社の商標または登録商標です。

以上

注釈

注1 Business Analytics:
各種データを収集、抽出、加工し、定量的な分析・予測を行なうこと。
注2 R:
オープンソースの統計解析向けのプログラミング言語とその開発実行環境。

関連リンク

本件に関するお問い合わせ

富士通コンタクトライン
電話 0120-933-200
受付時間: 9時~17時30分(土曜日・日曜日・祝日・年末年始を除く)


プレスリリースに記載された製品の価格、仕様、サービス内容、お問い合わせ先などは、発表日現在のものです。その後予告なしに変更されることがあります。あらかじめご了承ください。