主要内容

このページの翻訳は最新ではありません。ここをクリックして,英語の最新版を参照してください。

ビッグデータの処理

分散配列,高配列,データストアまたはmapreduceを使用して,火花®クラスターおよびHadoop®クラスター上でビッグデータセットを並列解析する

并行计算工具箱™を使用すると,大規模な配列を複数のMATLAB®ワーカーにわたり並列に分散できるため,クラスターの結合メモリを使用するビッグデータアプリケーションを実行することができます。配列全体は単一のエンティティとして処理されますが,ワーカーは配列の自己担当部分のみを処理し,必要に応じて自動的にワーカー間でデータを転送します。并行计算工具箱では,MATLAB®高配列と数据存储の計算も並列実行できるため,クラスターのメモリに収まらないビッグデータセットを解析できます。MATLAB并行服务器™を使用すると,火花対応Hadoopクラスター上で高配列および数据存储の計算を並列実行できます。そうすることで,膨大なデータ計算の実行時間が大幅に短縮されます。

  • 分散配列
    分散配列と同時実行を使用したビッグデータセットの並列解析
  • 高配列およびmapreduce
    MATLABの高配列とデータストア,またはmapreduceを火花クラスター,Hadoopクラスターおよび並列プールで使用して,ビッグデータセットを並列解析する。

注目の例