Spark 対応の Hadoop クラスターへの tall 配列のデプロイ

tall 配列を伴う MATLAB^® アプリケーションを作成し、Spark™ 対応の Hadoop^® クラスターで実行する

サポートされるプラットフォーム: Linux^® のみ。

tall 配列を含む MATLAB アプリケーションを Spark 対応の Hadoop クラスターにデプロイする手順は、次の 2 つの部分で構成されます。

MATLAB デスクトップ環境でスタンドアロンアプリケーションを作成し、パッケージ化する。
Spark 対応の Hadoop クラスター上で、Linux シェルからスタンドアロンアプリケーションを実行する。

tall 配列を Spark 対応の Hadoop クラスターにデプロイする詳細な例は、Deploy Tall Arrays to a Spark Enabled Hadoop Clusterを参照してください。同じ手順に従って、tall 配列 Spark アプリケーションを CLOUDERA^® CDH にデプロイすることができます。

クラス

matlab.mapreduce.DeploySparkMapReducer Configure a MATLAB tall array application with Spark parameters as key-value pairs

関数

mapreducer mapreduce または tall 配列の実行環境の定義

トピック

Apache Spark の基礎
基本的な Apache^® Spark の概念を学習し、これらの概念が MATLAB アプリケーションの Spark へのデプロイにどのように関連するかを理解する。
Deploy Tall Arrays to a Spark Enabled Hadoop Cluster
Try an example on how to deploy a tall array MATLAB application to a Spark enabled Hadoop cluster.