メインコンテンツ

このページの内容は最新ではありません。最新版の英語を参照するには、ここをクリックします。

textFile

クラス: matlab.compiler.mlspark.SparkContext
名前空間: matlab.compiler.mlspark

テキスト ファイルから RDD を作成

構文

rdd = textFile(sc,pathToFile)
rdd = textFile(sc,pathToFile,minPartitions)

説明

rdd = textFile(sc,pathToFile) は、pathToFile にあるテキスト ファイルから RDD を作成します。

rdd = textFile(sc,pathToFile,minPartitions) は、minPartitions で指定された最小の分割数をもつ RDD を作成します。

入力引数

すべて展開する

使用する SparkContext。SparkContext オブジェクトとして指定します。

テキスト ファイルへのファイル パス。'' で囲んだ文字ベクトルとして指定します。

データ型: char | string

作成する分割の最小数。スカラーとして指定します。

データ型: double

出力引数

すべて展開する

テキスト ファイル内の読み取りから作成された出力 RDD。RDD オブジェクトとして返されます。

すべて展開する

%% Connect to Spark
sparkProp = containers.Map({'spark.executor.cores'}, {'1'});
conf = matlab.compiler.mlspark.SparkConf('AppName','myApp', ...
                        'Master','local[1]','SparkProperties',sparkProp);
sc = matlab.compiler.mlspark.SparkContext(conf);

%% textFile
rdd = sc.textFile('/<matlabroot>/toolbox/matlab/demos/airlinesmall.csv')

バージョン履歴

R2016b で導入