Configurar acceso

Para trabajar con datos remotos en Amazon S3, debe configuration el acceso primero:

Si utilza并行计算工具箱™，debe一个安全的方法来解决集群的配置问题。在客户和工人群体中建立的变量EnvironmentVariables在parpool，批处理，createJobo en el Administrador de perfiles de cluster。

Leer datos deAmazon S3

Puede leer datos de Amazon S3中间对象del almacén de datos。Por ejemplo, cree unImageDatastore， lea una imagen específica del almacén de datos y luego muestre la imagen en la pantalla。

setenv(“AWS_ACCESS_KEY_ID”、“YOUR_AWS_ACCESS_KEY_ID”);setenv(“AWS_SECRET_ACCESS_KEY”、“YOUR_AWS_SECRET_ACCESS_KEY”);ds = imageDatastore('s3://bucketname/image_datastore/jpegfiles'，…' inclesubfolders '， true， 'LabelSource'， 'foldernames');Img = ds.readimage(1);imshow (img)

描述datos enAmazon S3

Para escribir datos en Amazon S3, lame a la función写在一个完整的地毯上，在一个完整的地毯上，在一个完整的地毯上。El siguiente ejemplo muestra cómo leer datos tabulares de Amazon S3 en un arreglo alto, preprocesarlos elimindo las entradas ausentes y clasificándolos, y luego volver a escribirlos en Amazon S3。

setenv(“AWS_ACCESS_KEY_ID”、“YOUR_AWS_ACCESS_KEY_ID”);setenv(“AWS_SECRET_ACCESS_KEY”、“YOUR_AWS_SECRET_ACCESS_KEY”);ds = tabularTextDatastore('s3://bucketname/dataset/ airlinsmall .csv'，…'TreatAsMissing'， 'NA'， 'SelectedVariableNames'， {'ArrDelay'});Tt =高(ds);Tt = sortrows(rmmissing(Tt));写(“s3: / / bucketname / preprocessedData /”,tt);

Para volver a leer los datos altos, utilice la función数据存储．

ds = datastore('s3://bucketname/preprocessedData/');Tt =高(ds);

Configurar acceso

在蔚蓝的大地上，在蔚蓝的大地上，在蔚蓝的大地上，在蔚蓝的大地上，

Si utilza并行计算工具箱，获取复制的变量，在客户端，在集群建立中EnvironmentVariables在parpool，批处理，createJobo en el Administrador de perfiles de cluster。

Para obtener más información, consulteUso de Azure HDInsight存储集群．

Leer datos deAzure

Para leer datos de una ubicación de WASB, utilice un objecto de almacén de datos。Para producir la ubicación档案馆，档案馆的荣耀file.extY prefíjelo con la ruta de archivo/ path_to_file你的名字叫"你的名字wasbs: / / container@account /．La ubicación完整的资料利用方式:

wasbs: / /container@account/path_to_file/file.ext

container@account我是竞争者的名字path_to_file我们的路和档案和地毯。

Por ejemplo, si tiene un archiivoairlinesmall.csv在地毯上/航空公司En una cuenta de almacenamiento de pruebawasbs: / / blobContainer@storageAccount.blob.core.windows.net/， puede crear UN almacén de datos mediante:

location = 'wasbs://blobContainer@storageAccount.blob.core.windows.net/airline/airlinesmall.csv';

ds = tabularTextDatastore(location， 'TreatAsMissing'， 'NA'，…SelectedVariableNames, {' ArrDelay '});

蔚蓝的公用设施cálculos关于自由的数据，自由的讲座，mapreduce深度学习。Por ejemplo, cree unImageDatastore， lea una imagen específica del almacén de datos y luego muestre la imagen en la pantalla。

setenv(“MW_WASB_SAS_TOKEN”、“YOUR_WASB_SAS_TOKEN”);ds = imageDatastore('wasbs://YourContainer@YourAccount.blob.core.windows.net/'，…' inclesubfolders '， true， 'LabelSource'， 'foldernames');Img = ds.readimage(1);imshow (img)

描述datos enAzure

Para escribir datos en Azure, lame a la función写在一个完整的地毯上，在一个完整的地毯上，在一个完整的地毯上。我的天，我的天，我的天，我的天，我的天，我的天，我的天，我的天，我的天。

setenv(“MW_WASB_SAS_TOKEN”、“YOUR_WASB_SAS_TOKEN”);ds = tabularTextDatastore('wasbs://YourContainer@YourAccount.blob.core.windows.net/dataset/airlinesmall.csv'，…'TreatAsMissing'， 'NA'， 'SelectedVariableNames'， {'ArrDelay'});Tt =高(ds);Tt = sortrows(rmmissing(Tt));写(wasbs: / / YourContainer@YourAccount.blob.core.windows.net/preprocessedData/, tt);

Para volver a leer los datos altos, utilice la función数据存储．

ds = datastore('wasbs://YourContainer@YourAccount.blob.core.windows.net/preprocessedData/');Tt =高(ds);

特别是la ubicación de los datos

También puede crear un almacén de datos para una recopilación de archivos de texto o archivos de secuencia alojados en el sistema de archivos distribuido Hadoop (HDFS) mediante la funcióntabularTextDatastore．详细资料ubicación详细资料，详细资料，完整的档案，中间的，本地化的，统一的递归(URL)和详细资料:

hdfs: /path_to_file

hdfs: / / /path_to_file

hdfs: / /主机名/path_to_file

主机名我是主人的仆人path_to_file我们的路和档案和地毯。Especificar厄尔主机名es opcional。没有什么特别的主机名， Hadoop应用程序的命名主机预先确定的方法，instalación del sistema de archivos distribuido Hadoop (HDFS) en MATLAB。

尊敬的战士们almacén档案资料，中，绿地毯大羊驼数据联合国宗主国myserver：

这是特别的主机名与此相对应的是我的名字定义了我的命运fs.default.namezen los archivos de configuración XML de Hadoop del Hadoop集群。

De forma optional, puede incluir el número De puerto。Por ejemplo, esta ubicación especifica un host denominadomyserver港城7867， que continene el archiivo中一种面额的地毯数据：

hdfs: / / myserver: 7867 /数据/中

El número de puerto especificado debe cocidir con El número de puerto establecido en la configuración de HDFS。

建立变量Hadoop

Antes de leer desde HDFS, utilice la funciónsetenvpara establecer la variable de entorno通讯员para la地毯donde se haya安装Hadoop。这是一种实际的地毯。

我有办法，我有办法建立一个变量HADOOP_HOME．hadoop-folderes la carpet en la que se ha installado Hadoop y/ mypath /这是一种dicica地毯。

setenv(“HADOOP_HOME”、“/ mypath /hadoop-folder”);

拿督HDFSzh Hortonworks oCloudera

在Hortonworks和Cloudera上提供实际的HDFS数据^®，没有什么可以确定的变量HADOOP_HOMEoHADOOP_PREFIX．MATLAB asigna automáticamente云计算中应用云计算的计算变量。

Evitar la eliminación de código de la记忆

Al leer desde HDFS o leer archivos de secuencia localmente, la función数据存储美洲驼javaaddpath．Este comando hace lo siguiente:

Para evitar que se eliminen las variables, los archivos de código o los archivos MEX persistentes, utilice la funciónmlock．

描述datos enHDFS

使用la función写para escribir los arreglos altos y distribuidos en un sistema de archivos distribuido Hadoop。Al llamar a esta función en un arreglo alto o distribuido, debe speciificla ruta completa a una carpet HDFS。El siguiente ejemplo muestra cómo leer datos tabulares de HDFS en un arreglo alto, preprocesarlos eliminando las entradas ausentes y clasificándolos, y luego volver a escribirlos en HDFS。

ds = tabularTextDatastore('hdfs://myserver/some/path/dataset/ airlinsmall .csv'，…'TreatAsMissing'， 'NA'， 'SelectedVariableNames'， {'ArrDelay'});Tt =高(ds);Tt = sortrows(rmmissing(Tt));写(“hdfs: / / myserver /一些/道路/ preprocessedData / ', tt);

Para volver a leer los datos altos, utilice la función数据存储．

ds = datastore('hdfs://myserver/some/path/preprocessedData/');Tt =高(ds);