的数据存储
函数创建一个数据存储,这是一个存储太大而无法放入内存的数据集合的存储库。数据存储允许您将存储在磁盘、远程位置或数据库中的多个文件中的数据作为单个实体进行读取和处理。如果数据太大而无法放入内存,您可以管理数据的增量导入,创建高
数组来处理数据,或者使用数据存储作为输入mapreduce
进行进一步处理。有关更多信息,请参见开始使用数据存储.
数据存储是用于读取单个文件或文件或数据集合的对象。
根据数据或应用程序的文件格式选择正确的数据存储。
这个示例展示了如何为包含表格数据的大型文本文件创建数据存储,然后每次读取和处理一个块或一个文件的数据。
这个示例展示了如何为图像集合创建数据存储,读取图像文件,并查找具有最大平均色调、饱和度和亮度(HSV)的图像。
的输出的mat文件中,如何为键值对数据创建数据存储mapreduce
.
这个示例展示了如何为包含键值数据的Sequence文件创建数据存储。
在Amazon S3™和Azure中使用远程数据®Blob Storage或HDFS™。
在您的机器上设置一个可以在另一台机器或集群上加载和处理的数据存储。
为您的自定义或专有数据创建一个完全自定义的数据存储。
这个例子展示了如何开发一个支持写操作的自定义数据存储。金宝app
在实现自定义数据存储之后,按照此测试过程对自定义数据存储进行限定。