CombinedDatastore
用于组合从多个底层数据存储读取的数据
描述
使用一个CombinedDatastore
对象组合从多个其他数据存储读取的数据。
一个CombinedDatastore
维护底层数据存储之间的奇偶性,以便从底层数据存储的相应部分读取数据。重置CombinedDatastore
重置所有基础数据存储。
创建
您可以创建CombinedDatastore
对象使用结合
函数。例如,Dsnew = combine(ds1,ds2)
创建一个结合从数据存储中读取的数据的数据存储ds1的
而且ds2
.
属性
对象的功能
结合 |
组合来自多个数据存储的数据 |
hasdata |
确定是否有数据可以读取 |
预览 |
预览数据存储中的数据子集 |
读 |
读取数据存储中的数据 |
readall |
读取数据存储中的所有数据 |
writeall |
将数据存储写入文件 |
重置 |
将数据存储重置为初始状态 |
变换 |
变换数据存储 |
numpartitions |
数据存储分区数 |
分区 |
对数据存储进行分区 |
洗牌 |
打乱数据存储中的所有数据 |
isPartitionable |
确定数据存储是否可分区 |
isShuffleable |
确定数据存储是否可洗牌 |