主要内容

以编程方式导入大数据

将大数据从关系数据库导入MATLAB®使用命令行工作空间

你可以用DatabaseDatastore对象将大数据导入到MATLAB工作空间。要创建此对象,请使用databaseDatastore函数。将数据导入到MATLAB工作空间后,可以使用高数组来分析它。此外,MapReduce编程技术为分析大数据提供了更大的灵活性。

要将一个SQL查询分割为多个SQL页面查询并以块形式导入大数据,请使用splitsqlquery函数。您可以通过使用Database Toolbox™函数或并行池(需要parallel Computing Toolbox™)访问大数据。

功能

全部展开

databaseDatastore 用于数据库中数据的数据存储
hasdata 确定数据是否在DatabaseDatastore可供阅读
预览 返回的数据子集DatabaseDatastore
读取数据中DatabaseDatastore
readall 将所有数据读入DatabaseDatastore
重置 重置DatabaseDatastore到初始状态
createConnectionForPool 使用数据库连接初始化并行池
splitsqlquery 使用分页分割SQL查询

主题

处理大型数据集

导入和导出存储在数据库中的大型数据集。

使用DatabaseDatastore对象导入大数据

创建一个DatabaseDatastore对象,用于访问存储在关系数据库中的数据集合。

使用高数组分析数据库中的大数据

在一个大的数据集中用一个高表找出最小值。

使用MapReduce分析数据库中的大数据

编写mapper和reducer函数,用于分析大数据DatabaseDatastore对象。