主要内容

合并MATLAB映射和Reduce函数到HadoopMapReduce工作

创建MATLAB的可部署归档®map和reduce函数,并将其合并到Hadoop中®mapreduce工作

要将MATLAB map和reduce函数合并到Hadoop mapreduce作业中,需要从map和reduce函数创建一个可部署的归档文件,并将归档文件作为有效负载参数传递给提交到Hadoop集群的作业。一个可部署的归档文件包含:

  • mapper函数写在MATLAB。

  • 减速器函数在MATLAB中编写。

  • 包含描述要分析的数据结构和变量的数据存储的mat文件。

  • 标识映射和reduce函数、要分析的数据类型和其他配置细节的Hadoop设置文件。

有关更多信息,请参见将MATLAB Map和Reduce函数合并到Hadoop作业中的工作流

功能

deploytool 打开应用程序部署应用程序列表
世纪挑战集团 编译MATLAB功能部署

主题

将MATLAB Map和Reduce函数合并到Hadoop作业中的工作流

回顾如何创建MATLAB映射和reduce函数的可部署归档文件,并将其合并到Hadoop mapreduce作业中。

将MATLAB Map和Reduce函数合并到Hadoop作业中的例子

尝试创建MATLAB map和reduce函数的可部署归档文件,并将其合并到Hadoop mapreduce作业中。

mcc命令创建可部署归档配置文件

创建一个必需的配置文件,该文件表示Hadoop mapreduce作业的有效负载的特征。