MATLAB的答案

访问Amazon S3文件的脚本

33次浏览(最近30天)

安德烈Bibaud 2017年9月25日

回答: 哈瑞Sundaresh2021年6月26日

我在AWS EC2上设置了一个集群，以更快地运行我的脚本。现在，我的脚本在本地加载输入变量(在我的C:驱动器上)，并在本地写入模拟结果。我设置了一个S3桶，其中包含用于输入变量的子目录和用于结果的子目录。我如何改变load和write函数指向S3桶，而不是我的c:驱动器?

谢谢

0评论
显示隐藏1以上的评论

登录评论。

登录回答这个问题。

答案(3)

乔恩酒 2018年1月24日

3.
链接

直接链接到这个答案

//www.tatmou.com/matlabcentral/answers/358286-script-to-access-amazon-s3-files#answer_301604

我发现数据存储非常容易使用。在每个worker中运行下面的代码。

                        %组S3凭证
                       
                        setenv (“AWS_ACCESS_KEY_ID”，“ID”）;
                       
                        setenv (“AWS_SECRET_ACCESS_KEY”，“关键”）;
                       
                        setenv (“AWS_REGION”，“us-west-2”）;
                       
                        %加载数据
                       
                        fp =s3: / / mybucket /数据/ file.data '；
                       
                        ds = fileDatastore (spectralFilePath,“ReadFcn”, @AWSRead);
                       
                        数据= ds.read;

还要定义这个函数

                        函数data = AWSRead(文件名)
                       
                        fid = fopen(文件名);
                       
                        =从文件中读数据(fid,正无穷,“短”）;
                       
                        文件关闭(fid);
                       
                        结束