加快大文件处理工作与Parfor集群
这个视频从别人我使用不同的记录方式。而不是连续记录在我工作的时候,我暂停记录当我的代码更改花费很长时间来执行的或我有一些重复的编辑任务。有效的暂停录音编辑我的视频时间缩短。
这让我向你展示真正的项目和问题通常需要几个小时解决,那些涉及到大量的故障诊断,调查、调试、试验和错误,和思考。
我每天工作的大部分时间里在这个特殊的例子,但由此产生的视频只是90分钟,是的,还是太长了。随意在更高的速度和跳过。下次我将试着更积极地暂停。
所以,问题本身,我有一些代码处理数百个大型CSV文件,描述一个图的连接我们的网站页面之间每一天。需要几分钟加载和分析每个文件,和总运行时间是几个小时。所以我想看看试图加速这。
我打算工作在这些方面:
- 使用分析器来寻找我可以加快我的串行代码的地方。
- 使用我的本地机器上parfor 6物理/ 12逻辑处理器
- 确保我的文件名在Windows和Linux上工作
- 让它在一个128个处理器Linux集群网络
功能覆盖在这代码风格包括:视频
播放视频全屏模式更好的浏览体验。
评论
留下你的评论,请点击在这里MathWorks账户登录或创建一个新的。