超级快的性能与parfor除了它本身与大文件呕吐不已
1视图(30天)
显示旧的评论
这是一个普遍的问题有没有人见过这个。我不打算拆解复杂的代码。
我有一个数据处理程序我写,是非常快。很多被小心地让它执行的最高速度。
我所犯的几个版本100 X时机性能收益。
我开始使用标准的给了我一个4 x加速是美妙的。然而,当我问par咀嚼我的大版本测试文件只是呕吐不已并去世。锁了我的电脑,重新启动,直到我力量。
我小测试文件是相同的,除了少数量的线解析。
当我使用10000线测试csv我获得巨大的性能。
当我使用50000线csv只是摔倒时死亡
有人见过吗?我有一个相当重要的机器上运行这个所以我认为其不是资源问题。在查看任务管理器,我确实看到内存ussage 90%。
一般的想法吗?
