Numerai的数据集越来越大了,最近Announcements里面是这样说的
Numerai Data V32 is coming December 25, 2021; prepare yourselves and your computers.
「真系好串啊。。」
你们的内存条够用吗?反正我是不可能光靠内存条的了。
于是我就想到了用硬盘设置虚拟内存来应对,实践起来觉得还不错。
对硬盘来说,主要有两个要求:
1.读写速度要快
2.需要耐读写
我的方案是将自己原有的两个镁光5100 MAX的SSD硬盘组成RAID0阵列,这样就可以将读写速度提高到单个盘的两倍。
另外这款SSD用的是MLC颗粒,因此有很高的擦写寿命,当内存来用的话,不会像一般的SSD那么容易用废。
我在这个分区上创建了512GB的分页文件作为虚拟内存,这样就基本不用担心算法运行到一半爆内存了。
这两个硬盘是我以前买的,所以对我来说,这样的方案是物尽其用,我并不需要另外掏钱买。
供大家参考哈
我用内存很猛的,买内存条要达到我目前512G内存的配置,太贵了
所以个人还是倾向于用耐擦写的MLC颗粒SSD