[問題] fread讀資料 and 使用 snow 平行

作者: f496328mm (為什麼會流淚)   2016-07-24 22:18:41
上面有問過一篇如何讀取3G的DATA
作者: clickhere (It's time to go home.)   2016-07-24 23:20:00
把3G切成6份下去平行即可.
作者: celestialgod (天)   2016-07-25 00:06:00
看你的操作要做什麼,再來考慮加速方法比較妥當做資料處理的話,3G用data.table只要有6G的記憶體應該都可以順利吃下所以我意思是能夠不用平行解決就不用平行解決(攤手沒必要搞到那麼複雜
作者: memphis (讓你喜歡這世界~)   2016-07-25 13:15:00
你可以考慮用 multidplyr

Links booklink

Contact Us: admin [ a t ] ucptt.com