[問題] R載入檔案是否有最大限制

作者: paranoia5201 (邁向研究生)   2019-03-13 09:21:54
我有一個約28MB的檔案,每次載入R之後就會等很久,但是每次都在等待超久之後,就直接終止,關閉程式。
無論是用csv格式或txt都是如此。
想問:是否因為檔案太大,所以R無法負荷?
而這種或更大的檔案,是否就要用分散式資料庫才能存取?
還請指導,感謝。
作者: celestialgod (天)   2019-03-13 09:44:00
28MB而已,不太可能碰到限制,很早之前,R的data.frame列數就可以支援超過2^31-1,28MB不可能超過那麼多列超過10GB可能才需要....建議附上R版本 用過什麼方法讀過的資訊
作者: Luluemiko (露露)   2019-03-13 10:10:00
28MB並不大
作者: KuChanTung (小古)   2019-03-13 12:23:00
善用data.table
作者: dodo4218 (DODO)   2019-03-13 15:45:00
不大...
作者: mosenay   2019-03-13 20:04:00
fread
作者: paranoia5201 (邁向研究生)   2019-03-13 23:35:00
後來發現是檔案內容有格式問題,所以經修正後已經ok。不過奇怪的是,console並沒有跳出錯誤訊息,而讓我癡癡地等,所以才會讓人以為是檔案過大而無法負荷。

Links booklink

Contact Us: admin [ a t ] ucptt.com