[問題] 讀取csv中特定的row

作者: MADNUG (1234567654321一下吧)   2016-03-09 10:24:52
[問題類型]:
效能諮詢(我想讓R 跑更快)
[軟體熟悉度]:
使用者(已經有用R 做過不少作品)
[問題敘述]:
小弟有個3.8G多的csv檔,但只想要隨機讀取1/10的row
fread好像沒read specific rows的指令,
難道只能讀整個檔案再select row了嗎?
這樣好沒效率呀.....
若要cross-validation的話光I/O就跑死了....
想請問有沒有更效率一點方法呢?
謝謝了
[程式範例]:
參考網路用fread + nrow and skip 寫了一下,但是更慢Orz.....
但也是預料中啦XDD
http://pastebin.com/gW9W1GmN
[關鍵字]:
fread
作者: sulaxd (SulaXD)   2016-03-09 10:48:00
可以參考套件 {ff}
作者: MADNUG (1234567654321一下吧)   2016-03-09 12:04:00
謝謝,瀏覽了一下似乎可以試試!來研究研究

Links booklink

Contact Us: admin [ a t ] ucptt.com