[問題] SparkR rJava 安裝

作者: pk790127 (<>)   2016-07-23 23:23:42
ctrl + y 可以刪除一整行,請將不需要的內容刪除
文章分類提示:
- 問題: 我想使用R裡面的SparkR這個套件,不論是windos或是linux系統
[問題類型]:
實驗室想要使用Hadoop或是Spark平行式的運算方式提升計算功能,主要研究Spark的方式
已查詢過有SparkR的套件,但是怎麼都裝不起來,不論是linux 或是 windos
[軟體熟悉度]:
請把以下不需要的部份刪除
入門(寫過其他程式,只是對語法不熟悉)
[問題敘述]:
請簡略描述你所要做的事情,或是這個程式的目的
linux: 已將R 與 Rstudio scala spark 灌好,碰到
'devtools’&"rJava" is not available (for R version 3.2.2)這種類似的問題
導致後面無法進行 (參考對岸或是外國教學網站)
Windos: 主要是參考:
https://www.youtube.com/watch?v=oG0HZogxEUc
這個網站的教學,但是到了install_github後面將SparkR套件載下來就出錯了!
還是我漏裝了一些東西呢?
想請問有人有使用過sparkR這個套件 或是有更詳細的安裝教學網站(原文也可以)
能提供我參考嗎 謝謝
作者: celestialgod (天)   2016-07-24 17:59:00
直接下載spark的pre-build然後把.libPath指到spark-bin/R/lib就可以正常library(SparkR)了github上面那個已經是之前的SparkR版本可以參考這個http://0rz.tw/RBda3不過windows上還要去下載winutils才行跑linux的話 我還沒試過(攤手
作者: pk790127 (<>)   2016-07-24 19:35:00
其實celes大的網址我也有找到..剛剛試的時候原來是資料夾 多弄了第二層,現在sparkR已經安裝好了 謝謝可是想請問 winutils 載下來要放在哪? 這是hadoop吧?是他的分散式資料系統嗎? (HDFS) 謝謝

Links booklink

Contact Us: admin [ a t ] ucptt.com