エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。
ここにツイート内容が記載されます https://b.hatena.ne.jp/URLはspanで囲んでください
Twitterで共有ONにすると、次回以降このダイアログを飛ばしてTwitterに遷移します
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
spark-shellからバッチに変えた際に少しハマったので、その時のメモ。 事前準備 環境 Proxy環境下にある... spark-shellからバッチに変えた際に少しハマったので、その時のメモ。 事前準備 環境 Proxy環境下にあるPCでVirtualBOXを利用して作成した仮想マシン HadoopはCDH5.5.1を利用。擬似分散環境。 SparkもCDHのものを利用。インストール方法は以下を参照。 http://www.cloudera.com/documentation/enterprise/latest/topics/cdh_ig_spark_install.html Scala CDHのSparkがscala 2.10.4でコンパイルされたもののようなので、同じバージョンのScalaをインストールする。以下からダウンロードし、PATHを通しておく。 ※(注記)バージョンを合わせないとコンパイル時にエラーが発生 http://www.scala-lang.org/download/2.10.4.html