質問編集履歴
1
マシーンos記入
test
CHANGED
|
@@ -1 +1 @@
|
|
|
1
|
-
spark yarn-clientモードで円周率の計算
|
|
1
|
+
spark yarn-clientモードで円周率の計算でエラー
|
test
CHANGED
|
@@ -1,4 +1,20 @@
|
|
|
1
|
-
spark環境を構築したのですが、(yarnとhdfsを使用)円周率を計算するというコードが終了しません。（ずっと同じメッセージが1秒置きにながれる 最下部参照）
|
|
1
|
+
spark環境を構築したのですが、(yarnとhdfsを使用)円周率を計算するというコードが終了しません。（ずっと同じメッセージが1秒置きにながれる 最下部参照）解決方法をご存じの方がいたら教えて頂きたいです。
|
|
2
|
+
|
|
3
|
+
|
|
4
|
+
|
|
5
|
+
構成
|
|
6
|
+
|
|
7
|
+
centos6.5 spark-client spark-master
|
|
8
|
+
|
|
9
|
+
hadoop-yarn-resourcemanager
|
|
10
|
+
|
|
11
|
+
hadoop-hdfs-namenode
|
|
12
|
+
|
|
13
|
+
centos6.2 spark-worker
|
|
14
|
+
|
|
15
|
+
hadoop-yarn-nodemanager
|
|
16
|
+
|
|
17
|
+
sudo service hadoop-hdfs-datanode stop
|
|
2
18
|
|
|
3
19
|
|
|
4
20
|
|