基本設定に関して質問です。ご回答宜しくお願いいたします。
Macにて、Homebrewを使用してapache-sparkをインストールしました。
pysparkを使用しているのですが、警告レベルがINFOのため、ログがかなり邪魔です。
WARNに設定して、ログを削減したいのですが、うまくいかず、ご教示お願いいたします。
apache-spark version: 2.2.1
トライしたこと①:
/usr/local/Cellar/apache-spark/2.2.1/libexec/conf/log4j.properties.template
をviにて開き、
log4j.rootCategory=INFOを、log4j.rootCategory=WARNに変更・保存
トライしたこと②:
(ターミナルにて)
pyspark
sc.setLogLevel("WARN")
回答1件
あなたの回答
tips
プレビュー
バッドをするには、ログインかつ
こちらの条件を満たす必要があります。