大量列のカラム内にあるnullの合計値を抽出する

Question

前提

spark SQL環境のnotebook上であるテーブルの大量カラムの中のnullの合計値をカラム毎に抽出したいです。

発生している問題・エラーメッセージ

テーブル全体のnull値はカウントできますが、それをカラム毎に抽出することが難しいです。
大量にカラムがあるので、一回づつcount(列名)ではない方法で一気に抽出する方法を知りたいです。

Comments

[Orlofsky]

元の質問を修正して、この質問は削除依頼してください。https://teratail.com/help#delete-question

[m.ts10806]

質問は修正できるので、新たに立てる必要はありません。
どちらか削除依頼をしてください。何も対応されないゴミが残り続けることになります。

[sazi]

null値の合計値とは何ですか？精々0にする位じゃないでしょうか。
それともnull値を含む値の合計という事？
それなら、カラムの合計は現在行っているって事ですか？
Null値を考慮した多数の項目の合算値って事？

Answer 1

項目ごとのNullをカウントしたいって事ですね。

100程度の大量列を列毎にカウントしたく、これだと入力の手間がすごく、一括してやりたいです

手打ちするなら手間かもしれませんけど、テキストエディタ―やエクセルを活用すれば、そんなに手間じゃないでしょ。

お薦めは矩形の操作ができるテキストエディタ―です。（サクラエディタとか）

Answer 2

プロシージャが実装されていればできるでしょうけどベタのSQLであれば
１列ごとに処理をするしかないでしょう
あえてやろうとすれば、unionで列の数だけ結合してもいいですが
結局非効率なことには代わりありません

Answer 3

これではダメでしょうか？

SELECT count(col1) FROM test WHERE col1 IS NULL;

Comments

[withdata]

100程度の大量列を列毎にカウントしたく、これだと入力の手間がすごく、一括してやりたいです

[sazi]

駄目でしょうね。Nullはカウントされませんので。