如何計算雅典娜表中每列的空值百分比

Question

我們在 athena 中有一個包含 80 多列的巨大表。

作為數據驗證的一部分，我們正在嘗試檢查數據的百分比是 null 是否有通用查詢來檢查相同的。

我嘗試了如下類似的查詢：

SELECT  
  COUNT(c1) as CountColumn, 
  (CAST (COUNT(c1) as bigint/COUNT(*))*100 as PercentageOfNonNullValues
FROM t1;

但是有什么簡單的方法而不是為每一列寫（我們有 80 多列）

Answer 1

有什么簡單的方法而不是為每一列寫（我們有 80 多列）

您可以利用information_schema和format() function 來生成查詢，但您需要為此編寫應用程序邏輯，您不能在單個 Presto 查詢中完成所有這些操作。