如何计算雅典娜表中每列的空值百分比

Question

我们在 athena 中有一个包含 80 多列的巨大表。

作为数据验证的一部分，我们正在尝试检查数据的百分比是 null 是否有通用查询来检查相同的。

我尝试了如下类似的查询：

SELECT  
  COUNT(c1) as CountColumn, 
  (CAST (COUNT(c1) as bigint/COUNT(*))*100 as PercentageOfNonNullValues
FROM t1;

但是有什么简单的方法而不是为每一列写（我们有 80 多列）

Answer 1

有什么简单的方法而不是为每一列写（我们有 80 多列）

您可以利用information_schema和format() function 来生成查询，但您需要为此编写应用程序逻辑，您不能在单个 Presto 查询中完成所有这些操作。