如何使用Spark筛选Hive中的记录

Question

为什么刺痛没有得到比较？

我的输入为-

+-------+
|      y|
+-------+
| ""no""|
| ""no""|
| ""no""|
|""yes""|
| ""no""|
| ""no""|
| ""no""|
| ""no""|
|""yes""|
| ""no""|
| ""no""|
| ""no""|
| ""no""|
|""yes""|
| ""no""|
| ""no""|
+-------+

我正在查询-

sqlContext.sql("select count(y) from dummy where y='yes'").show()

输出是-

+---+
|_c0|
+---+
|  0|
+---+

y在DDL中声明为字符串类型

Answer 1

您应该尝试这样：

sqlContext.sql("select count(y) from dummy where y='\"\"yes\""'").show()

请注意，您的资料有""yes""不只是yes 。

您仍然需要清理数据:)

或这样做：

sqlContext.sql("select count(y) from dummy where y like '%yes%'").show()