在 pyspark 中加入两个数据帧

Question

我有两个数据框：

df1

+----+----+
|key1|val1|
+----+----+
|a1  |   1|
|b1  |   2|
+----+----+

df2

+----+----+
|key2|val2|
+----+----+
|a2  |   3|
|b2  |   4|
+----+----+

然后我想合并这两个数据框得到以下数据框：

df3

+----+----+----+----+
|key1|val1|key2|val2|
+----+----+
|a1  |   1|a2  |   3|
|a1  |   1|b2  |   4|
|b1  |   2|a2  |   3|
|b1  |   2|b2  |   4|
+----+----+

我怎样才能在 PySaprk 中做到这一点？

Answer 1

尝试cross join如下，

df3 = df1.crossJoin(df2)
df3.show()

这应该给 output 你想要的。