我正在尝试从 emr 集群连接到 aws redis 集群，我将 jar 驱动程序上传到 s3 并使用此引导操作将 Z68995FCBF432492D15484D04A9D2AC4 文件复制到集群节点： 这是我的连接测试火花应用程序： 使用此 spark-submit 运行应用程序时： 我收到以下 ...
我正在向 redis 编写一个数据帧并使用 spring boot 应用程序读取数据。 信息重试成功，但 id 列返回 null 如下： {“nu_document”：null，“qt_negative”：“1000000000”} ...
我正在尝试通过 spark 将数据插入 redis（用于 Redis 的 Azure 缓存）。 大约有 7 亿行，我正在使用spark-redis连接器插入数据。 它在抛出此错误后失败。 我能够插入一些行，但一段时间后，一些任务开始失败并出现以下错误。 我正在浏览 jupyter notebook。 ...
我在 databricks "com.redislabs:spark-redis_2.12:2.5.0"中安装了以下 jar 。 并尝试使用各自的身份验证创建火花 session 下面是我用凭据创建火花 session 的代码 但是当我尝试使用以下代码保存它时 这会引发以下错误。 这显然意味着连接到 ...
我正在尝试使用 pyspark 从 Redis 读取特定密钥。 根据文档，我没有找到任何特定的命令来读取特定的密钥。 使用下面的代码，我可以从 Redis 读取所有数据： 请建议 ...
我使用spark-redis将数据集保存到 Redis。然后我使用Spring 数据 redis读取此数据： 这个object我保存到redis： 使用 spark-redis 保存 object： 存储库： 我无法通过使用8818215151203188数据Redis保存在883135569688 ...
我想在 PyCharm 中调试 Spark 代码，因为它更容易调试。 但是我需要添加一个spark-redis.jar否则Failed to find data source: redis 连接redis的代码是 如果使用 PyCharm 如何修复它？ 我曾尝试在$SPARK_HOME/co ...
我在Redis中有一个普通的Scala映射（键和值）。 现在，我想在我的一个火花流程序中读取该映射，并将其用作广播变量，以便我的从属可以使用该映射来解析键映射。 我正在使用spark-redis 2.3.1库，但是现在确定如何读取它。 在Redis表“员工”中映射- 这就是我试 ...
我是Apache Spark / Redis的用户，最近我为一个项目尝试了spark-redis 。 该程序正在生成大约300万行的PySpark数据帧，我正在使用以下命令将其写入Redis数据库中 如GitHub项目数据框架页所建议。 但是，对于相同的Spark集群配置（相同数 ...
我正在构建一个应用程序，该应用程序从redis中的列表中读取json元素，并使用spark流式传输它们。 这是我写的： 如何使用jssc对象访问redis。 提前致谢。 ...
我正在尝试使用redis作为spark sql的源代码，但是仍然坚持如何转换rdd。 以下是我的代码： 我得到以下异常： 我不知道接下来该做什么，请帮忙！ ...