scala根据反射符号投射object

[英]scala cast object based on reflection symbol

我有一个 Scala 反射符号。 val symbol = scala.reflect.api.Symbol 我怎样才能投出 object val obj: Any 该符号的类型？ 我问的原因是我有一个隐式方法将Map[String, Any]转换为 Scala 案例 class，但同时我想在每个 ...

无法使用 Apache Spark 在 AWS Glue 中读取 json 个文件

[英]Unable to read json files in AWS Glue using Apache Spark

赏金将在 6 天后到期。 此问题的答案有资格获得+50声望赏金。 RudyVerboven想让更多人关注这个问题： 我真的坚持这个并且完全没有选择。 对于我们的用例，我们需要从 S3 存储桶加载 json 个文件。 作为处理工具，我们使用 AWS Glue。 但是因为我们很快就会迁移到 Amaz ...

如何在 Scala 中将 `fs2.Stream[IO, T]` 转换为 `Iterator[T]`

[英]How to convert `fs2.Stream[IO, T]` to `Iterator[T]` in Scala

需要填写方法next和hasNext并保留惰性 但是无法弄清楚地球如何从fs2.Stream做到这一点？ Stream （或“已编译”的东西）上的所有方法都毫无用处。 如果这在合理数量的代码中根本不可能做到，那么这本身就是一个令人满意的答案，我们将从代码库中删除fs2.Stream - 只是想先 ...

如何在 Scala 中模拟 LocalDate.now()

[英]How to Mock LocalDate.now() in Scala

我有 object 我想写一个测试方法，我怎么能模拟something2 ...

Java 类型差异过于宽松？

[英]Java Type Variance Too Permissive?

在像 Scala 这样的现代函数式语言中，类型变化是类型中固有的。 这是例如 Scala 的Function1 ： 参数类型是逆变的，返回类型是协变的。 这是 java 的对应物： 现在，为了表达方差关系，使用了“通配符捕获”特殊语法。 例如，流的map function 声明为 在这里，Java ...

部分function在Scala中申请任意输入arguments

[英]Partial function application in Scala for arbitrary input arguments

我想知道在 Scala 中是否可以进行以下操作： 给定R^n中的一些向量x = (x_1, x_2, ..., x_n)和将R^n映射到R的 function f ，我想在 Scala 中复制这个概念。Scala 的部分函数/柯里化的想法应该保留在这里（即当应用单个值x_i时，返回仅为其输入域的一 ...

在 Scala 中，如何正确地对调用其他 class 方法的 class 方法进行单元测试？

[英]In Scala, how do I properly unit test a class method that calls other class methods?

我有一个案例 class，它代表一个电话号码，并提供了一些在代码中其他地方使用的辅助方法。 这些方法之一调用同一 class 中的其他方法：case class PhoneNumber { // class data and methods def isPossiblyUsable() ...

SpringBoot项目中无法下载特定的scala库

[英]Unable to download specific scala library in the SpringBoot project

我正在使用带有 Java 17 的 springBoot:3.0.1 项目。只有一个特定的 scala 库没有从内部 repo 下载。 但下载了其他库，包括 Java 和 scala。 这是 gradle.build 文件 现在 scala 库构建于 scala 版本 2.11.8 和 java 版 ...

如何增加通过“sbt dist”创建的 a.zip 分配使用的堆大小？

[英]How to increase the heap size used by a .zip distribution created via "sbt dist"?

我正在使用基于 sbt 构建的 package，并按照说明进行操作，即：在 package 文件夹中运行sbt dist 。 在此过程之后，如果我解压缩它，我会得到一个包含 bin 文件的 .zip 文件。 (视窗系统) 但是，我想增加为此程序包/程序分配的堆大小/内存。 我已经尝试了下面列出的 ...

如何加速这个 Scala 解决一个简单的 Leetcode 问题？

[英]How to speed up this Scala solution for an easy Leetcode problem?

我在 Scala 中解决了简单的 Leetcode 问题Ransom Note ，如下所示： 此解决方案还可以，但比 Scala 中其他公认的解决方案慢。 现在我想知道如何加快速度。 您建议如何优化此解决方案？ ...

spark flatMapGroupsWithState 随机丢失事件

[英]spark flatMapGroupsWithState random lost events

我有一份由同事组成的火花工作： 1- 从 Delta Lake 读取 static dataFrame 。 2- 从 Delta Lake 读取 dataFrame 的dataFrame 。 3- 加入 stream 和 static。 4-做一个flatMapGroupsWithState ...

将数据保存到实木复合地板以实现夏令时的日期时间偏移问题

[英]datetime offset issue while saving data into parquet for day light saving time

来自源和目标的屏幕截图当我们使用 spark/scala 写入 parquet 文件时，DST（夏令时）时间会自动转换一个小时的延迟时间，例如（2011-09-20 00:00:00.000 到“2011- 09-19 23:00:00.000”）。 源（从中读取数据）：sql 服务器目标（写入）： ...

Record 类型的字段在 BigQuery 中插入为 null

[英]Fields of type Record are inserted as null in BigQuery

我有一个 Scala 工作，我需要将嵌套的 JSON 文件插入到 BigQuery。 解决方案是为嵌套字段创建字段类型为 Record 的 BQ 表。 我写了一个案例 class，看起来像这样： 我在我的程序中使用 Java 依赖项"com.google.cloud" % "google-clou ...

如何使用 ZIO 库测试 Scala Spark UnitTest/DQ 检查？

[英]How to test Scala Spark UnitTest/DQ check using ZIO library?

我是 Scala 的新手。我正在尝试使用 ZIO 库对 Scala Spark Dataframe 的 UT/DQ 检查的断言进行单元测试。 如果他们之前已经在 ZIO 库上工作过，谁能帮我解决这个问题。 ...

在 Scala 3/Dotty 中，是否可以编写一个以具有唯一路径的值作为参数的种类/类型构造函数？

[英]In Scala 3/Dotty, is it possible to write a kind/type constructor that takes a value with a unique path as an argument?

这是我的意图的一个简单示例： 这是另一种（更简单和更通用的）写作方式： 但是编译器不会让我： 那么那种WOf的正确写法是什么呢？ 更新 1 ：我可以推测 Scala 3 可以使用此类型构造函数来表示以下定义的 Eta 扩展多态 function： 我只是不知道它是什么，是否有任何理由 Scala ...

插入后如何用 scala slick 返回 object

[英]How to return object with scala slick after insert

我正在尝试使用通用插入 function，它会在使用 Slick 插入数据时返回 object。 我试过以下代码 // This works without any issues but limited to specific entity and table def ins ...

Scala 带索引的子列表

[英]Scala sublist with index

如何使用scala实现 在 python 中，我使用了这段代码，但在 Scala 中，我们是如何完成这个比例的 ...

为 Future 和 List 创建 monad 转换器

[英]Creating monad transformer for Future and List

有一个异步客户端返回列表的未来。 要迭代结果，我需要使用嵌套map和flatMap 。 有没有一种方法可以创建一个 monad 转换器，以便能够使用更简单的 for-comprehensions，所以它看起来类似于 ...

Spark Scala：使用另一个 dataframe 使用 function 构建新列

[英]Spark Scala: build a new column using a function using another dataframe

这是我的问题：我有第一个 dataframe，它基本上是一个城市列表，以及他们居住的国家/地区。我有第二个 dataframe，其中包含用户列表以及他们居住的城市。我想添加一个“国家”列到第二个 dataframe，它的值当然基于“城市”列，但我可以输入不同的城市名称（例如华盛顿和华盛顿都必须给我 ...

将服务器端渲染与 scalajs-react 集成

[英]Integrating Server-Side Rendering with scalajs-react

赏金将在 13 小时后到期。 此问题的答案有资格获得+50声望赏金。 jesus g_force Harris想让更多人关注这个问题。 我一直在尝试遵循在 scalajs-react 中集成服务器端渲染的指南，但我的堆栈一定有点不同，所以它不是那么简单。 我正在使用SBT 1.5.5 ， sca ...