cost 211 ms
使用 DSBulk 加载数据时元组的正确 CSV 格式是什么? - What is the correct CSV format for tuples when loading data with DSBulk?

我最近开始为我的新项目使用 Cassandra 并进行一些负载测试。 我有这样一个场景,我正在使用 CSV 进行 dsbulk 加载, 我的 CSV 文件条目如下所示, 列类型, 问题是,对于列freq ,我尝试了不同的方法来设置 csv 中的值,如下所示,但无法使用dsbulk插入行假设我将 f ...

DSBulk CSV 加载 DataStax Astra 失败 Cassandra 数据库,缺少文件 config.json - DSBulk CSV Load Failure to DataStax Astra Cassandra Database, missing file config.json

我正在尝试使用 DSBulk 工具将 csv 加载到 DataStax Astra 中的数据库中。 这是我运行的命令减去敏感细节: 这是我返回的错误: 这是完整的日志: 该错误表明缺少 config.json,但事实并非如此。 所以我卡住了。 除非它在我指定的包之外的其他地方寻找,但包肯定有 co ...

使用 DSBulk 加载到 CQL 集返回“无效集文字 - 集合文字内不支持绑定变量” - Using DSBulk to load into a CQL set returns "Invalid set literal - bind variables are not supported inside collection literals"

我尝试使用 dsbulk 将大量数据加载到带有集合的表中: 我收到以下错误: 如果我使用 加载按预期执行。 有人知道如何参数化我的设置值吗? 或者,我可以创建单独的更新语句,然后通过 cqlsh 执行这些语句。 不幸的是,处理时间真的很慢。 我有超过 10 亿条记录要插入。 ...

如何将 DSBulk UNLOAD 生成的文件限制为一个 CSV 文件? - How do I limit the files generated by DSBulk UNLOAD to just one CSV file?

我已经在 EC2 实例中运行以下命令以从 cassandra 卸载数据并将其存储在 EC2 的某个位置,但我观察到对于每个 dsbulk 卸载命令,它会生成 2 个 json 文件,无论文件大小有多大。 如何控制生成的文件数量? 例如,假设我想要一个特定的 dsbulk 卸载来生成 5 个部分文件 ...

DSBulk 从 Kubernetes DSE 集群卸载 1TB 数据失败 - DSBulk unloading 1TB of data from Kubernetes DSE Cluster fails

我正在使用 DSBulk 将数据从安装在 Kubernetes 下的 DSE 集群卸载到 CSV,我的集群由 9 个 Kubernetes Pod 组成,每个 120 GB 内存。 我在卸载数据时监控了资源,并观察到在 CSV 中获取的数据越多,ram 被利用的越多,并且由于内存不足,pod 正在 ...

用于 DSBULK 将数据加载到 Cassandra 的 driver.conf 的位置 - Location of driver.conf used for DSBULK to load data into Cassandra

我正在使用如下配置文件使用 DSBULK 在 Cassandra 中加载数据 我用上面的配置写了一个python程序来执行DSBULK。 我注意到我需要将 dsbulk.conf 保存在 DSBULK conf 文件夹中才能使程序正常工作。 如何为 driver.conf 文件指定不同的位置? ...

使用 DSBulk 进行备份/恢复花费的时间太长 - Using DSBulk for backup/restore takes too long

我使用 dsbulk 进行基于文本的 cassandra 集群备份和恢复。 我创建了一个 python 脚本,它使用 dsbulk 加载/卸载来备份/恢复 cassandra 集群中的所有表,但由于为每个表创建了新会话(大约 7 秒),即使数据较少,也需要很长时间,在我的情况下,我有 70表,因此由 ...

DSBulk 加载程序版本 1.8:加载和连接到 Apache Cassandra 时出错 - DSBulk loader version 1.8 : error in loading and connecting to Apache Cassandra

我手动安装了 Apache Cassandra 和 DSBulk 加载程序,一切正常,但是当我尝试使用 DSBulk 加载数据时,似乎是 db 和 DSBulk 之间的连接问题。 有人可以告诉我发生了什么,我该如何解决? 奇怪,第一次看到这个错误。 直到今天,这从未发生在我身上。 这里的错误: 尝试 ...

dsbulk 卸载丢失的数据 - dsbulk unload missing data

我正在使用dsbulk 1.6.0 从cassandra 3.11.3 卸载数据。 每次卸载都会导致截然不同的行数。 以下是 3 次卸载调用的结果,在同一个集群上,连接到同一个 cassandra 主机。 被卸载的表只会被附加,数据永远不会被删除,所以卸载行的减少不应该发生。 集群中有 3 个 ca ...


 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM