一致性为ONE的读取查询期间的Cassandra超时

Question

我对cassandra db有问题，希望有人可以帮助我。 我有一个表“ log”。 在日志表中，我插入了大约10000行。 一切正常。 我可以做一个

select * from

select count(*) from

一旦我用TTL 50插入100000行，就会收到错误消息

select count(*) from

版本：cassandra 2.1.8，2个节点

一致性为ONE的读取查询期间的Cassandra超时（需要1个响应，但仅响应0个副本）

有人知道我在做什么错吗？

CREATE TABLE test.log (
    day text,
    date timestamp,
    ip text,
    iid int,
    request text,
    src text,
    tid int,
    txt text,
    PRIMARY KEY (day, date, ip)
) WITH read_repair_chance = 0.0
   AND dclocal_read_repair_chance = 0.1
   AND gc_grace_seconds = 864000
   AND bloom_filter_fp_chance = 0.01
   AND caching = { 'keys' : 'ALL', 'rows_per_partition' : 'NONE' }
   AND comment = ''
   AND compaction = { 'class' : 'org.apache.cassandra.db.compaction.SizeTieredCompactionStrategy' }
   AND compression = { 'sstable_compression' : 'org.apache.cassandra.io.compress.LZ4Compressor' }
   AND default_time_to_live = 0
   AND speculative_retry = '99.0PERCENTILE'
   AND min_index_interval = 128
   AND max_index_interval = 2048;

Answer 1

该错误消息表明READ操作存在问题。 最有可能是读取超时。 您可能需要按照此SO回答中所述的更长的读取超时时间来更新Cassandra.yaml。

200秒的示例：

read_request_timeout_in_ms: 200000

如果无法进行更新，则可能需要调整Cassandra的JVM设置。 有关更多信息，请参见DataStax的“ 调整Java操作 ”。

Answer 2

count（）是一个非常昂贵的操作，想象一下Cassandra需要扫描所有节点上的所有行，只是为了给您计数。 如果行较少，但行数较大，则应使用另一种方法来避免超时。

• 首先，我们必须逐行检索以计算数量并忘记了count（*）
• 我们应该进行几个（数十个，数百个）查询，并按分区和聚类键进行过滤，并对每个查询检索到的行的总数进行汇总。
• 这是一个很好的解释，什么是集群键和分区键在您的情况下， day是分区键，复合键由两列组成： date和ip 。
• 使用cqlsh命令行客户端最不可能做到这一点 ，因此您应该自己编写一个脚本。 流行编程语言的官方驱动程序： http : //docs.datastax.com/en/developer/driver-matrix/doc/common/driverMatrix.html

此类查询之一的示例：

从test.log中选择日期，日期，ip，iid，请求，src，tid，txt，其中day ='Saturday'和date ='2017-08-12 00:00:00'和ip ='127.0 0.1'

备注：

• 如果您只需要计算计数，仅此而已，可能会对Google感兴趣，例如https://github.com/brianmhess/cassandra-count

• 如果Cassandra拒绝在没有允许过滤的情况下运行查询，则表示查询效率不高https://stackoverflow.com/a/38350839/2900229