一致性為ONE的讀取查詢期間的Cassandra超時

Question

我對cassandra db有問題，希望有人可以幫助我。 我有一個表“ log”。 在日志表中，我插入了大約10000行。 一切正常。 我可以做一個

select * from

select count(*) from

一旦我用TTL 50插入100000行，就會收到錯誤消息

select count(*) from

版本：cassandra 2.1.8，2個節點

一致性為ONE的讀取查詢期間的Cassandra超時（需要1個響應，但僅響應0個副本）

有人知道我在做什么錯嗎？

CREATE TABLE test.log (
    day text,
    date timestamp,
    ip text,
    iid int,
    request text,
    src text,
    tid int,
    txt text,
    PRIMARY KEY (day, date, ip)
) WITH read_repair_chance = 0.0
   AND dclocal_read_repair_chance = 0.1
   AND gc_grace_seconds = 864000
   AND bloom_filter_fp_chance = 0.01
   AND caching = { 'keys' : 'ALL', 'rows_per_partition' : 'NONE' }
   AND comment = ''
   AND compaction = { 'class' : 'org.apache.cassandra.db.compaction.SizeTieredCompactionStrategy' }
   AND compression = { 'sstable_compression' : 'org.apache.cassandra.io.compress.LZ4Compressor' }
   AND default_time_to_live = 0
   AND speculative_retry = '99.0PERCENTILE'
   AND min_index_interval = 128
   AND max_index_interval = 2048;

Answer 1

該錯誤消息表明READ操作存在問題。 最有可能是讀取超時。 您可能需要按照此SO回答中所述的更長的讀取超時時間來更新Cassandra.yaml。

200秒的示例：

read_request_timeout_in_ms: 200000

如果無法進行更新，則可能需要調整Cassandra的JVM設置。 有關更多信息，請參見DataStax的“ 調整Java操作 ”。

Answer 2

count（）是一個非常昂貴的操作，想象一下Cassandra需要掃描所有節點上的所有行，只是為了給您計數。 如果行較少，但行數較大，則應使用另一種方法來避免超時。

• 首先，我們必須逐行檢索以計算數量並忘記了count（*）
• 我們應該進行幾個（數十個，數百個）查詢，並按分區和聚類鍵進行過濾，並對每個查詢檢索到的行的總數進行匯總。
• 這是一個很好的解釋，什么是集群鍵和分區鍵在您的情況下， day是分區鍵，復合鍵由兩列組成： date和ip 。
• 使用cqlsh命令行客戶端最不可能做到這一點 ，因此您應該自己編寫一個腳本。 流行編程語言的官方驅動程序： http : //docs.datastax.com/en/developer/driver-matrix/doc/common/driverMatrix.html

此類查詢之一的示例：

從test.log中選擇日期，日期，ip，iid，請求，src，tid，txt，其中day ='Saturday'和date ='2017-08-12 00:00:00'和ip ='127.0 0.1'

備注：

• 如果您只需要計算計數，僅此而已，可能會對Google感興趣，例如https://github.com/brianmhess/cassandra-count

• 如果Cassandra拒絕在沒有允許過濾的情況下運行查詢，則表示查詢效率不高https://stackoverflow.com/a/38350839/2900229