Cassandra控制SSTable大小

Question

Cassandra控制SSTable大小

cassandracassandra-2.0

9

有没有办法控制SSTable的最大大小，例如100 MB，这样当CF实际数据超过100MB时，Cassandra会创建下一个SSTable？

- RRM

1个回答

网页内容由stack overflow 提供, 点击上面的

可以查看英文原文，
原文链接

- Andy Tolbert · Accepted Answer

很不幸，答案并不简单，你的SSTable大小会受到压缩策略的影响，并且没有直接的方法来控制最大SSTable大小。

当memtables被刷新到磁盘作为SSTables时，SSTables最初被创建。这些表的大小最初取决于您的memtable设置和堆的大小（memtable_total_space_in_mb是一个重要因素）。通常这些SSTables非常小。SSTables会合并在一起，作为一个称为compaction的过程的一部分。

如果您使用Size-Tiered Compaction Strategy，则有机会拥有非常大的SSTables。当具有至少min_threshold（默认为4）个相同大小的sstables时，STCS将在次要压实中将它们组合成一个文件，过期数据并合并键。这有可能在一段时间后创建非常大的SSTables。

使用层级压缩策略，有一个sstable_size_in_mb选项，用于控制SSTable的目标大小。一般来说，除非您有一个包含大量数据的分区键（“宽行”），否则SSTables的大小将小于或等于此大小。

我还没有对日期分层压缩策略进行过多的实验，但它与STCS类似，它合并相同大小的文件，但它按时间顺序保持数据，并具有配置以停止压缩旧数据（max_sstable_age_days），这可能会很有趣。

关键是找到最适合您的数据的压缩策略，然后根据最适合您的数据模型/环境调整相关属性。

您可以在这里阅读有关压缩的配置设置，并阅读这个指南以帮助了解STCS或LCS是否适合您。