冷热数据分片
区分冷热数据的标准可以有很多种,在该规则里是按分片索引(日期类型或能转换成日期的文本)距离操作当天的天数来区分冷热。
其判断冷热的逻辑如下:
- 分片索引晚于操作当天
分到热区
- 分片索引早于操作当天,但是早不过冷热区分天数天
分到热区
- 分片索引早于操作当天,而且早了冷热区分天数天
从今天往前数冷热区分天数天,然后求出这天与分片索引的毫秒级差值,再按用户给定的模数取模分片到冷区们
但是该规则只管路由/分片,热区数据“冷却”到冷区的数据迁移工作需要用户/应用自行完成(日切工作),不然随着时间流逝,数据甚至没法找到——这是该规则的一个非常大的使用限制。
网友评论