numberrange -> AutoPartitionByLong

根据用户定义的范围与分片节点映射文件,直接定位目标分片。

AutoPartitionByLong工作示意图
  1. 用户在rule.xml中配置范围定义文件路径,文件中定义的各个范围被加载到内存中,形成一个映射表
  2. 在DBLE的运行过程中,用户访问使用这个算法的表时,WHERE子句中的分片索引值会被提取出来,直接查映射表得到分片编号
  • 开发注意点

    • 【分片索引】1,整型数字(可以为负数),取值范围是长整型
    • 【分片索引】2,范围包含其起点和终点,例如,范围1-100包含1和100(即[1, 100])
    • 【分片索引】3,如果范围与范围之间存在重叠(例如1-100和100-200重叠于100),不会引起异常,会命中在范围配置文件mapFile中最先出现的那一个并按其执行
    • 【分片索引】3,不同范围可以映射到同一个分片上,“0-99=0<换行>100-199=0”
    • 【数据分布】1,无法保证均匀
    • 【数据分布】2,总分数量等于范围配置文件mapFile中各范围持有的分片数量之和
  • 运维注意点

    • 【扩容】1,原有范围(含默认节点)的数据太热,需要拆分成多个新的更小的范围来扩展到不同MySQL节点时,需要对局部数据进行迁移
    • 【缩容】1,原有的几个范围的数据太冷,需要合并到同一个MySQL节点来节省资源时,需要对局部数据进行迁移
  • 配置注意点

    • 【配置项】1,在rule.xml中,可配置项为<property name="defaultNode">和<property name="mapFile">
    • 【配置项】2,在rule.xml中配置<property name="defaultNode">标签,非必须配置项,不配置该项的话,用户的分片索引值没落在mapFile定义的范围时,DBLE会报错;若需要配置,必须为非负整数,用户的分片索引值没落在mapFile定义的范围时,DBLE会路由至这个值的MySQL分片
    • 【配置项】3,在rule.xml中配置<property name="mapFile">标签,范围映射文件的路径:若在映射文件在DBLE_HOME/conf或其中,则可以使用相对路径的形式配置,例如,映射文件是DBLE_HOME/conf/map/table_map.txt时,配置值就可以简写为map/table_map.txt;映射文件在DBLE_HOME/conf目录以外时,需要使用绝对路径,但这种做法需要考虑用户权限等问题,因此不建议把映射文件放在DBLE_HOME/conf外。
    • 【配置项】4,编辑mapFile所配置的文件,记录格式为“<范围最小值>-<范围最大值>=<分片编号>”,<范围最小值>和<范围最大值>必须是整型数字,取值范围为Java的长整型范围内,,<分片编号>必须是非负整型数字,记录之间以换行分隔,一行仅能有一条记录,允许以“//”和“#”在行首来注释该行
    • 【配置项】5,读取mapFile时,DBLE不会对其中的范围记录查重或排序,也不会检查范围最小值和范围最大值相互之间谁更大
    • 【配置项】6,mapFile中的记录的先后顺序非常重要,目前的最佳实践是人手确保范围与范围之间没有重叠,而且按照数据查询频率,从高频到低频来顺序填写mapFile
©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

相关阅读更多精彩内容

友情链接更多精彩内容