Saas数据库租户隔离动态数据源写法

一、前言

Saas租户隔离常用的有两种方法:

  1. 表字段增加tenant,查询时通过where语句进行隔离
  2. 直接数据库级别进行隔离

第一种方案有很多缺点:sql语句复杂,无法进行定制化开发,针对某个租户进行数据迁移很麻烦;
而第二个方案唯一的缺点就是每个租户需要构建一个数据库,成本可能较高。

本文介绍了一种基于springboot的数据库隔离saas方案,代码简单逻辑清晰,可供大家参考。

二、代码

1. 需要一个ThreadLocal存储tenant id

注意这里要用InheritableThreadLocal,该类可以在子线程中继承属性,否则针对@Async等异步操作会出现找不到tenant

@UtilityClass
public class TenantHolder {

    /**
     * 这里要用InheritableThreadLocal
     * 在异步场景中例如 @Async @EventListener等新建的线程中使用
     */
    private static final InheritableThreadLocal<String> TENANT = new InheritableThreadLocal<>();

    public static void setTenant(String tenant) {
        TENANT.set(tenant);
    }

    public static void remove() {
        TENANT.remove();
    }

    public static String getTenant() {
        return TENANT.get();
    }
}

2.在过滤器中写入tenant id到ThreadLocal

@WebFilter(urlPatterns = {"/*"}, filterName = "TenantFilter")
public class TenantFilter implements Filter {

    @Override
    public void doFilter(ServletRequest request, ServletResponse response, FilterChain chain)
            throws IOException, ServletException {

        HttpServletRequest httpRequest = (HttpServletRequest) request;
        String tenantId = httpRequest.getHeader("tenant_id");

        TenantHolder.setTenant(tenantId);

        try {
            chain.doFilter(request, response);
        } finally {
            TenantHolder.remove();
        }
    }
}

3. 需要有一个动态数据源:

这里是核心,获取connection的时候,动态获取datasource,datasource如果不存在则从数据库中查询出租户对应的数据库信息从而实例化一个新的放入缓存中。

@EqualsAndHashCode(callSuper = true)
@Data
@Slf4j
public class DynamicDataSource extends AbstractDataSource {

    private final Map<String, DataSource> dataSourceMap = new HashMap<>();

    private final DataSource defaultDataSource;
    private final JdbcTemplate jdbcTemplate;

    public DynamicDataSource(DataSource defaultDataSource) {
        this.defaultDataSource = defaultDataSource;
        this.jdbcTemplate = new JdbcTemplate(defaultDataSource);
    }

    @Override
    public Connection getConnection() throws SQLException {
        return getDataSource().getConnection();
    }

    @Override
    public Connection getConnection(String username, String password) throws SQLException {
        return getDataSource().getConnection(username, password);
    }


    /**
     * 根据租户id获取数据源
     * @return  数据源
     */
    private DataSource getDataSource() {
        String tenantId = TenantHolder.getTenant();

        if (tenantId == null) {
            return defaultDataSource;
        }

        //从缓存获取
        DataSource dataSource = dataSourceMap.get(tenantId);
        if (dataSource != null) {
            return dataSource;
        }

        //如果不存在,则根据租户信息实例化一个DataSource
        synchronized (dataSourceMap) {
            dataSource = createDataSource(tenantId);
            dataSourceMap.put(tenantId, dataSource);
            return dataSource;
        }
    }

    /**
     * 根据租户创建一个data source
     * @param tenantId 租户id
     * @return          datasource
     */
    private DataSource createDataSource(String tenantId) {

        TenantDataSource config = getDataSourceConfig(tenantId);

        HikariDataSource dataSource = new HikariDataSource();
        dataSource.setJdbcUrl(config.getUrl());
        dataSource.setUsername(config.getUsername());
        dataSource.setPassword(config.getPassword());
        dataSource.setDriverClassName(config.getDriver());
        dataSource.setMaximumPoolSize(20);
        dataSource.setMinimumIdle(5);
        dataSource.setMaxLifetime(300000);

        return dataSource;
    }

    /**
     * 查询数据库,获取租户的数据源配置
     * 注意,不能通过dao层查询,会导致循环依赖
     *
     * @param tenantId 租户id
     * @return          数据源配置
     */
    private TenantDataSource getDataSourceConfig(String tenantId) {
        String sql = "select * from tb_tenant_data_source where tenant_id = ?";

        BeanPropertyRowMapper<TenantDataSource> mapper = new BeanPropertyRowMapper<>(TenantDataSource.class);

        List<TenantDataSource> list = jdbcTemplate.query(sql, mapper, tenantId);

        Assert.notEmpty(list, "cannot find data source config for tenant: " + tenantId);
        return list.get(0);
    }
}

4.对于线程池注意事项

线程池中的线程默认不会清理ThreadLocal,因此需要我们自定义一个线程池,并设置TaskDecorator进行手动清理ThreadLocal

@Configuration
@EnableAsync
public class AsyncConfig {

    @Bean
    public TaskExecutor taskExecutor() {
        ThreadPoolTaskExecutor executor = new ThreadPoolTaskExecutor();
        // 设置核心线程数
        executor.setCorePoolSize(10);
        // 设置最大线程数
        executor.setMaxPoolSize(40);
        // 设置队列容量
        executor.setQueueCapacity(40);
        // 设置线程活跃时间(秒)
        executor.setKeepAliveSeconds(60);
        // 设置默认线程名称
        executor.setThreadNamePrefix("async-");
        // 设置拒绝策略
        executor.setRejectedExecutionHandler(new ThreadPoolExecutor.CallerRunsPolicy());
        // 等待所有任务结束后再关闭线程池
        executor.setWaitForTasksToCompleteOnShutdown(true);
        //设置任务装饰器,用于清理thread local
        executor.setTaskDecorator(ThreadLocalCleanTask::new);
        return executor;
    }

    /**
     * 清理ThreadLocal
     * 如果有其他的ThreadLocal都放到finally中
     */
    @Data
    public static class ThreadLocalCleanTask implements Runnable {

        private final Runnable runnable;

        @Override
        public void run() {
            try {
                runnable.run();
            } finally {
                TenantHolder.remove();
            }
        }
    }

}

5.针对Feign或者rest调用注意事项

如果微服务之间有rest调用,要记得在header中设置tenant id,可以通过feign拦截器或者rest拦截器实现

三、其他注意事项

MQ和redis、es等是否需要租户隔离根据业务逻辑来自行判断;
定时任务尤其值得注意:因为定时任务执行时没有tenantId,此时可以通过AOP对定时任务方法进行处理,将原本一个方法改为遍历租户循环执行,伪代码如下:

List<String> list = getTenantList();
for (tenant : list) {
    TenantHolder.set(tenant)
    executeTask();
}

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,445评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,889评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,047评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,760评论 1 276
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,745评论 5 367
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,638评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,011评论 3 398
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,669评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,923评论 1 299
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,655评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,740评论 1 330
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,406评论 4 320
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,995评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,961评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,197评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,023评论 2 350
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,483评论 2 342