SAAS软件架构——数据层架构实践

1. 多租户数据架构三种模式:

①独立数据库
②共享数据库、独立 Schema
③共享数据库、共享 Schema、共享数据表
由于本篇属于实践篇,三种模式的优缺点就不多赘述,需要详细了解的小伙伴可以戳(SaaS多租户数据隔离的三种方案)。
本篇选用的是模式②,也是企业级SAAS常规的选择。

2. 为什么选择共享数据库实例,独立Schema

  1. 租户间数据彼此独立,应用程序的实现比较简单。
  2. 充分利用系统资源,可扩展性比较好。
    缺点:备份恢复稍微有点复杂。

3. 使用Spring + Mybatis实现动态数据源切换

应用需要解决的核心问题就是租户识别,独立Schema架构在应用层表现为每一个租户都有一个自己的数据源,因此需要首先解决动态数据源切换问题。

3.1 AbstractRoutingDataSource

该类是Spring提供的动态路由数据源的抽象类,通过继承重写该类的determineCurrentLookupKey方法可以实现数据源的动态切换。
通过分析AbstractRoutingDataSource如下源码可以知道,首先通过determineTargetDataSource来确定当前数据的key(lookupKey),然后从resolvedDataSources中获取数据源对象,所以重写determineCurrentLookupKey返回当前数据源key即可以实现数据源动态切换。

protected DataSource determineTargetDataSource() {
    Assert.notNull(this.resolvedDataSources, "DataSource router not initialized");  Object lookupKey = determineCurrentLookupKey();
    DataSource dataSource = this.resolvedDataSources.get(lookupKey);
    if (dataSource == null && (this.lenientFallback || lookupKey == null)) {
        dataSource = this.resolvedDefaultDataSource;
    }
    if (dataSource == null) {
        throw new IllegalStateException("Cannot determine target DataSource for lookup key [" + lookupKey + "]");
    }
    return dataSource;
}
protected abstract Object determineCurrentLookupKey();
3.2 实现DynamicDataSource
import com.alibaba.druid.pool.DruidDataSource;
import lombok.Data;
import org.springframework.jdbc.datasource.lookup.AbstractRoutingDataSource;
import java.util.HashMap;
import java.util.Map;

public class DynamicDataSource extends AbstractRoutingDataSource {

    //因为AbstractRoutingDataSource的targetDataSources属性没有提供get方法,为了动态维护数据源,需要_targetDataSources
    //然后通过setTargetDataSources方法更新targetDataSources
    //再调用afterPropertiesSet方法将targetDataSources更新到resolvedDataSources中
    private Map<Object, Object> _targetDataSources = new HashMap<Object,Object>();

    private static ThreadLocal<DataSourceEntity> dataSourceHolder = new ThreadLocal<>();

    private static String MYSQL_JDBC_URL = "jdbc:mysql://%s:3306/%s?autoReconnect=true&useUnicode=true&characterEncoding=UTF-8&zeroDateTimeBehavior=convertToNull&allowMultiQueries=true";

    public DynamicDataSource(){
        //默认数据源可以在这里初始化,或者可以在xml配置文件中初始化,不然编译无法通过(因为我们配置的事务管理器要依赖数据源)
        super.setDefaultTargetDataSource(new DruidDataSource());
        super.setTargetDataSources(_targetDataSources);
    }

    @Override
    protected Object determineCurrentLookupKey() {
        DataSourceEntity dataSourceEntity = dataSourceHolder.get();
        String lookupKey = dataSourceEntity.getTenantId();//将tenantId作为key
        if (!_targetDataSources.containsKey(lookupKey)){
            addDataSource(dataSourceEntity);
        }
        return lookupKey;
    }

    /**
     * 新增数据源
     * @param dataSourceEntity
     */
    private void addDataSource(DataSourceEntity dataSourceEntity) {
        DruidDataSource dataSource = new DruidDataSource();

        dataSource.setUrl(String.format(MYSQL_JDBC_URL,dataSourceEntity.getSchemaIp(),dataSourceEntity.getSchemaName()));
        dataSource.setUsername(dataSourceEntity.getUsername());
        dataSource.setPassword(dataSourceEntity.getPassword());
        //......其他参数配置
        _targetDataSources.put(dataSourceEntity.getTalentId(),dataSource);
        //更新targetDataSources
        setTargetDataSources(_targetDataSources);
        //更新resolvedDataSources
        afterPropertiesSet();
    }

    /**
     * 设置当前线程数据源信息
     *  如果在请求中有异步任务,并且需要查询数据库,那么
     * @param dataSourceEntity
     */
    public static void setDataSource(DataSourceEntity dataSourceEntity){
        dataSourceHolder.set(dataSourceEntity);
    }
  
    @Data        //lombok的注解(可以自动生成getter与setter方法)
    public class DataSourceEntity{
        private String tenantId;//租户id
        private String schemaIp;//租户schemaIp
        private String schemaName;//schemaName
        private String username;//用户名
        private String password;//密码
    }
}

XML配置如下:

<bean id="dynamicDataSource" class="com.sws.gss.db.DynamicDataSource" />
<!-- 配置事务管理器 -->
<bean id="transactionManager" class="org.springframework.jdbc.datasource.DataSourceTransactionManager">
    <property name="dataSource" ref="dynamicDataSource" />
</bean>

<!-- mybatis相关配置 -->
<bean id="sqlSessionFactory" class="org.mybatis.spring.SqlSessionFactoryBean">          
        <property name="dataSource" ref="dynamicDataSource" />
    <!-- 自动扫描entity目录, 省掉Configuration.xml里的手工配置 -->
    <property name="mapperLocations" value="classpath:mapping/*.xml" />
    <property name="configLocation" value="classpath:/config.xml" />
</bean>
<bean class="org.mybatis.spring.mapper.MapperScannerConfigurer">
    <property name="basePackage" value="com.sws.gss.mapper" />
    <property name="sqlSessionFactoryBeanName" value="sqlSessionFactory" />
</bean>
<! -------其他相关配置 -------->

4. 新租户的创建

新租户创建有两种方案可以选择:
①预先创建多个租户空间,设置租户空间剩余数预警,租户注册进来直接入驻便可。
②实时创建租户空间,linux下可以通过执行shell脚本来创建,缺点是创建时耗时较长。

5. 表结构同步

每个租户都有自己的表结构,如果想要实现表结构的同步,传统的方式肯定是不可行的,我们可以通过运行sql文件的方式来同步表结构,外层包一个for循环遍历所有租户的数据源信息。可以使用ibatis提供的ScriptRunner来完成对sql文件的执行。核心代码如下:

    public static void runSqlScript(String jdbcUrl,String username,String pass){
        Connection connection = null;
        try{
            connection = DriverManager.getConnection(jdbcUrl,username,pass);
            Class.forName("com.mysql.jdbc.Driver");
            ScriptRunner runner = new ScriptRunner(connection);
            runner.setAutoCommit(false);
            runner.setSendFullScript(true);
            runner.runScript( Resources.getResourceAsReader("upgrade_sql.sql"));
        }catch (Exception ex){
        }finally {
            try {
                if (connection != null){
                    connection.close();
                }
            } catch (SQLException e) {
                e.printStackTrace();
            }
        }
    }
注:jdbcUrl后面需要带allowMultiQueries=true参数,以支持多行执行
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 159,015评论 4 362
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 67,262评论 1 292
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 108,727评论 0 243
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 43,986评论 0 205
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,363评论 3 287
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,610评论 1 219
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,871评论 2 312
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,582评论 0 198
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,297评论 1 242
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,551评论 2 246
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 32,053评论 1 260
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,385评论 2 253
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 33,035评论 3 236
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,079评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,841评论 0 195
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,648评论 2 274
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,550评论 2 270

推荐阅读更多精彩内容