RepositoryManager源码分析

RepositoryManager类

RepositoryManager类负责对RepositoryProvider进行管理, 主要的功能为从配置文件中
“server/conf/sqoop.properties”读取RepositoryProvider的配置信息,并对RepositoryProvider进行实例化。在配置信息发生变动时,更新RepositoryProvider的信息。
RepositoryManager的初始化源代码如下:

public synchronized void initialize(boolean immutableRepository) {
        MapContext context = SqoopConfiguration.getInstance().getContext();
        Map repoSysProps = context.getNestedProperties("org.apache.sqoop.repository.sysprop.");
        LOG.info("Setting system properties: " + repoSysProps);
        Iterator repoProviderClassName = repoSysProps.entrySet().iterator();

        while(repoProviderClassName.hasNext()) {
            Entry repoProviderClass = (Entry)repoProviderClassName.next();
            System.setProperty((String)repoProviderClass.getKey(), (String)repoProviderClass.getValue());
        }

        String repoProviderClassName1 = context.getString("org.apache.sqoop.repository.provider");
        if(repoProviderClassName1 != null && repoProviderClassName1.trim().length() != 0) {
            if(LOG.isTraceEnabled()) {
                LOG.trace("Repository provider: " + repoProviderClassName1);
            }

            Class repoProviderClass1 = ClassUtils.loadClass(repoProviderClassName1);
            if(repoProviderClass1 == null) {
                throw new SqoopException(RepositoryError.REPO_0001, repoProviderClassName1);
            } else {
                try {
                    this.provider = (RepositoryProvider)repoProviderClass1.newInstance();
                } catch (Exception var7) {
                    throw new SqoopException(RepositoryError.REPO_0001, repoProviderClassName1, var7);
                }

                this.provider.initialize(context);
                if(!immutableRepository) {
                    LOG.info("Creating or updating respository at bootup");
                    this.provider.getRepository().createOrUpgradeRepository();
                }

                if(!this.provider.getRepository().isRepositorySuitableForUse()) {
                    throw new SqoopException(RepositoryError.REPO_0002);
                } else {
                    SqoopConfiguration.getInstance().getProvider().registerListener(new CoreConfigurationListener(this));
                    LOG.info("Repository Manager initialized: OK");
                }
            }
        } else {
            throw new SqoopException(RepositoryError.REPO_0001, "org.apache.sqoop.repository.provider");
        }
    }

RepositoryProvider类

RepositoryProvider类用于获取配置信息(上下文环境), repository信息。
系统中的一个实现是:JdbcRepositoryProvider类。
JdbcRepositoryProvider类包含了配置信息(JdbcRepositoryContext),Repository信息(JdbcRepository ),以及用于处理事物的类(JdbcRepositoryHandler)。
其中主要包含了初始化handler的方法:

private void initializeRepositoryHandler() {
        String jdbcHandlerClassName = this.repoContext.getHandlerClassName();
        Class handlerClass = ClassUtils.loadClass(jdbcHandlerClassName);
        if(handlerClass == null) {
            throw new SqoopException(RepositoryError.JDBCREPO_0001, jdbcHandlerClassName);
        } else {
            try {
                this.handler = (JdbcRepositoryHandler)handlerClass.newInstance();
            } catch (Exception var9) {
                throw new SqoopException(RepositoryError.JDBCREPO_0001, jdbcHandlerClassName, var9);
            }

            String connectUrl = this.repoContext.getConnectionUrl();
            if(connectUrl != null && connectUrl.trim().length() != 0) {
                String jdbcDriverClassName = this.repoContext.getDriverClass();
                if(jdbcDriverClassName != null && jdbcDriverClassName.trim().length() != 0) {
                    Class driverClass = ClassUtils.loadClass(jdbcDriverClassName);
                    if(driverClass == null) {
                        throw new SqoopException(RepositoryError.JDBCREPO_0003, jdbcDriverClassName);
                    } else {
                        try {
                            this.driver = (Driver)driverClass.newInstance();
                        } catch (Exception var8) {
                            throw new SqoopException(RepositoryError.JDBCREPO_0003, jdbcDriverClassName, var8);
                        }

                        Properties jdbcProps = this.repoContext.getConnectionProperties();
                        DriverManagerConnectionFactory connFactory = new DriverManagerConnectionFactory(connectUrl, jdbcProps);
                        this.connectionPool = new GenericObjectPool();
                        this.connectionPool.setMaxActive(this.repoContext.getMaximumConnections());
                        this.statementPool = new GenericKeyedObjectPoolFactory((KeyedPoolableObjectFactory)null);
                        new PoolableConnectionFactory(connFactory, this.connectionPool, this.statementPool, this.handler.validationQuery(), false, false, this.repoContext.getTransactionIsolation().getCode());
                        this.dataSource = new PoolingDataSource(this.connectionPool);
                        this.txFactory = new JdbcRepositoryTransactionFactory(this.dataSource);
                        this.repoContext.initialize(this.dataSource, this.txFactory);
                        this.handler.initialize(this.repoContext);
                        this.repository = new JdbcRepository(this.handler, this.repoContext);
                        LOG.info("JdbcRepositoryProvider initialized");
                    }
                } else {
                    throw new SqoopException(RepositoryError.JDBCREPO_0003);
                }
            } else {
                throw new SqoopException(RepositoryError.JDBCREPO_0002);
            }
        }
    }

JdbcRepository类

JdbcRepository类代表了可以使用jdbc方式进行连接的reposity。其包含了两个对象

  private final JdbcRepositoryHandler handler;
    private final JdbcRepositoryContext repoContext;

其中JdbcRepositoryContext代表相关的配置信息,JdbcRepositoryHandler用于处理事务(这里采用了代理的设计模式)。

JdbcRepositoryContext类

JdbcRepositoryContext类从配置文件中(server/conf/sqoopproperties)读取配置信息。包括driver,userName, passwaord等。

JdbcRepositoryHandler抽象类

JdbcRepositoryHandler是真正实现各种事物处理的类,事物包括查询connector, link ,创建connector, link, 等。
系统中实现的JdbcRepositoryHandler类的有CommonRepositoryHandler类。
CommonRepositoryHandler利用sql查询语句从数据库中查询结果,并返回给用户。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

相关阅读更多精彩内容

  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 136,365评论 19 139
  • Spring Boot 参考指南 介绍 转载自:https://www.gitbook.com/book/qbgb...
    毛宇鹏阅读 47,243评论 6 342
  • 从三月份找实习到现在,面了一些公司,挂了不少,但最终还是拿到小米、百度、阿里、京东、新浪、CVTE、乐视家的研发岗...
    时芥蓝阅读 42,663评论 11 349
  • 国家电网公司企业标准(Q/GDW)- 面向对象的用电信息数据交换协议 - 报批稿:20170802 前言: 排版 ...
    庭说阅读 12,159评论 6 13
  • 虽然所爱隔山海,山海不可平。 但它还有下一句:海有舟可渡,山有路可行,此爱翻山海,山海俱可平。
    木头啊丶阅读 105评论 0 0

友情链接更多精彩内容