Eureka Server缓存机制

Eureka Server的缓存机制依赖于谷歌的gauva cache , 在Eureka中通过

com.netflix.eureka.registry.ResponseCacheImpl , 这个操作类来实现缓存的机制。

入口

启动eureka server进入到 org.springframework.cloud.netflix.eureka.server.EurekaServerAutoConfiguration

EurekaServerAutoConfiguration#eurekaServerContext

@Bean                                                                           
@ConditionalOnMissingBean                                                       
public EurekaServerContext eurekaServerContext(ServerCodecs serverCodecs,       
        PeerAwareInstanceRegistry registry, PeerEurekaNodes peerEurekaNodes) {  
    return new DefaultEurekaServerContext(this.eurekaServerConfig, serverCodecs,
            registry, peerEurekaNodes, this.applicationInfoManager);            
}                                                                               

中间步骤省略,debug打断点即可

ResponseCacheImpl(EurekaServerConfig serverConfig, ServerCodecs serverCodecs, AbstractInstanceRegistry registry) {                                                 
    this.serverConfig = serverConfig;                                                                                                                              
    this.serverCodecs = serverCodecs;      
    //是否使用只读缓存,默认true                                                                                                                        
    this.shouldUseReadOnlyResponseCache = serverConfig.shouldUseReadOnlyResponseCache();                                                                           
    this.registry = registry;                                                                                                                                      
    //缓存更新的时间间隔,默认为30秒                                                                                                                                
    long responseCacheUpdateIntervalMs = serverConfig.getResponseCacheUpdateIntervalMs();                                                                          
    this.readWriteCacheMap =                                                                                                                                       
            CacheBuilder.newBuilder().initialCapacity(serverConfig.getInitialCapacityOfResponseCache())   
                    //readWriteCacheMap黑夜过期时间为180秒                                                         
                    .expireAfterWrite(serverConfig.getResponseCacheAutoExpirationInSeconds(), TimeUnit.SECONDS)                                                    
                    .removalListener(new RemovalListener<Key, Value>() {                                                                                           
                        @Override                                                                                                                                  
                        public void onRemoval(RemovalNotification<Key, Value> notification) {                                                                      
                            Key removedKey = notification.getKey();                                                                                                
                            if (removedKey.hasRegions()) {                                                                                                         
                                Key cloneWithNoRegions = removedKey.cloneWithoutRegions();                                                                         
                                regionSpecificKeys.remove(cloneWithNoRegions, removedKey);                                                                         
                            }                                                                                                                                      
                        }                                                                                                                                          
                    }) 
                    //缓存加载器,当缓存不存在时,会自动执行load方法,进行缓存加载。同时返回缓存数据      
                    .build(new CacheLoader<Key, Value>() {                                                                                                         
                        @Override                                                                                                                                  
                        public Value load(Key key) throws Exception {                                                                                              
                            if (key.hasRegions()) {                                                                                                                
                                Key cloneWithNoRegions = key.cloneWithoutRegions();                                                                                
                                regionSpecificKeys.put(cloneWithNoRegions, key);                                                                                   
                            }                                                                                                                                      
                            Value value = generatePayload(key);                                                                                                    
                            return value;                                                                                                                          
                        }                                                                                                                                          
                    });                                                                                                                                            
    // 是否使用只读缓存,如果使用,此处则启动一个定时器,用来复制readWriteCacheMap 的数据至readOnlyCacheMap                                                                                                                                                              
    if (shouldUseReadOnlyResponseCache) {                                                                                                                          
        timer.schedule(getCacheUpdateTask(),                                                                                                                       
                new Date(((System.currentTimeMillis() / responseCacheUpdateIntervalMs) * responseCacheUpdateIntervalMs)                                            
                        + responseCacheUpdateIntervalMs),  
                        //默认每30s从readWriteCacheMap更新,Eureka client默认从这里更新服务注册信息,可配置直接从readWriteCacheMap更新                                                                                                        
                responseCacheUpdateIntervalMs);                                                                                                                    
    }                                                                                                                                                              
                                                                                                                                                                   
    try {                                                                                                                                                          
        Monitors.registerObject(this);                                                                                                                             
    } catch (Throwable e) {                                                                                                                                        
        logger.warn("Cannot register the JMX monitor for the InstanceRegistry", e);                                                                                
    }                                                                                                                                                              
}                                                                                                                                                                  

通过上面可以很简单的看出, Eureka Server的缓存是通过一个只读缓存,一个读写缓存来实现的。

readWriteCacheMap: 此处存放的是最终的缓存, 当服务下线,过期,注册,状态变更,都会来清除这个缓存里面的数据。 然后通过CacheLoader进行缓存加载,在进行readWriteCacheMap.get(key)的时候,首先看这个缓存里面有没有该数据,如果没有则通过CacheLoader的load方法去加载,加载成功之后将数据放入缓存,同时返回数据

readOnlyCacheMap: 这是一个JVM的CurrentHashMap只读缓存,这个主要是为了供客户端获取注册信息时使用,其缓存更新,依赖于定时器的更新,通过和readWriteCacheMap 的值做对比,如果数据不一致,则以readWriteCacheMap 的数据为准。

CacheUpdateTask

readOnlyCacheMap 定时器的任务执行类。

private TimerTask getCacheUpdateTask() {                                                                                            
    return new TimerTask() {                                                                                                        
        @Override                                                                                                                   
        public void run() {                                                                                                         
            logger.debug("Updating the client cache from response cache");   
            //循环readOnlyCacheMap里面的KEY                                                       
            for (Key key : readOnlyCacheMap.keySet()) {                                                                             
                if (logger.isDebugEnabled()) {                                                                                      
                    logger.debug("Updating the client cache from response cache for key : {} {} {} {}",                             
                            key.getEntityType(), key.getName(), key.getVersion(), key.getType());                                   
                }                                                                                                                   
                try {     
                    //版本号                                                                                                          
                    CurrentRequestVersion.set(key.getVersion()); 
                    //从readWriteCacheMap获取数据                                                                   
                    Value cacheValue = readWriteCacheMap.get(key);  
                    //当前的只读数据                                                                
                    Value currentCacheValue = readOnlyCacheMap.get(key);                                                            
                    if (cacheValue != currentCacheValue) {   
                        //如果不一致,覆盖只读缓存里面的数据,以readWriteCacheMap为准                                                                       
                        readOnlyCacheMap.put(key, cacheValue);                                                                      
                    }                                                                                                               
                } catch (Throwable th) {                                                                                            
                    logger.error("Error while updating the client cache from response cache for key {}", key.toStringCompact(), th);
                } finally {                                                                                                         
                    CurrentRequestVersion.remove();                                                                                 
                }                                                                                                                   
            }                                                                                                                       
        }                                                                                                                           
    };                                                                                                                              
}                                                                                                                                   

invalidate缓存过期

这个方法,是在服务下线, 过期,注册,状态变更的时候会调用的,从上面可以看到,这里的缓存清除只是会去清除readWriteCacheMap这个缓存, readOnlyCacheMap 只读 缓存并没有更新,也就说当客户端的信息发生变化之后, 只读缓存不是第一时间感知到的。 只读缓存的更新只能依赖那个30秒的定时任务来更新。

public void invalidate(Key... keys) {
    // 循环传入的key一次调用API进行清除
    for (Key key : keys) {
        logger.debug("Invalidating the response cache key : {} {} {} {}, {}",
                key.getEntityType(), key.getName(), key.getVersion(), key.getType(), key.getEurekaAccept());
        // 清除缓存
        readWriteCacheMap.invalidate(key);
        Collection<Key> keysWithRegions = regionSpecificKeys.get(key);
        if (null != keysWithRegions && !keysWithRegions.isEmpty()) {
            for (Key keysWithRegion : keysWithRegions) {
                logger.debug("Invalidating the response cache key : {} {} {} {} {}",
                        key.getEntityType(), key.getName(), key.getVersion(), key.getType(), key.getEurekaAccept());
                readWriteCacheMap.invalidate(keysWithRegion);
            }
        }
    }
}
 @VisibleForTesting                                                      
String get(final Key key, boolean useReadOnlyCache) {                   
    Value payload = getValue(key, useReadOnlyCache);                    
    if (payload == null || payload.getPayload().equals(EMPTY_PAYLOAD)) {
        return null;                                                    
    } else {                                                            
        return payload.getPayload();                                    
    }                                                                   
}     

/**                                                                
 * Get the payload in both compressed and uncompressed form.       
 */                                                                
@VisibleForTesting                                                 
Value getValue(final Key key, boolean useReadOnlyCache) {          
    Value payload = null;                                          
    try {     
        //是否使用只读缓存                                                     
        if (useReadOnlyCache) {                                    
            final Value currentPayload = readOnlyCacheMap.get(key);
            if (currentPayload != null) {                          
                payload = currentPayload;                          
            } else { 
                //只读缓存里面没有,就到读写缓存里面去获取
                //同时将数据,放入只读缓存                                              
                payload = readWriteCacheMap.get(key);              
                readOnlyCacheMap.put(key, payload);                
            }                                                      
        } else {                                                   
            payload = readWriteCacheMap.get(key);                  
        }                                                          
    } catch (Throwable t) {                                        
        logger.error("Cannot get value for key : {}", key, t);     
    }                                                              
    return payload;                                                
}                                                                                                                                    

useReadOnlyCache: shouldUseReadOnlyResponseCache ,可以配置是否使用只读缓存,默认是true

readWriteCacheMap.get(key): 这个使用的是gauva 的缓存机制,如果当前的缓存里面这个key没有,那么

会直接调用CacheLoader.load()方法,从最上面的代码可以看到, load方法,主要是执行了generatePayload()

方法。

/*                                                                                                                  
 * Generate pay load for the given key.                                                                             
 */                                                                                                                 
private Value generatePayload(Key key) {                                                                            
    Stopwatch tracer = null;                                                                                        
    try {                                                                                                           
        String payload;                                                                                             
        switch (key.getEntityType()) {                                                                              
            case Application:                                                                                       
                boolean isRemoteRegionRequested = key.hasRegions();                                                 
                //全量获取                                                                                       
                if (ALL_APPS.equals(key.getName())) { 
                    //是否是分区域获取注册表信息                                                              
                    if (isRemoteRegionRequested) {                                                                  
                        tracer = serializeAllAppsWithRemoteRegionTimer.start();                                     
                        payload = getPayLoad(key, registry.getApplicationsFromMultipleRegions(key.getRegions()));   
                    } else {                                                                                        
                        tracer = serializeAllAppsTimer.start();
                        //调用registry.getApplications() 获取应用信息。同时调用getPayLoad进行编码                                                    
                        payload = getPayLoad(key, registry.getApplications());                                      
                    }   
                // 增量获取                                                                                            
                } else if (ALL_APPS_DELTA.equals(key.getName())) { 
                    //是否是分区域获取注册表信息                                                 
                    if (isRemoteRegionRequested) {                                                                  
                        tracer = serializeDeltaAppsWithRemoteRegionTimer.start();                                   
                        versionDeltaWithRegions.incrementAndGet();                                                  
                        versionDeltaWithRegionsLegacy.incrementAndGet();                                            
                        payload = getPayLoad(key,                                                                   
                                registry.getApplicationDeltasFromMultipleRegions(key.getRegions()));                
                    } else {                                                                                        
                        tracer = serializeDeltaAppsTimer.start();                                                   
                        versionDelta.incrementAndGet();                                                             
                        versionDeltaLegacy.incrementAndGet(); 
                        //调用registry.getApplicationDeltas() 获取增量注册信息                                                      
                        payload = getPayLoad(key, registry.getApplicationDeltas());                                 
                    }                                                                                               
                } else {  
                    // 根据key直接获取注册信息                                                                                          
                    tracer = serializeOneApptimer.start();                                                          
                    payload = getPayLoad(key, registry.getApplication(key.getName()));                              
                }                                                                                                   
                break;                                                                                              
            case VIP:                                                                                               
            case SVIP:                                                                                              
                tracer = serializeViptimer.start();                                                                 
                payload = getPayLoad(key, getApplicationsForVip(key, registry));                                    
                break;                                                                                              
            default:                                                                                                
                logger.error("Unidentified entity type: {} found in the cache key.", key.getEntityType());          
                payload = "";                                                                                       
                break;                                                                                              
        }                                                                                                           
        return new Value(payload);                                                                                  
    } finally {                                                                                                     
        if (tracer != null) {                                                                                       
            tracer.stop();                                                                                          
        }                                                                                                           
    }                                                                                                               
}                                                                                                                   

entityType : 分为三种,Application, VIP, SVIP , 客户端获取注册信息的话,传入的主要是Application类型的,另外两种类型此处不做考虑 。

参考

参考一

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 214,922评论 6 497
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,591评论 3 389
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 160,546评论 0 350
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,467评论 1 288
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,553评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,580评论 1 293
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,588评论 3 414
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,334评论 0 270
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,780评论 1 307
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,092评论 2 330
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,270评论 1 344
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,925评论 5 338
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,573评论 3 322
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,194评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,437评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,154评论 2 366
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,127评论 2 352

推荐阅读更多精彩内容