范文健康探索娱乐情感热点
热点动态
科技财经
情感日志
励志美文
娱乐时尚
游戏搞笑
探索旅游
历史星座
健康养生
美丽育儿
范文作文
教案论文

学习一波Netty封装的FastThreadLocal

  1 FastThreadLocal的引入背景和原理简介
  既然jdk已经有ThreadLocal,为何netty还要自己造个FastThreadLocal?FastThreadLocal快在哪里?
  这需要从jdk ThreadLocal的本身说起。如下图:
  在java线程中,每个线程都有一个ThreadLocalMap实例变量(如果不使用ThreadLocal,不会创建这个Map,一个线程第一次访问某个ThreadLocal变量时,才会创建)。
  该Map是使用线性探测的方式解决hash冲突的问题,如果没有找到空闲的slot,就不断往后尝试,直到找到一个空闲的位置,插入entry,这种方式在经常遇到hash冲突时,影响效率。
  FastThreadLocal(下文简称ftl)直接使用数组避免了hash冲突的发生,具体做法是:每一个FastThreadLocal实例创建时,分配一个下标index;分配index使用AtomicInteger实现,每个FastThreadLocal都能获取到一个不重复的下标。
  当调用 ftl.get() 方法获取值时,直接从数组获取返回,如return array[index] ,如下图:
  2 实现源码分析
  根据上文图示可知,ftl的实现,涉及到InternalThreadLocalMap、FastThreadLocalThread和FastThreadLocal几个类,自底向上,我们先从InternalThreadLocalMap开始分析。
  InternalThreadLocalMap类的继承关系图如下:
  2.1 UnpaddedInternalThreadLocalMap的主要属性static final ThreadLocal slowThreadLocalMap = new ThreadLocal(); static final AtomicInteger nextIndex = new AtomicInteger(); Object[] indexedVariables;
  数组indexedVariables就是用来存储ftl的value的,使用下标的方式直接访问。nextIndex在ftl实例创建时用来给每个ftl实例分配一个下标,slowThreadLocalMap在线程不是ftlt时使用到。  2.2 InternalThreadLocalMap分析
  InternalThreadLocalMap的主要属性:  // 用于标识数组的槽位还未使用 public static final Object UNSET = new Object(); /**  * 用于标识ftl变量是否注册了cleaner  * BitSet简要原理:  * BitSet默认底层数据结构是一个long[]数组,开始时长度为1,即只有long[0],而一个long有64bit。  * 当BitSet.set(1)的时候,表示将long[0]的第二位设置为true,即0000 0000 ... 0010(64bit),则long[0]==2  * 当BitSet.get(1)的时候,第二位为1,则表示true;如果是0,则表示false  * 当BitSet.set(64)的时候,表示设置第65位,此时long[0]已经不够用了,扩容处long[1]来,进行存储  *  * 存储类似 {index:boolean} 键值对,用于防止一个FastThreadLocal多次启动清理线程  * 将index位置的bit设为true,表示该InternalThreadLocalMap中对该FastThreadLocal已经启动了清理线程  */ private BitSet cleanerFlags;  private InternalThreadLocalMap() {         super(newIndexedVariableTable()); }  private static Object[] newIndexedVariableTable() {         Object[] array = new Object[32];         Arrays.fill(array, UNSET);         return array; }
  比较简单, newIndexedVariableTable() 方法创建长度为32的数组,然后初始化为UNSET,然后传给父类。之后ftl的值就保存到这个数组里面。
  注意,这里保存的直接是变量值,不是entry,这是和jdk ThreadLocal不同的。InternalThreadLocalMap就先分析到这,其他方法在后面分析ftl再具体说。   2.3 ftlt的实现分析
  要发挥ftl的性能优势,必须和ftlt结合使用,否则就会退化到jdk的ThreadLocal。ftlt比较简单,关键代码如下:  public class FastThreadLocalThread extends Thread {   // This will be set to true if we have a chance to wrap the Runnable.   private final boolean cleanupFastThreadLocals;      private InternalThreadLocalMap threadLocalMap;      public final InternalThreadLocalMap threadLocalMap() {         return threadLocalMap;   }   public final void setThreadLocalMap(InternalThreadLocalMap threadLocalMap) {         this.threadLocalMap = threadLocalMap;   } }
  ftlt的诀窍就在threadLocalMap属性,它继承java Thread,然后聚合了自己的InternalThreadLocalMap。后面访问ftl变量,对于ftlt线程,都直接从InternalThreadLocalMap获取变量值。  2.4 ftl实现分析
  ftl实现分析基于netty-4.1.34版本,特别地声明了版本,是因为在清除的地方,该版本的源码已经注释掉了ObjectCleaner的调用,和之前的版本有所不同。  2.4.1 ftl的属性和实例化private final int index;  public FastThreadLocal() {     index = InternalThreadLocalMap.nextVariableIndex(); }
  非常简单,就是给属性index赋值,赋值的静态方法在InternalThreadLocalMap:   public static int nextVariableIndex() {         int index = nextIndex.getAndIncrement();         if (index < 0) {             nextIndex.decrementAndGet();             throw new IllegalStateException("too many thread-local indexed variables");         }         return index;   }
  可见,每个ftl实例以步长为1的递增序列,获取index值,这保证了InternalThreadLocalMap中数组的长度不会突增。  2.4.2 get()方法实现分析public final V get() {     InternalThreadLocalMap threadLocalMap = InternalThreadLocalMap.get(); // 1     Object v = threadLocalMap.indexedVariable(index); // 2     if (v != InternalThreadLocalMap.UNSET) {         return (V) v;     }      V value = initialize(threadLocalMap); // 3     registerCleaner(threadLocalMap);  // 4     return value; }
  1.先来看看 InternalThreadLocalMap.get() 方法如何获取threadLocalMap: =======================InternalThreadLocalMap=======================     public static InternalThreadLocalMap get() {         Thread thread = Thread.currentThread();         if (thread instanceof FastThreadLocalThread) {             return fastGet((FastThreadLocalThread) thread);         } else {             return slowGet();         }     }        private static InternalThreadLocalMap fastGet(FastThreadLocalThread thread) {         InternalThreadLocalMap threadLocalMap = thread.threadLocalMap();         if (threadLocalMap == null) {             thread.setThreadLocalMap(threadLocalMap = new InternalThreadLocalMap());         }         return threadLocalMap;     }
  因为结合FastThreadLocalThread使用才能发挥FastThreadLocal的性能优势,所以主要看fastGet方法。该方法直接从ftlt线程获取threadLocalMap,还没有则创建一个InternalThreadLocalMap实例并设置进去,然后返回。
  2. threadLocalMap.indexedVariable(index) 就简单了,直接从数组获取值,然后返回:   public Object indexedVariable(int index) {         Object[] lookup = indexedVariables;         return index < lookup.length? lookup[index] : UNSET;     }
  3.如果获取到的值不是UNSET,那么是个有效的值,直接返回。如果是UNSET,则初始化。
  initialize(threadLocalMap) 方法:   private V initialize(InternalThreadLocalMap threadLocalMap) {         V v = null;         try {             v = initialValue();         } catch (Exception e) {             PlatformDependent.throwException(e);         }          threadLocalMap.setIndexedVariable(index, v); // 3-1         addToVariablesToRemove(threadLocalMap, this); // 3-2         return v;     }
  3.1.获取ftl的初始值,然后保存到ftl里的数组,如果数组长度不够则扩充数组长度,然后保存,不展开。
  3.2. addToVariablesToRemove(threadLocalMap, this) 的实现,是将ftl实例保存在threadLocalMap内部数组第0个元素的Set集合中。
  此处不贴代码,用图示如下:
  4. registerCleaner(threadLocalMap) 的实现,netty-4.1.34版本中的源码: private void registerCleaner(final InternalThreadLocalMap threadLocalMap) {         Thread current = Thread.currentThread();         if (FastThreadLocalThread.willCleanupFastThreadLocals(current) || threadLocalMap.isCleanerFlagSet(index)) {             return;         }          threadLocalMap.setCleanerFlag(index);          // TODO: We need to find a better way to handle this.         /*         // We will need to ensure we will trigger remove(InternalThreadLocalMap) so everything will be released         // and FastThreadLocal.onRemoval(...) will be called.         ObjectCleaner.register(current, new Runnable() {             @Override             public void run() {                 remove(threadLocalMap);                  // It"s fine to not call InternalThreadLocalMap.remove() here as this will only be triggered once                 // the Thread is collected by GC. In this case the ThreadLocal will be gone away already.             }         });         */ }
  由于ObjectCleaner.register这段代码在该版本已经注释掉,而余下逻辑比较简单,因此不再做分析。  2.5 普通线程使用ftl的性能退化
  随着 get() 方法分析完毕,set(value) 方法原理也呼之欲出,限于篇幅,不再单独分析。
  前文说过,ftl要结合ftlt才能最大地发挥其性能,如果是其他的普通线程,就会退化到jdk的ThreadLocal的情况,因为普通线程没有包含InternalThreadLocalMap这样的数据结构,接下来我们看如何退化。学习资料:Java进阶视频资源
  从InternalThreadLocalMap的 get() 方法看起: =======================InternalThreadLocalMap=======================     public static InternalThreadLocalMap get() {         Thread thread = Thread.currentThread();         if (thread instanceof FastThreadLocalThread) {             return fastGet((FastThreadLocalThread) thread);         } else {             return slowGet();         }     }    private static InternalThreadLocalMap slowGet() {        // 父类的类型为jdk ThreadLocald的静态属性,从该threadLocal获取InternalThreadLocalMap         ThreadLocal slowThreadLocalMap = UnpaddedInternalThreadLocalMap.slowThreadLocalMap;         InternalThreadLocalMap ret = slowThreadLocalMap.get();         if (ret == null) {             ret = new InternalThreadLocalMap();             slowThreadLocalMap.set(ret);         }         return ret;     }
  从ftl看,退化操作的整个流程是:从一个jdk的ThreadLocal变量中获取InternalThreadLocalMap,然后再从InternalThreadLocalMap获取指定数组下标的值,对象关系示意图:
  3 ftl的资源回收机制
  在netty中对于ftl提供了三种回收机制:
  自动:  使用ftlt执行一个被FastThreadLocalRunnable wrap的Runnable任务,在任务执行完毕后会自动进行ftl的清理。
  手动:  ftl和InternalThreadLocalMap都提供了remove方法,在合适的时候用户可以(有的时候也是必须,例如普通线程的线程池使用ftl)手动进行调用,进行显示删除。
  自动:  为当前线程的每一个ftl注册一个Cleaner,当线程对象不强可达的时候,该Cleaner线程会将当前线程的当前ftl进行回收。(netty推荐如果可以用其他两种方式,就不要再用这种方式,因为需要另起线程,耗费资源,而且多线程就会造成一些资源竞争,在netty-4.1.34版本中,已经注释掉了调用ObjectCleaner的代码。)  4 ftl在netty中的使用
  ftl在netty中最重要的使用,就是分配ByteBuf。基本做法是:每个线程都分配一块内存(PoolArena),当需要分配ByteBuf时,线程先从自己持有的PoolArena分配,如果自己无法分配,再采用全局分配。
  但是由于内存资源有限,所以还是会有多个线程持有同一块PoolArena的情况。不过这种方式已经最大限度地减轻了多线程的资源竞争,提高程序效率。
  具体的代码在 PoolByteBufAllocator的内部类PoolThreadLocalCache中:    final class PoolThreadLocalCache extends FastThreadLocal {      @Override         protected synchronized PoolThreadCache initialValue() {             final PoolArena heapArena = leastUsedArena(heapArenas);             final PoolArena directArena = leastUsedArena(directArenas);              Thread current = Thread.currentThread();             if (useCacheForAllThreads || current instanceof FastThreadLocalThread) {               // PoolThreadCache即为各个线程持有的内存块的封装                 return new PoolThreadCache(                         heapArena, directArena, tinyCacheSize, smallCacheSize, normalCacheSize,                         DEFAULT_MAX_CACHED_BUFFER_CAPACITY, DEFAULT_CACHE_TRIM_INTERVAL);             }             // No caching so just use 0 as sizes.             return new PoolThreadCache(heapArena, directArena, 0, 0, 0, 0, 0);         }     }
  参考资料  Netty源码分析3 - FastThreadLocal 框架的设计  Netty进阶:自顶向下解析FastThreadLocal  来源:blog.csdn.net/mycs2012/article/details/90898128

北慕撞车巅峰赛第一,检验出真实水平!赛后北慕劝阻粉丝别带节奏距离S25赛季结束还有不到三天的时间,不少主播都在为巅峰大榜做最后冲刺的准备,尤其是北慕,本身就非常喜欢在赛季末冲榜,如今为了能拿到榜一更是卷得不亦乐乎。近日北慕撞车巅峰赛排名第一丝西娜邪恶阵营(正确使用方法)英雄基本信息英雄名称丝西娜英文名称Stheno英雄阵营邪恶英雄类型攻击初始星级5最高等级33016星英雄综合推荐深渊魔窟推荐0遗迹魔窟推荐0升十六星推荐50远征之路推荐75游戏打怪为什么比赛里常见的上单男枪,到了排位就经常变成了中路?前段时间刚刚结束的世界赛,让我们看到了大火的上单男枪,尤其是在圣枪哥等一众优秀的选手里,表现非常突出。即使是决胜局Khan的男枪,到了中后期依然有不错的表现。然而为什么在比赛里面这斗鱼又要闹出合约纠纷?拒绝续约张大仙近几年许许多多有才艺的人都跑去做主播了,而斗鱼就是其中一个比较出名的直播平台,这个平台捧红了很多主播,诸如冯提莫,从出道开始就在斗鱼做主播了,通过平台的一系列运作粉丝数已经高达数千RNG邀请锅老师回归却被拒绝,理由让粉丝赞同,你觉得他还会回来吗?谢谢邀请锅老师是肯定会回来的,他之前直播的时候也说了会在夏季赛回归,所以大家也不用担心。最近锅老师直播期间都会给观众们复盘RNG的比赛,他表示RNG俱乐部也让其出山,解说并且复盘。三国志9隋唐群英杨李武三方争雄,安禄山和刘知远后悔出生自古就有关公战秦琼孰强孰弱的口水话题,因为大家实在是太喜欢三国和隋唐这两个英雄辈出的时代了。三国志9逐鹿九州MOD有诸多的趣味假想章节,自然也少不了隋唐群英,对于钟爱这一代游戏的玩众多传世手游,该选择哪款传奇世界的游戏也是一代的回忆,比起热血传奇他没有那么多的受众,但还是有很多忠实的玩家,传世的手游也像雨后春笋一样出现,现在传奇世界的手游有很多种类,各种广告也看花看眼那么玩家们应该VRroguelite游戏CompoundMetaQuest2版预计今年推出了2022年4月17日449hr0hr据RoadtoVR报道,由独立开发者BevanNotDeadMcKechnie开发的VRroguelite游戏Compound早在2018年便以这个80后靠王者荣耀赚到93亿身家2015年8月,知乎上出现了一个热门问题手机游戏做电竞项目可行吗?当时电竞在国内已经萌芽发展15年,不过相关赛事以电脑上运行的端游为主,手游操作与端游存在差异,竞技观赏性也远不如端经典游戏拳皇善用大腿夹攻的女性角色,伤害和侮辱性一样强在你心目中,最野蛮的女性投技是什么呢?我想豪血寺一族安吉拉的臀部攻击应该可以上榜吧!在抓住对手之后,直接跳到天上去,然后一屁股坐下来,产生极高的伤害。最最关键的是,这一招在空中也是6位英雄调整,金蝉史诗级加强,扁鹊治疗前置,公孙离被削前言相信大家都知道体验服每隔一段时间就会迎来一波英雄调整,目的就是为了尽量防止英雄出现两极分化的情况。并且如今调整频率也很高,基本都是一周就会有一次。而此次体验服又迎来了一波改动,
IG不敌TES!369重炮回应质疑,前队长炮轰教练BP太差作为LPL春季赛的焦点之战,IG和TES两支战队的比赛吸引了许多玩家的目光。大家都知道,由于JKL离开IG转会到了TES,因此不少人也称这两支队伍的比赛为忍界大战。在前两场比赛结束宁王暗示IG战术不行?解说多次谈起Shy哥猴子压刀却是劣势作为LPL春季赛的一场焦点大战,IG和TES的比赛吸引了许多玩家的目光。由于JKL从IG转会到了TES,因此这两支队伍也被玩家们打上了许多标签。从往常的战绩来看,这两支队伍之间的比Doinb再次祸从口出?谈论Faker被指阴阳怪气,粉丝懵了在LPL联赛中,Doinb在做直播方面算是联盟第一人。和其他选手不同,Doinb的直播不仅操作拉满,节目效果还十分爆炸。同时幽默风趣的直播风格更是吸引了许多玩家的目光,让DoinbShy哥心态崩了?时隔21日再打排位,看到战绩IG教练被爆破在IG和SN的比赛中,Theshy为了团队久违地选出了塞恩打上单。大家都知道,在S8赛季IG夺冠的那个赛季,Shy哥就使用塞恩打出了许多名场面。因此当大家看到IG上路再次出现塞恩后IG忍界大战不敌TES,宁王成最大看点?玩家建议常驻解说席作为大家备受期待的忍界大战,IG和TES的这场常规赛吸引了许多玩家的目光。虽然这不是他们第一次交手,但许多玩家依旧好奇谁才是最后的胜利者。这两支队伍也没有让大家失望,双方直接打满了IG零封BLG!卢卡斯获粉丝点赞,笑笑对面这双C不如LDL在面对SN的比赛中,IG战队遭到全线碾压输掉了比赛。赛后不少玩家对IG的BP进行了热议,有许多人认为IG不应该给Theshy使用坦克英雄,这是在浪费资源。也有部分玩家认为现在的IGTES战马再秀神级BP,K皇酒桶中单梦回S3,阿布点评太真实随着春节假期结束,LPL春季赛也重新燃起了战火。经过短暂的等待后,我们迎来了TES年后的第二场比赛。虽然TES在年前的表现不算太好,甚至输给了RW战队。但从年后的表现来看,TES众LOL小蜜蜂宝典即将上线!欧皇可得两款至臻,玩家肝没了LOL国服至今已经上线了11个赛季,在这段期间里官方推出了许多让大家记忆深刻的活动。不过相比之下,不少玩家都认为鸡里奥宝典是最良心的活动。这个活动不仅可以让大家直接获得三款限定皮肤LOL战争学院迎来新皮肤!女警更换史诗武器,永恩神似浪客剑心随着小蜜蜂系列皮肤上新,国服也即将开启小蜜蜂宝典活动。大家都知道,曾经的鸡里奥宝典凭借丰厚的奖励内容,一度被大家称为最良心的活动。不过随着小蜜蜂宝典公布之后,大家发现这个活动原来就RNG锁定LPL季后赛!笑笑说出玩家心声,后UZI时代来了?自从LPL开启新赛季的征程之后,RNG战队就一直在刷新大家对他们的认知。喜欢看比赛的小伙伴应该都知道,RNG的主力AD选手UZI在上个赛季宣布退役,这也导致队伍实力受到了很大影响,Bo假赛还有反转?网传受逼迫没收钱,笑笑就算是李哥也洗不了对于喜欢看LPL比赛的观众来说,相信大家都已经知道FPX打野Bo因为涉及假赛即将被禁赛的消息。虽然Bo是一名很有天赋和实力的选手,在他上场之后FPX更是打出了小局10连胜的傲人战绩