专栏电商日志财经减肥爱情
投稿投诉
爱情常识
搭配分娩
减肥两性
孕期塑形
财经教案
论文美文
日志体育
养生学堂
电商科学
头戴业界
专栏星座
用品音乐

面试官为何Redis使用跳表而非红黑树实现SortedSet?

  跳表由William Pugh发明,他在论文《Skip lists: a probabilistic alternative to balanced trees》中详细介绍了跳表的数据结构和插入删除等操作,论文是这么介绍跳表的:
  Skip lists are a data structure that can be used in place of balanced trees.Skip lists use probabilistic balancing rather than strictly enforced balancing and as a result the algorithms for insertion and deletion in skip lists are much simpler and significantly faster than equivalent algorithms for balanced trees.
  也就是说,跳表可以用来替代红黑树,使用概率均衡技术,使得插入、删除操作更简单、更快。先来看论文里的一张图:
  观察上图
  a:已排好序的链表,查找一个结点最多需要比较N个结点。
  b:每隔2个结点增加一个指针,指向该结点间距为2的后续结点,那么查找一个结点最多需要比较ceil(N/2)+1个结点。
  c,每隔4个结点增加一个指针,指向该结点间距为4的后续结点,那么查找一个结点最多需要比较ceil(N/4)+1个结点。
  若每第2^i 个结点都有一个指向间距为 2^i的后续结点的指针,这样不断增加指针,比较次数会降为log(N)。这样的话,搜索会很快,但插入和删除会很困难。
  一个拥有k个指针的结点称为一个k层结点(level k node)。按照上面的逻辑,50%的结点为1层,25%的结点为2层,12.5%的结点为3层…如果每个结点的层数随机选取,但仍服从这样的分布呢(上图e,对比上图d)?
  使一个k层结点的第i个指针指向第i层的下一个结点,而不是它后面的第2^(i-1)个结点,那么结点的插入和删除只需要原地修改操作;一个结点的层数,是在它被插入的时候随机选取的,并且永不改变。因为这样的数据结构是基于链表的,并且额外的指针会跳过中间结点,所以作者称之为跳表(Skip Lists)。
  二分查找底层依赖数组随机访问的特性,所以只能用数组实现。若数据存储在链表,就没法用二分搜索了?
  其实只需稍微改造下链表,就能支持类似"二分"的搜索算法,即跳表(Skip list),支持快速的新增、删除、搜索操作。
  Redis中的有序集合(Sorted Set)就是用跳表实现的。我们知道红黑树也能实现快速的插入、删除和查找操作。那Redis 为何不选择红黑树来实现呢?
  ◆  跳表的意义究竟在于何处?
  单链表即使存储的数据有序,若搜索某数据,也只能从头到尾遍历,搜索效率很低,平均时间复杂度是O(n)。
  追求极致的程序员就开始想了,那这该如何提高链表结构的搜索效率呢?
  若如下图,对链表建立一级"索引",每两个结点提取一个结点到上一级,把抽出来的那级叫作索引或索引层。图中的down表示down指针,指向下一级结点。
  比如要搜索16:  先遍历索引层,当遍历到索引层的13时,发现下一个结点是17,说明目标结点位于这俩结点中间  然后通过down指针,下降到原始链表层,继续遍历
  此时只需再遍历2个结点,即可找到16!
  原先单链表结构需遍历10个结点,现在只需遍历7个结点即可。可见,加一层索引,所需遍历的结点个数就减少了,搜索效率提升。
  若再加层索引,搜索效率是不是更高?于是每两个结点再抽出一个结点到第二级索引。现在搜索16,只需遍历6个结点了!
  这里数据量不大,可能你也没感觉到搜索效率ROI高吗。
  那数据量就变大一点,现有一64结点链表,给它建立五级的索引。
  原来没有索引时,单链表搜索62需遍历62个结点!
  现在呢?只需遍历11个!所以你现在能体会到了,当链表长度n很大时,建立索引后,搜索性能显著提升。
  这种有多级索引的,可以提高查询效率的链表就是最近火遍面试圈的跳表。
  作为严谨的程序员,我们又开始好奇了
  ◆跳表的搜索时间复杂度
  我们都知道单链表搜索时间复杂度O(n),那如此快的跳表呢?
  若链表有n个结点,会有多少级索引呢?假设每两个结点抽出一个结点作为上级索引,则:  第一级索引结点个数是n/2  第二级n/4  第三级n/8  …  第k级就是 n/(2^k)
  假设索引有h级,最高级索引有2个结点,可得:  n/(2h) = 2
  所以:  h = log2n-1
  若包含原始链表这一层,整个跳表的高度就是log2 n。我们在跳表中查询某个数据的时候,如果每一层都要遍历m个结点,那在跳表中查询一个数据的时间复杂度就是O(m*logn)。
  那这个m的值是多少呢?按照前面这种索引结构,我们每一级索引都最多只需要遍历3个结点,也就是说m=3,为什么是3呢?我来解释一下。
  假设我们要查找的数据是x,在第k级索引中,我们遍历到y结点之后,发现x大于y,小于后面的结点z,所以我们通过y的down指针,从第k级索引下降到第k-1级索引。在第k-1级索引中,y和z之间只有3个结点(包含y和z),所以,我们在K-1级索引中最多只需要遍历3个结点,依次类推,每一级索引都最多只需要遍历3个结点。
  通过上面的分析,我们得到m=3,所以在跳表中查询任意数据的时间复杂度就是O(logn)。这个查找的时间复杂度跟二分查找是一样的。换句话说,我们其实是基于单链表实现了二分查找,是不是很神奇?不过,天下没有免费的午餐,这种查询效率的提升,前提是建立了很多级索引,也就是我们在第6节讲过的空间换时间的设计思路。 ◆ 跳表是不是很费内存?
  由于跳表要存储多级索引,势必比单链表消耗更多存储空间。那到底是多少呢?
  若原始链表大小为n:  第一级索引大约有n/2个结点  第二级索引大约有n/4个结点  …  最后一级2个结点
  多级结点数的总和就是:  n/2+n/4+n/8…+8+4+2=n-2
  所以空间复杂度是O(n)。这个量还是挺大的,能否再稍微降低索引占用的内存空间呢?
  若每三五个结点才抽取一个到上级索引呢?
  第一级索引需要大约n/3个结点  第二级索引需要大约n/9个结点  每往上一级,索引结点个数都除以3  n/3+n/9+n/27+…+9+3+1=n/2
  尽管空间复杂度还是O(n),但比上面的每两个结点抽一个结点的索引构建方法,要减少了一半的索引结点存储空间。
  我们大可不必过分在意索引占用的额外空间,实际开发中,原始链表中存储的有可能是很大的对象,而索引结点只需存储关键值和几个指针,无需存储对象,所以当对象比索引结点大很多时,那索引占用的额外空间可忽略。 ◆ 插入和删除的时间复杂度◆ 插入
  在跳表中插入一个数据,只需O(logn)时间复杂度。
  单链表中,一旦定位好要插入的位置,插入的时间复杂度是O(1)。但这里为了保证原始链表中数据的有序性,要先找到插入位置,所以这个过程中的查找操作比较耗时。
  单纯的单链表,需遍历每个结点以找到插入的位置。但跳表搜索某结点的的时间复杂度是O(logn),所以搜索某数据应插入的位置的时间复杂度也是O(logn)。
  ◆ 删除
  如果这个结点在索引中也有出现,除了要删除原始链表的结点,还要删除索引中的。
  因为单链表删除操作需拿到要删除结点的前驱结点,然后通过指针完成删除。所以查找要删除结点时,一定要获取前驱结点。若是双向链表,就没这个问题了。
  ◆ 跳表索引动态更新
  当不停往跳表插入数据时,若不更新索引,就可能出现某2个索引结点之间数据非常多。极端情况下,跳表还会退化成单链表。
  作为一种动态数据结构,我们需要某种手段来维护索引与原始链表大小之间的平衡,也就是说,如果链表中结点多了,索引结点就相应地增加一些,避免复杂度退化,以及查找、插入、删除操作性能下降。
  像红黑树、AVL树这样的平衡二叉树通过左右旋保持左右子树的大小平衡,而跳表是通过随机函数维护前面提到的"平衡性"。
  往跳表插入数据时,可以选择同时将这个数据插入到部分索引层中。
  那如何选择加入哪些索引层呢?
  通过一个随机函数决定将这个结点插入到哪几级索引中,比如随机函数生成了值K,那就把这个结点添加到第一级到第K级这K级索引中。
  为何Redis要用跳表来实现有序集合,而不是红黑树?
  Redis中的有序集合支持的核心操作主要支持:  插入一个数据  删除一个数据  查找一个数据  迭代输出有序序列
  以上操作,红黑树也能完成,时间复杂度跟跳表一样。  按照区间查找数据
  红黑树的效率低于跳表。跳表可以做到 O(logn) 定位区间的起点,然后在原始链表顺序往后遍历即可。
  除了性能,还有其它原因:  代码实现比红黑树好懂、好写多了,因为简单就代表可读性好,不易出错  跳表更灵活,可通过改变索引构建策略,有效平衡执行效率和内存消耗  ◆ 跳表的代码实现(Java 版)◆ 数据结构定义
  表中的元素使用结点来表示,结点的层数在它被插入时随机计算决定(与表中已有结点数目无关)。
  一个i层的结点有i个前向指针(java中使用结点对象数组forward来表示),索引为从1到i。用MaxLevel来记录跳表的最大层数。
  跳表的层数为当前所有结点中的最大层数(如果list为空,则层数为1)。
  列表头header拥有从1到MaxLevel的前向指针: public class SkipList {      // 最高层数     private final int MAX_LEVEL;     // 当前层数     private int listLevel;     // 表头     private SkipListNode listHead;     // 表尾     private SkipListNode NIL;     // 生成randomLevel用到的概率值     private final double P;     // 论文里给出的最佳概率值     private static final double OPTIMAL_P = 0.25;          public SkipList() {         // 0.25, 15         this(OPTIMAL_P, (int)Math.ceil(Math.log(Integer.MAX_VALUE) / Math.log(1 / OPTIMAL_P)) - 1);     }      public SkipList(double probability, int maxLevel) {         P = probability;         MAX_LEVEL = maxLevel;          listLevel = 1;         listHead = new SkipListNode(Integer.MIN_VALUE, null, maxLevel);         NIL = new SkipListNode(Integer.MAX_VALUE, null, maxLevel);         for (int i = listHead.forward.length - 1; i >= 0; i--) {             listHead.forward[i] = NIL;         }     }      // 内部类     class SkipListNode {         int key;         T value;         SkipListNode[] forward;                  public SkipListNode(int key, T value, int level) {             this.key = key;             this.value = value;             this.forward = new SkipListNode[level];         }     } }◆ 搜索算法
  按key搜索,找到返回该key对应的value,未找到则返回null。
  通过遍历forward数组来需找特定的searchKey。假设skip list的key按照从小到大的顺序排列,那么从跳表的当前最高层listLevel开始寻找searchKey。在某一层找到一个非小于searchKey的结点后,跳到下一层继续找,直到最底层为止。那么根据最后搜索停止位置的下一个结点,就可以判断searchKey在不在跳表中。 在跳表中找8的过程:
  ◆插入和删除算法
  都是通过查找与连接(search and splice)
  维护一个update数组,在搜索结束之后,update[i]保存的是待插入/删除结点在第i层的左侧结点。
  ◆插入
  若key不存在,则插入该key与对应的value;若key存在,则更新value。
  如果待插入的结点的层数高于跳表的当前层数listLevel,则更新listLevel。
  选择待插入结点的层数randomLevel:
  randomLevel只依赖于跳表的最高层数和概率值p。
  另一种实现方法为,如果生成的randomLevel大于当前跳表的层数listLevel,那么将randomLevel设置为listLevel+1,这样方便以后的查找,在工程上是可以接受的,但同时也破坏了算法的随机性。
  ◆删除
  删除特定的key与对应的value。如果待删除的结点为跳表中层数最高的结点,那么删除之后,要更新listLevel。  public class SkipList {      // 最高层数     private final int MAX_LEVEL;     // 当前层数     private int listLevel;     // 表头     private SkipListNode listHead;     // 表尾     private SkipListNode NIL;     // 生成randomLevel用到的概率值     private final double P;     // 论文里给出的最佳概率值     private static final double OPTIMAL_P = 0.25;      public SkipList() {         // 0.25, 15         this(OPTIMAL_P, (int)Math.ceil(Math.log(Integer.MAX_VALUE) / Math.log(1 / OPTIMAL_P)) - 1);     }      public SkipList(double probability, int maxLevel) {         P = probability;         MAX_LEVEL = maxLevel;          listLevel = 1;         listHead = new SkipListNode(Integer.MIN_VALUE, null, maxLevel);         NIL = new SkipListNode(Integer.MAX_VALUE, null, maxLevel);         for (int i = listHead.forward.length - 1; i >= 0; i--) {             listHead.forward[i] = NIL;         }     }      // 内部类     class SkipListNode {         int key;         T value;         SkipListNode[] forward;                  public SkipListNode(int key, T value, int level) {             this.key = key;             this.value = value;             this.forward = new SkipListNode[level];         }     }      public T search(int searchKey) {         SkipListNode curNode = listHead;          for (int i = listLevel; i > 0; i--) {             while (curNode.forward[i].key < searchKey) {                 curNode = curNode.forward[i];             }         }          if (curNode.key == searchKey) {             return curNode.value;         } else {             return null;         }     }      public void insert(int searchKey, T newValue) {         SkipListNode[] update = new SkipListNode[MAX_LEVEL];         SkipListNode curNode = listHead;          for (int i = listLevel - 1; i >= 0; i--) {             while (curNode.forward[i].key < searchKey) {                 curNode = curNode.forward[i];             }             // curNode.key < searchKey <= curNode.forward[i].key             update[i] = curNode;         }          curNode = curNode.forward[0];          if (curNode.key == searchKey) {             curNode.value = newValue;         } else {             int lvl = randomLevel();              if (listLevel < lvl) {                 for (int i = listLevel; i < lvl; i++) {                     update[i] = listHead;                 }                 listLevel = lvl;             }              SkipListNode newNode = new SkipListNode(searchKey, newValue, lvl);              for (int i = 0; i < lvl; i++) {                 newNode.forward[i] = update[i].forward[i];                 update[i].forward[i] = newNode;             }         }     }      public void delete(int searchKey) {         SkipListNode[] update = new SkipListNode[MAX_LEVEL];         SkipListNode curNode = listHead;          for (int i = listLevel - 1; i >= 0; i--) {             while (curNode.forward[i].key < searchKey) {                 curNode = curNode.forward[i];             }             // curNode.key < searchKey <= curNode.forward[i].key             update[i] = curNode;         }          curNode = curNode.forward[0];          if (curNode.key == searchKey) {             for (int i = 0; i < listLevel; i++) {                 if (update[i].forward[i] != curNode) {                     break;                 }                 update[i].forward[i] = curNode.forward[i];             }              while (listLevel > 0 && listHead.forward[listLevel - 1] == NIL) {                 listLevel--;             }         }     }      private int randomLevel() {         int lvl = 1;         while (lvl < MAX_LEVEL && Math.random() < P) {             lvl++;         }         return lvl;     }      public void print() {     for (int i = listLevel - 1; i >= 0; i--) {             SkipListNode curNode = listHead.forward[i];             while (curNode != NIL) {                 System.out.print(curNode.key + "->");                 curNode = curNode.forward[i];             }             System.out.println("NIL");         }     }      public static void main(String[] args) {         SkipList sl = new SkipList();         sl.insert(20, 20);         sl.insert(5, 5);         sl.insert(10, 10);         sl.insert(1, 1);         sl.insert(100, 100);         sl.insert(80, 80);         sl.insert(60, 60);         sl.insert(30, 30);         sl.print();         System.out.println("---");         sl.delete(20);         sl.delete(100);         sl.print();     } }
  来源:https://www.toutiao.com/a7003231554520597000/

要塞军阀之战老外的中国文化大乱炖游戏体验不知所谓,消费要塞情怀的一款游戏,游戏虽然是转向了亚洲派系,但是系统越来越简化,感觉是在往帝国时代上靠,这款游戏的话,中国元素表现得还算是很丰富啊,但是其中混杂了很多,其他第七次全国人口普查带来的思考我国以2020年11月1日零时为标准时点开展了第七次全国人口普查(以下简称七人普),主要目的是全面查清我国人口数量结构分布等方面情况,看了这次数据,发现情况比我们想的可能还要严峻的GOG喜加一,钢铁之鼠免费领GOG喜加一GOG商店目前可以免费领取2。5D动作街机类游戏钢铁之鼠(SteelRats)。进入商店页面,点击横幅即可免费入库。领取地址httpswww。gog。comgiveaw2000是过山车的金币,你开过吗今天总结一下之前分享的涨金币方法先说一下我没有任何操作之前推荐页文章惊喜奖励200几十短文章下的惊喜奖励200几十(这个有上限)长文章下的惊喜奖励200几十签到首页的宝箱几十几十然赛博朋克20772021年初DLC消失的轻轨会有吗到了现在2021年的一月份。在游戏发售前,CDProjekt官方宣布将于2021年初推出免费DLC,增加游戏内容,游戏中废除的诸多系统中,城市轨道交通系统是最为明显的也是我们在游戏帮助你打开战锤40K世界的敲门砖战锤历史解说第一期如何系统地的了解战锤世界?可能小伙伴们在游戏生活都了解过战锤,却不知道如何的入门,所以我来了,带大家入门,让不熟悉这个系列的朋友们了解一下什么是战锤40K!战锤的世界观非常的大,我日本政府决定将核污水排入大海日本公然的对全人类犯下罪行日本自古就是知小礼无大义之族。看其行径可知其民族之卑劣。日本如此不负责的行为只能说这个民族在这种大是大非上完全是利己主义,想要用无法处理,要挟各国出钱帮助处理核污水。现在想来个眼不百年回首两个辛丑年的中外谈判对比有感上三个辛丑年,是1841年。英国人用枪炮打开了清政府的大门。那是中华百年噩梦的开始上两个辛丑年,是1901年。中国没有任何能力抵御来势汹汹的八国联军,政府被洋人掌控,那是百年噩梦的秦殇我逝去的青春经典怀旧游戏推荐亲爱的小伙伴们今天给大家介绍下经典的怀旧游戏我逝去的青春我还是在我小时候玩的这几天重新刷这个游戏真是让我心情复杂。废话不多说。开始介绍。我现在也热爱着游戏,也玩着游戏,也许从我们现STEAM游戏2021年五月游戏大作推荐第一生化危机8村庄已出可玩目前游戏已经发售一想到有两米多高的大姐姐冲我微笑,我就兴奋!发行日期20210507游戏介绍在ResidentEvil系列最新游戏中展开令人毛骨悚然的绝命苏小落被骂惨,宁王确认不在IG大名单,可LPL强队都不需要打野LPL赛区的转会期也已经结束,各大俱乐部陆续公布夏季赛的阵容,IG只公布了一个新教练,但没有公布整个大名单,然而在此时却传来一个不好的消息,宁王已经不在IG战队了!为什么会说宁王已
魔兽世界赛事服之猎人43级抓虎王邦加拉什做宝宝大家好,,我是龙武,经过几天的小小的不懈奋战,昨天终于把等级升到了43级,盼啊盼啊,终于等到了43级,这个级别挺有意义的,因为到这个级别了,就可以去抓荆棘谷的虎王邦加拉什了。所以昨战地2042将迎来今年最后一次更新提升枪械精度战地2042今年最后一个补丁将再次提高枪械精度,同时削弱Prox传感器和车载重炮,这应该可以增加步兵玩家的生存能力,获得更好的体验。本次补丁将Prox传感器可携带数量缩减到1个,探和平精英皮肤返场一元购,三大主播倾情加盟福利送不停毫无疑问,游戏已然成为当下青年群体消遣娱乐的主要方式之一了。各式各样的端游与手游走进人们的生活,在茶余饭后工作,闲暇之余来上一局惊险刺激好玩的游戏,早已成了更多人的选择。FPS类手Deft拿下千万合同?Huanfeng直播不服,但两人差距真的很大最近huanfeng在直播的时候排到了deft,并且直接表示deft1000w?特意对1000w加重了语气,似乎并不服气deft可以拿到这样的薪资。之所以huanfeng这么做,是XBW战队内讧事件两级反转!假的小霸王,真的瞎bwXBW战队除了中单芒果鱼,四个队友竟然都在打假赛!最近德杯赛开始打了。在昨天几乎所以不知内情的人,都认为四个小丑把自己队长踢了,尤其是ad心态炸裂,昨晚看到芒果鱼的直播,点进去一看Aurory链游养成对战,满足抓宠梦想今天和大家分享一款基于Solana生态的游戏项目Aurory。通过创造新鲜的,有吸引力的游戏环节,培育虚拟游戏经济,为游戏设定盈利标准的游戏。力求通过流行的玩赚机制为游戏用户创建一登顶bsc链,持续火热的元兽游戏最新动态详解进入十一月以来,gamefi上最受欢迎的无疑是metamon,一款由radiocaca打造的元兽养成战斗游戏,与其他区块链游戏短暂火爆就结束之后不一样的是,元兽的火爆一直高居不下,全新NintendoSwitch外接设备发布,屏幕放大188,还能随身携带由任天堂发行的主机NintendoSwitch采用了掌机与主机混合的设计,让玩家们可以随时随地将主机带着走,同时也能插上SwitchDock连接屏幕,获得更高画质的游玩体验。于是打UZI复出期待冠军AD之间的较量小狗近期状态似乎不怎么好,又要回到钻一皇帝的位置了。今年转会期最大的赢家可能就是BLG了,为了打造全神班不惜花重金去争取每一个想要的选手。尤其是一直传出要复出的UZI,BLG应该除传世群英版攻略讲解新手超详细攻略传世手游巨作大家好,传世群英相信很多人都听说过吧,但是还是有很多新手宝宝不知道怎么去玩,这次小编就给大家带来一些新手攻略,感兴趣的就继续往下看吧。前期的话小编建议玩家先完成主线任务和新手任务,TES想要扶持状元打野,却舍不得湘军指挥才能,湘军被迫转型辅助大家好,欢迎收看本期的赛事资讯内容,我是胖虎。长沙TES。A在本赛季取得的成绩还算不错,虽然胜者组第1轮的比赛大比分落后输给了重庆狼队,但本来也没指望着滔博能战胜对手,不过被零封确
友情链接:快好知快生活快百科快传网中准网文好找聚热点快软件