范文健康探索娱乐情感热点
投稿投诉
热点动态
科技财经
情感日志
励志美文
娱乐时尚
游戏搞笑
探索旅游
历史星座
健康养生
美丽育儿
范文作文
教案论文
国学影视

大数据开发聊聊注册中心技术选型

  关于注册中心,在分布式集群环境下,是常常会听到的一个名词。所谓注册中心,其实就是对就工作环境当中的各个角色提供注册、注销、查询服务、感知服务变化等的能力。今天的大数据开发分享,我们就主要来讲讲这个注册中心,以及如何选型。
  注册中心概念解析
  什么是注册中心?以大多数人熟悉的RPC框架来说,通常RPC中有三种角色:
  provider服务提供者
  consumer服务消费者,即调用方
  registry注册中心,让consumer能发现provider的关键
  注册中心对于服务提供者需要具备服务注册、注销的能力,对于服务消费者需要提供查询服务、感知服务变化的功能。
  注册中心特性
  ①存储
  可以将注册中心理解为一个存储系统,存储着服务名与服务提供方的映射表。
  ②高可用
  在聊高可用前,假定你了解分布式CAP理论,如果不知道可以稍微网上查一下,这里就不赘述。
  其中对注册中心的高可用要求尤其高,它有如下几层含义,首先肯定是集群部署,无单点问题,其次就算整个集群挂掉了,也不能影响现有服务的调用,只不过现有的调用关系无法及时改变而已。
  在分布式理论CAP中,注册中心更理想的应该是AP模式。可以简单的从以下两个场景来理解:
  注册中心挂掉一个节点无任何影响,如果注册中心是CP模式(强一致),像ZAB、raft协议,它们存在一个"选主"的过程,通常选主时集群是不可写的。
  如果集群出现"脑裂"的情况,假设5个的节点脑裂为3+2,CP模式下2个节点将完全不可用,如果牺牲一致性,至少保证节点都可访问,对服务的影响应该比完全不可用要小很多。
  ③水平扩展
  水平扩展说的是如果规模上去后,能否通过加机器的方式来解决性能问题,从这点来说,AP模式也比CP模式更容易扩展,CP模式一般写发生在主节点,所以扩展变得很麻烦,如果写能分散到不同节点,就是可扩展的,以最简单的数据库实现来说,就可以认为是可以水平扩展的,毕竟数据库的写可以通过分库分表或者分布式数据库来解决。
  ④服务探活
  在说服务探活前需要介绍一下服务注册的维度,维度影响到探活。一般来说,服务注册的维度有两个:服务维度和应用维度。
  服务维度:注册的是接口到ip、port的映射关系,如dubbo(dubbo新版本也支持应用级服务发现,但大多数还是在以服务维度的服务发现在使用),优点是注册信息跟应用无关,可以方便地拆分服务,缺点是粒度太细,注册数据量大。
  应用维度:注册的是应用到ip、port的映射关系,如spring cloud,优点是注册数据量小,缺点是拆分服务困难
  通常探活也有两种方式,一种是服务端主动探活,另一种是客户端上报心跳。对于应用级的服务探活很简单,只要确定端口是否存活就可以判断应用的存活,所以服务端主动探活即可解决;但服务维度就不行,一般没有现有的方法知道服务是否存活,所以如果想要服务端主动探活,需要RPC框架暴露接口来告知服务端存活的服务,要么就是采取客户端主动上报心跳来告知有哪些服务是存活的。
  ⑤路由功能
  此项不是必选,但有了就会很强。比如很多公司都有多套环境,如开发、测试,预发,线上环境,通常开发和测试的环境是单独部署,但线上和预发就不一定会单独部署。试想没有路由能力的注册中心,如果想线上只调用线上,预发只调用预发时,是不是必须得部署两套注册中心(以zk为例)。但如果给注册中心增加一个路由功能,线上consumer只消费线上provider,预发consumer只消费预发provider,那这样就只需要部署一套环境。
  当然路由能力不仅限于此,还可以解决多机房就近调用问题,甚至可以完成很多更有想象力,更有意思的事情。
  ⑥多机房支持
  多机房是部署一套注册中心,还是每个机房都部署一套注册中心?其实两种方案都可以,部署一套注册中心需要保证每个机房的服务注册都要请求这个注册中心,存储数据是一份,这样的问题是跨机房调用时延高,但如果是专线,这个问题也不是太大。
  如果每个机房都部署一个注册中心,就没有时延问题,但不可能每个机房都不需要感知其他机房的服务,这样就需要有数据同步的机制,数据同步就意味着注册与发现有时延,而且多中心的数据一致性保证比较复杂。
  注册中心如何做技术选型
  如果选择开源产品,是否符合公司技术栈,能否cover住将是第一选择要点,例如使用dubbo,哪些注册中心对dubbo的支持比较友好?哪些注册中心是java技术栈?
  其次是对注册中心特殊能力的需求,如业务在高速发展中,需要考虑下性能和水平扩展能力;如想在注册中心上做一些流量的控制,可以考虑选型的注册中心是否有路由能力;如想快速准确的摘除故障机器,那么需要考虑下注册中心的服务探活能力能否满足需求;如有多机房建设的需求,需要考虑注册中心对多机房的支持是否友好,是否支持"就近调用"等特性。
  开源产品很多,常见的像zookeeper、nacos、eureka、consul等,大厂遇到的场景通常比较复杂,一般会定制自己的注册中心。
  关于大数据开发,聊聊注册中心技术选型,以上就为大家做了简单的入门介绍了。在大数据集群环境的搭建和运行当中,注册中心是非常重要的一部分,以Zookeeper为首的工具组件,也是必备的基础技能。

核电站用完的核废料最后都去哪了,会威胁人类安全吗?广义上的核废料是指从铀矿石分拣提炼一直到核燃料整个生产过程中所产生的没有利用价值放射性废料。也可以特指核反应堆用过的提取回收Pu239等有回收价值的易裂变元素之后的乏燃料。核电站运福特通用汽车和大众汽车似乎正在帮助马斯克实现他的绝密计划记者李亦萌编辑在发布了全新F150Lightning纯电动皮卡之后,福特汽车公司成了本周的行业明星。该产品有望成为一款令人印象深刻的电动汽车,新车起售价低于4万美元(约合人民币25微信防撤回如何实现?很简单,一步搞定相信现在许许多多的小伙伴们对于微信防撤回这项属性功能非常的感兴趣,许多用户可能因为没有来得及看到消息对方就已经撤回了,这样就让你非常的想要知道对方到底发了什么信息,而小编今日为大家为什么类脑智能工程国家实验室落户于合肥市?类脑智能工程实验室全名类脑智能技术及应用国家工程实验室,之所以落户合肥,主要有几个方面的原因1类脑国家工程实验室是由中国科学技术大学牵头组建的,中科院复旦大学清华大学微软百度科大讯华为哪款手机最值得购买?华为哪款手机最值得购买?下面给题主推荐几款,比较值得购买的华为手机,性价比也不错的。1。华为P30Pro这款手机是去年4月份发布的,虽说仅搭载了麒麟980处理器,不支持5G通信,但为什么西藏大多数人用苹果手机?这个还真的必须得用,你知道不知道国内的手机厂商们,一直都是只向钱看的,没有大利润的事,他们是根本不会干的。藏文这个东西,现在可能有手机支持了,但以前,更以前,只有苹果才支持,如果你荣耀独立后首次用上高通芯片,6月起芯片供应将全面恢复超过800款搭载高通5G解决方案的终端已经发布或正在设计中,在中国投资的企业超过70家5月2122日,2021高通技术与合作峰会在北京水立方举行。峰会全景式呈现高通携手广泛的生态系金融委要求打击比特币挖矿和交易行为,释放了什么信号虚拟货币将迎来更有力的整治。在金融三协会发布公告重申虚拟货币有关业务涉嫌犯罪内蒙古设立虚拟货币挖矿企业举报平台3天后,国务院金融委提出打击比特币挖矿和交易行为。5月21日,国务院金年交易额累计不超十万元的无需登记本报记者万静近日,国家市场监管总局制定了关于进一步规范电子商务经营者登记工作的通知(征求意见稿)(以下简称意见稿),并向社会公开征求意见。根据意见稿规定,自然人从事网络交易活动,年两款果里果气的手机即将发布iPhone4复刻版?要说今年的手机市场那真是乱哄哄啊!高通旗舰处理器低于3000元发布,高通次旗舰处理器低于2000元发布,天玑旗舰处理器与高通次旗舰开启拼刺刀的模式。性价比市场不再只是Redmi一家58万人爆仓!币圈骗局已经破碎了惊魂一夜,无数人暴富梦破裂,史上最大的币圈惨案还是来了!真的假不了,假的真不了!谁都知道比特币的谎言迟早会破裂,但你永远没有办法叫醒一个装睡的人,正如那些沉睡在暴富梦中的比特币玩家