范文健康探索娱乐情感热点
投稿投诉
热点动态
科技财经
情感日志
励志美文
娱乐时尚
游戏搞笑
探索旅游
历史星座
健康养生
美丽育儿
范文作文
教案论文
国学影视

开源如何先不说但我有两个疑问小议OceanBase登顶TPCH

  OceanBase上次登顶TPC-C,这次登顶TPC-H
  【全球财经观察 | 新闻速递】 近日,一篇名为《1526万QphH!蚂蚁自研数据库OceanBase登顶TPC-H权威榜单》的文章在网络上广泛传播。
  文中提到,5月20日,国际事务处理性能委员会(TPC,Transaction Processing Performance Council)官网发布最新的数据分析型基准测试(TPC-H)榜单,其中,蚂蚁集团自主研发的分布式数据库OceanBase以1526万QphH的性能总分排名30,000 GB 第一。
  此前,蚂蚁OceanBase在2019年和2020年均参与了事务处理型基准测试(TPC-C),并两度登顶。
  OLTP+OLAP,鱼和熊掌真的可以兼得吗?
  对于"OceanBase登顶TPC-H"的事情,我还是有话要说。
  熟悉数据库的人都知道,联机事务处理(On-Line Transactional Processing,以下简称OLTP) 和联机分析处理(On-Line Analytical Processing,以下简称OLAP)是数据库最为广泛的两种应用方式。OLTP用在实时交易的场景,特点是高并发、SQL简单,对数据查询更新处理的时延和抖动有严苛的要求。OLAP用在实时分析的场景,特点是复杂SQL多,多为多表的联合查询,执行的时间相对较长。
  所以,TPC组织有不同的测试标准TPC-C和TPC-H来分别对数据库的OLTP能力和OLAP能力来进行评判。根据应用的特点,TPC-C采用每分钟处理的事务数作为指标,TPC-H则是使用每小时执行的查询次数作为指标。近年来,众多厂商推出HTAP数据库(Hybrid Transaction and Analytical Processing,混合事务和分析处理),以实现在同一个数据库中同时进行OLTP和OLAP业务的处理,OceanBase便是其中之一。
  OceanBase在TPC-C和TPC-H两项测试中都排名第一,是否意味着OceanBase可以包打天下,应对所有的数据库应用场景?我们根据TPC官网的测试报告中的详细测试数据来分析一下OceanBase的在OLAP领域的实际能力。
  从TPC官网的测试报告可以看到,本次OceanBase采用了64台云服务器进行测试。每台服务器的CPU为80核,内存为768GB,存储40GB。64台服务器的总的硬件资源为5120CPU核,49152GB内存,2560GB服务器存储。同时,还使用了38000GB的OFS(OceanBase File System)存储,存储总资源达到40560GB, 如图1所示OceanBase TPC-H测试硬件规模。
  同时,TPC官网的测试报告中,还给出了本次测试软硬件的成本,3年的总体拥有成本为人民币69,336,912元, 如图2所示OceanBase TPC-H测试软硬件成本。
  在这些软硬件资源上,OceanBase在30000GB数据的测试条件下,QphH达到了15,265,305.7,实现每kQphH花费的软硬件成本为人民币4542.13元。
  基于以上数据,我们可以对本次OceanBase测试做一些分析。
  首先,OceanBase本次TPC-H测试的数据量为30000GB,而其使用的内存达到49152GB。OceanBase准内存库的架构,决定了本次测试的数据可以完全加载在内存,通过在内存里进行查询计算,避免磁盘I/O,从而大幅提升测试的得分。这种方式在中小规模的数仓中可以采用,但是大型数仓的数据量常常达到PB,甚至百十PB的规模,采用全内存计算的方式,会大幅提升系统总体拥有成本,用户无法承受。对于大中型规模的OLAP场景,需要寻求更为经济的解决方案。
  其次,OceanBase本次参加的TPC-H测试,包含8张表,22个查询,遵循SQL92标准,属于TPC组织在OLAP领域中难度较低的测试。同为TPC组织的TPC-DS测试,包含7张事实表,17张纬度表,平均每张表含有18列,其工作负载包含99个SQL查询,覆盖SQL99和2003的核心部分以及OLAP,难度比TPC-H测试高很多。 OceanBase本次选择参加TPC-H测试而不是TPC-DS测试,这是否已经说明其对TPC-DS测试包含的99个复杂SQL查询支持可能并不完备,只能支持相对简单的OLAP业务,并不能应用在所有的OLAP场景?
  最后,因为TPC组织还考察实现每kQphH的成本,所以OceanBase采用3年预付的云服务租金来计算每kQphH的成本,按OceanBase提供的3年总体拥有成本69,336,912元,得出每kQphH成本为4542.13元。对比排名第二的每kQphH成本为744.13美元(折扣人民币4769.65)看似有一定价格优势,但是实际上硬件设备采购的折旧年限远不止3年。 所以,OceanBase的解决方案是不是真的具备价格上的优势,这里是否需要打个问号?
  综上所述,一是:OceanBase本次打榜,说明其在简单的OLAP场景具备了一定的应用能力,但在支撑复杂和大规模的数仓OLAP应用方面的能力如何,只是打榜TPC-H是不是不能完全说明问题。
  二是:同时在解决方案的总体拥有成本上,是否还需要进一步考量优化。
  这便是我的两个疑问。
  因此,大中规模的数仓应用,需要更为专业的OLAP数据库来提供解决方案。
  (观点分析:业内人士,阿明编辑整理)
  备注:
  TPC-H的数据指标:  QphH(Query-per-Hour H) 这个数据指标描述了系统的复杂查询处理能力。H表示这个结果是按照TPC-H标准测得的,$/QphH 即Price/Q。
  Query: 为查询的意思,为了在数据库中寻找某一特定文件、网站、记录或一系列记录,由搜索引擎或数据库送出的消息。
  - END-
  你
  怎
  么
  看
  ?
  欢迎文末评论补充!
  【全球财经观察】本文和作者回复仅代表个人观点,不构成任何投资建议。

假至中旬,切勿酒驾酒后驾车危险道交法第九十一条饮酒后驾驶机动车的,处暂扣六个月机动车驾驶证,并处一千元以上二千元以下罚款。因饮酒后驾驶机动车被处罚,再次饮酒后驾驶机动车的,处十日以下拘留,并处一千元给新生儿交医保,可能我们都会有这样的误区分享近期社区群有人问孩子医保怎么交,怎么报销去哪里处理等等一些话题,正好前些天家里又添新丁,结合自己办证经验今天跟大家分享一下,给小孩上办医保的过程。第一步1。给新生儿报户口户口不工作遇到瓶颈,无法升职,把握转岗机会,攀上职业新巅峰汪Sir有话说近段时间公司有一个高价值的岗位空缺,我们向公司内部公开招聘同事小全这个不好吧,我怕我做不了。这份工作这么核心,工作内容肯定很难!同事小盛我不去,我很喜欢目前的岗位,再苦等6年!消息称苹果终于要让iPhone13支持常亮屏模式之前不少网友期待iPhone上市实现的模式,极有可能在今年给落地。距离下一代iPhone发布还有不到2个月的时间,而现在外媒给出的最新消息称,iPhone13系列将搭载A15芯片,幼儿园设计关爱儿童成长环境环境对儿童的成长很重要,什么样的环境能够增强儿童的学习创造力,以及与人的沟通能力?今天带大家看一组幼儿园的设计,从新加坡五彩条纹学校到丹麦的单色幼儿园,看看有哪些代表性的幼儿园这个行驶证还需要拍摄盖章页吗2018年7月30日开始车管所对6年内免检车辆办理注册变更转移登记,核发检验标志补换领行驶证业务时,行驶证副页上不再签注检验有效期。虽然6年内免年检车辆不在签注了,但我们还是需要核道路交通事故社会救助基金管理试行办法美天优理赔汽车保险理赔172篇原创内容公众号中华人民共和国财政部令中华人民共和国保监会中华人民共和国公安部中华人民共和国卫生部中华人民共和国农业部第56号道路交通事故社会救助基金管核赔案例分享三车相撞的混合责任如何赔偿三车事故,机动车甲机动车乙三轮非机动车丙发生碰撞,后经交警队判定甲负主责乙无责丙次责。甲无车损(实际损失大于100),乙车辆损失3100元,丙车辆损失300元。机动车甲乙正常承保交核赔案例分享三车相撞的混合责任如何赔偿(有人伤)美天优理赔汽车保险理赔181篇原创内容公众号三车事故,机动车甲机动车乙三轮非机动车丙发生碰撞,致使三车受损丙驾驶员受损。后经交警队判定甲负主责乙无责丙次责。造成甲车辆损失2300,影碟行业又发生一件大事!CC标准要发行4KUHD蓝光碟了8月11日,CriterionCollection也就是我们常说的CC标准收藏,正式宣布他们进军4KUHD,并公布了其首批超高清蓝光版本(4KUHD),包括公民凯恩红菱艳一夜狂欢穆方正阀门自主研制的超低温球阀蝶阀轴流式止回阀通过鉴定2021年7月1415日,中国机械工业联合会和中国通用机械工业协会在浙江温州组织召开了由方正阀门集团股份有限公司自主研制的超低温球阀蝶阀轴流式止回阀产品样机鉴定会。鉴定会专家组由来
箩筐参与牵头制定自动驾驶高精度地图标准公司今日宣布,由箩筐全资子公司中国领先的高精度地图服务商易图通领衔牵头负责制定的智能网联汽车自动驾驶地图采集要素模型与交换格式标准,已通过中国汽车工程学会标准(CSAE)的立项及审LK分享智能化带来线控底盘新机遇深度报告在能源环保安全等因素推动下,汽车产业发展方向是电动化智能化轻量化等,底盘系统均有望受益。电动化方面新能源电池盒产品单车价值量高达3,0005,000元,智能化方面线控制动和线控转向LK分享盘点国内六省智慧高速建设指南当前全国各地正在积极开展智慧公路建设,但智慧高速公路建设仍然缺乏规范性指导性技术文件,为了指导智慧高速公路科学建设,避免建设的盲目性和资源浪费,各地方开始自行组织建设指导性文件。据LK分享汽车芯慌还会持续多久?谁也没想到,一颗小小的芯片让我们老板这么着急上火,都要出动高层领导去供应商那边盯货。2021中国汽车论坛汽车芯荒与中国对策分论坛上,汽车之家不止一次听到汽车行业人士的缺芯烦恼,缺芯LK分享北上象群50天昼夜跟踪监测,一次典型的时空应用案例去年12月,一群长期栖息在云南西双版纳的野生亚洲象,首次造访了百公里外的普洱市墨江县。今年4月起,它们的足迹开始逐渐靠近人类城镇,其中除两头象中途返回普洱,其余15头不断北行迁移,LK分享4种激光雷达技术的最新发展趋势激光雷达技术是3D点云的代名词,为了充分利用3D点云数据,我们有必要考虑Lidar技术的最新趋势以及如何使数据让用户受益。本文探讨了最新的发展。在空间工业中,有四个流行的lidarLK分享中国高精地图未来发展趋势在35年内高精度地图一定会从选配到标配L3影响的是高精度地图渗透率提升的节奏,本质上是一个消费者买单意愿的问题。毫无疑问,需要借助高精度地图实现的功能越多,消费者的付费意愿就越强,名企头条字节跳动否认微软要求收购TikTok全球业务微软胃口变大?被曝求购TikTok全球业务,字节跳动否认昨日(6日),据英国金融时报报道,微软公司正寻求收购TIkTok全球业务,包括TIkTok印度和欧洲。对此,8月7日凌晨,字换种思路处理电力大数据,产生了这样的效果?图片来源视觉中国电力行业的时代新课题河南省电力科学研究院承担的研究课题电网地理信息大数据应用研究项目,经过电科院河南恩湃电力技术公司与协作单位郑州昂莱云电软件公司郑州大学苏州超擎图LK分享汽车数据安全管理若干规定(试行)国家互联网信息办公室中华人民共和国国家发展和改革委员会中华人民共和国工业和信息化部中华人民共和国公安部中华人民共和国交通运输部令第7号汽车数据安全管理若干规定(试行)已经2021年LK分享有远见的智慧城市平台新领域1智慧城市,应对城市化挑战根据联合国(UN)的数据,尽管城市只占地球表面的3,但它们居住着世界一半以上的人口,它们消耗了70的能源,排放了75的碳。这些令人印象深刻令人担忧的数据显