范文健康探索娱乐情感热点
投稿投诉
热点动态
科技财经
情感日志
励志美文
娱乐时尚
游戏搞笑
探索旅游
历史星座
健康养生
美丽育儿
范文作文
教案论文
国学影视

9大高性能优化经验总结,强烈建议收藏

  性能优化基本属于Java高级岗的必备技能了,特备对于大流量的互联网应用至关重要@mikechen
  今天主要给大家介绍下9种性能优化的方法:
  1.代码
  之所以把代码放到第一位,是因为这一点最容易引忽视,比如拿到一个性能优化的需求以后,言必称缓存、异步等。
  实际上,第一步就应该是分析相关的代码,找出相应的瓶颈,再来考虑具体的优化策略。
  有一些性能问题,完全是由于代码写的不合理,通过直接修改一下代码就能解决问题的,比如for循环次数过多、作了很多无谓的条件判断、相同逻辑重复多次等,这样的优化成本是最低的。2.数据库
  1.SQL优化
  这里以MySQL为例,最常见的方式是,由自带的慢查询日志或者开源的慢查询系统定位到具体的出问题的SQL,然后使用explain、profile等工具来逐步调优,最后经过测试达到效果后上线。
  这里举几个优化的例子:
  1.查询优化
  对查询进行优化,要尽量避免全表扫描,首先应考虑在 where 及 order by 涉及的列上建立索引。
  2.避免null判断
  应尽量避免在 where 子句中对字段进行 null 值判断,否则将导致引擎放弃使用索引而进行全表扫描,如:select id from t where num is null
  3.避免全表扫描
  应尽量避免在 where 子句中使用 != 或 <> 操作符,否则将引擎放弃使用索引而进行全表扫描。
  应尽量避免在 where 子句中使用 or 来连接条件,如果一个字段有索引,一个字段没有索引,将导致引擎放弃使用索引而进行全表扫描。
  in和 not in 也要慎用,否则会导致全表扫描,如:select id from t where num in(1,2,3)
  对于连续的数值,能用 between就不要用 in 了:select id from t where num between 1 and 3
  4.大数据量查询
  对于多张大数据量的表JOIN,要先分页再JOIN,否则逻辑读会很高。
  5.合理使用索引
  索引并不是越多越好,索引固然可以提高相应的 select 的效率,但同时也降低了 insert 及 update 的效率,因为 insert 或 update 时有可能会重建索引,所以怎样建索引需要慎重考虑,视具体情况而定。
  一个表的索引数最好不要超过6个,若太多则应考虑一些不常使用到的列上建的索引是否有 必要。
  6.多使用数字型字段
  尽量使用数字型字段,若只含数值信息的字段尽量不要设计为字符型,这会降低查询和连接的性能,并会增加存储开销。
  这是因为引擎在处理查询和连 接时会逐个比较字符串中每一个字符,而对于数字型而言只需要比较一次就够了。
  7.避免大数量
  尽量避免向客户端返回大数据量,若数据量过大,应该考虑相应需求是否合理。
  8.避免大事务
  尽量避免大事务操作,提高系统并发能力。2.连接池调优
  我们的应用为了实现数据库连接的高效获取、对数据库连接的限流等目的,通常会采用连接池类的方案,即每一个应用节点都管理了一个到各个数据库的连接池。
  随着业务访问量或者数据量的增长,原有的连接池参数可能不能很好地满足需求,这个时候就需要结合当前使用连接池的原理、具体的连接池监控数据和当前的业务量作一个综合的判断,通过反复的几次调试得到最终的调优参数。3.架构层面
  这一类调优包括读写分离、多从库负载均衡、水平和垂直分库分表等方面,一般需要的改动较大,但是频率没有SQL调优高,而且一般需要DBA来配合参与。
  3.分布式缓存
  缓存可以称的上是性能优化的利器,缓存主要用来存放那些读写比很高、很少变化的数据。
  什么情况适合用缓存?考虑以下两种场景:短时间内相同数据重复查询多次且数据更新不频繁,这个时候可以选择先从缓存查询,查询不到再从数据库加载并回设到缓存的方式。此种场景较适合用单机缓存。高并发查询热点数据,后端数据库不堪重负,可以用缓存来扛。
  使用缓存需要注意的问题:1.避免缓存失效
  把频繁修改的数据放入缓存,容易出现数据写入缓存后,应用还来不及读取缓存,数据就已经失效的情形,徒增系统负担。2.缓存热点数据
  缓存使用的内存资源非常宝贵,只能将最新访问的数据缓存起来,而把历史数据清理出缓存,即缓存资源应该留给20%的热点数据。3.数据不一致性
  一般会对缓存设置失效时间,超过失效时间,就要从数据库重新加载。
  因此应用要忍受一定时间的数据不一致,另一种策略是数据更新时立即更新缓存,不过这也会带来更多的系统开销和事务一致性的问题。4.缓存可用性
  业务发展到一定阶段时,缓存会承担大部分数据访问的压力,数据库已经习惯了有缓存的日子,所以当缓存服务器崩溃时,数据库会因为完全不能承受如此大的压力而宕机,进而导致整个网站不可用,这种情况被称作缓存雪崩,发生这种故障,甚至不能简单地重启缓存服务器和数据库服务器来恢复网站访问。
  解决方式:
  1)缓存热备(当某台服务器宕机时,将缓存访问切换到热备服务器上;
  2)缓存服务器集群。5. 缓存预热
  缓存中存放的是热点数据,热点数据是缓存系统用LRU对不断访问的数据筛选出来的,这个过程需要较长的时间。
  新启动的缓存系统没有任何数据,此时系统的性能和数据库负载都不太好。因此可以选择在启动缓存是就把热点数据预加载好。6.缓存穿透
  因为不恰当的业务或恶意攻击,持续高并发地访问某一个不存在的数据,如果缓存不保存该数据,就会有大量的请求压力落在数据库上。
  简单的解决方式是把请求的不存在的数据也放进缓存,其value是null。4.异步化
  针对某些客户端的请求,在服务端可能需要针对这些请求做一些附属的事情,这些事情其实用户并不关心或者用户不需要立即拿到这些事情的处理结果,这种情况就比较适合用异步的方式处理这些事情。
  异步化的作用:缩短接口响应时间,使用户的请求快速返回,用户体验更好。避免线程长时间处于运行状态,这样会引起服务线程池的可用线程长时间不够用,进而引起线程池任务队列长度增大,从而阻塞更多请求任务,使得更多请求得不到技术处理。线程长时间处于运行状态,可能还会引起系统Load、CPU使用率、机器整体性能下降等一系列问题,甚至引发雪崩。异步的思路可以在不增加机器数和CPU数的情况下,有效解决这个问题。
  比如:使用消息队列(MQ)中间件服务,MQ天生就是异步的。
  一些额外的任务,可能不需要我这个系统来处理,但是需要其他系统来处理,这个时候可以先把它封装成一个消息,扔到消息队列里面,通过消息中间件的可靠性保证把消息投递到关心它的系统,然后让这个系统来做相应的处理。
  再比如C端在完成一个提单动作以后,可能需要其它端做一系列的事情,但是这些事情的结果不会立刻对C端用户产生影响,那么就可以先把C端下单的请求响应先返回给用户,返回之前往MQ中发一个消息即可,而且这些事情理应不是C端的负责范围,所以这个时候用MQ的方式,来解决这个问题最合适。5.Web前段
  Web前端指网站业务逻辑之前的部分,包括:浏览器加载网站视图模型图片服务CDN服务等
  主要优化手段有优化浏览器访问,使用反向代理,CDN等。1.浏览器访问优化(1)减少http请求
  HTTP协议是无状态的应用层协议,意味着每次HTTP请求都需要简历通信链路,进行数据传输,而在服务器端,每个HTTP都需要启动独立的线程去处理,这些通信和服务的开销都很昂贵,减少HTTP请求的数目可有效提高访问性能。
  减少HTTP请求的主要手段是:合并CSS,以及压缩CSS大小合并JavaScript,以及压缩JS大小合并图片
  将浏览器一次访问需要的JavaScript,CSS合并成一个文件,这样浏览器就只需要一次请求。多张图片合并成一张,如果每张图片都有不同的超链接,可通过CSS偏移响应鼠标点击操作,构造不同的URL。(2)使用浏览器缓存
  对一个网站而言,CSS,JavaScript,Logo,图标等这些静态资源文件更新的频率都比较低,而这些文件又几乎是每次HTTP请求都需要的,如果将这些文件缓存在浏览器中,可以极好地改善性能。通过设置HTTP头中Cache-Control和Expires属性,可设定浏览器缓存,缓存时间可以是数天甚至是几个月。有时候,静态资源文件变化需要及时应用到客户端浏览器,这种情况可以通过改变文件名实现,比如一般会在JavaScript后面加上一个版本号,使浏览器刷新修改的文件。(3)启用压缩
  在服务器端对文件进行压缩,在浏览器端对文件解压缩,可有效较少通信传输的数据量。文本文件的压缩效率科大80%以上。(4)CSS放在页面最上面,JavaScript放在页面最下面
  浏览器会在下载完全部CSS之后对整个页面进行渲染,因此最好的做法是将CSS放在页面最上面,让浏览器尽快下载CSS。JS则想法,浏览器在加载JS后立即执行,有可能会阻塞整个页面,造成页面显示缓慢,因此JS最好放在页面最下面。(5)减少Cookie传输
  一方面,Cookie包含在每次请求和响应中,太大的Cookie会严重影响数据传输,因此哪些数据需要写入Cookie需要慎重考虑,尽量减少Cookie中传输的数据量。另一方面,对于某些静态资源的访问,如CSS,JS等,发送Cookie没有意义,可以考虑静态资源使用独立域名访问,避免请求静态资源时发送Cookie,减少Cookie传输的次数。2.CDN加速
  CDN(Content Distribute Network,内存分发网络)的本质上仍然是一个缓存,而且将数据缓存在离用户最近的地方,是用户以最快速度获取数据,即所谓网络访问第一跳。
  CDN一般缓存的是静态资源,如图片,文件,CSS,Script脚本,静态网页等,但是这些文件访问频率很高,将其缓存在CDN可极大改善网页的打开速度。3.反向代理
  传统代理服务器位于浏览器一侧,代理浏览器将HTTP请求发送到互联网上,而反向代理服务器位于网站机房一侧,代理网站Web服务器接收HTTP请求。
  和传统代理服务器可以保护浏览器安全一样,反向代理服务器也具有保护网站安全的作用,来自互联网的访问请求必须经过代理服务器,相当于在Web服务器和可能的网络攻击之间建立了一个屏障。
  除了安全功能,代理服务器也可以通过配置缓存功能加速Web请求,当用户第一次访问静态内容的时候,静态内容就被缓存在反向代理服务器上,这样当其他用户访问该静态内容的时候,就可以直接从反向代理服务器返回,加速Web请求响应速度,减轻服务器负载要。6.服务化
  做服务化最基础的是按业务做服务拆分,避免跨业务间的互相影响,数据和服务同时拆分。同一个业务内部我们还按计算密集型/IO密集型的服务拆分、C端/B端服务拆分、核心/非核心服务拆分、高频服务单独部署等原则做拆分。7.硬件升级
  硬件问题对性能的影响不容忽视。
  举一个例子:一个DB集群经常有慢SQL报警,业务排查下来发现SQL都很简单,该做的索引优化也都做了,后来DBA同学帮忙定位到问题是硬件过旧导致,将机械硬盘升级成固态硬盘之后报警立马消失了,效果立竿见影!8.搜索引擎
  复杂查询以及一些聚合计算不适合在数据库中做,可以利用搜索引擎来实现,另外搜索引擎还可以帮我们很好的解决跨库、跨数据源检索的场景。9.产品逻辑优化
  业务逻辑优化经常会容易被忽略,但效果却往往比数据库性能优化、JVM调优之类的来的更明显。
  举一个例子,12306春运抢火车票的场景,由于访问的人多,用户点击"查票"之后系统会非常卡,进度条非常慢,作为用户,我们会习惯性的再去点"查票",可能会连续点个好几次。
  假设平均一个用户点5次,则后端系统负载就增加了5倍!而其中80%的请求是重复请求。
  这个时候我们可以通过产品逻辑的方式来优化,比如,在用户点击查询之后将"按钮置灰",或者通过JS控制xx秒只能只能提交一次请求等,有效的拦截了80%的无效流量。
  以上!
  更多架构技术干货,私信【架构】即可查看我原创的300期+BAT架构技术系列文章与1000+大厂面试题答案合集。

这样的驾驶技巧教练教过你吗?你在驾校里学习的时候,车开的再好也只不过是一只菜鸟,直到有一天你拿到了驾驶证,自己上路开车时,你才能真正的体会到菜鸟和老家的区别。因为一些小技巧驾校教练并不会全部都告诉你的(也并不注定载入史册的美联储议息夜缩减QE几无悬念还有哪些看点?财联社(上海,编辑潇湘)讯,北京时间11月4日凌晨2点,美联储将公布最新利率决议美联储主席鲍威尔则将于0230召开新闻发布会。对于金融市场而言,这个美联储议息夜注定将载入史册业内已即好玩又好用我的2021数码产品清单,生产力工具和影音娱乐都要前言大家好,俺又来了!时光荏苒,一转眼2021年就要过半了,我的很多数码产品也进行了迭代更新。而没有更换的,大多数都是饱经风霜,值得推荐的好玩意儿。今天,我就来推荐一些我正在用的数罗永浩收到限制消费令罗永浩工作导致误会,限消令已取消罗永浩收到限制消费令?罗永浩工作进度导致的误会,限消令已经取消4月4日消息,近日罗永浩因为直播带货而大火,为的就是赚钱还债。不过,今天有媒体报道称,锤子科技及罗永浩收到了限制消费令关于推进地理信息保密处理技术研发和服务工作的通知自然资源部办公厅关于推进地理信息保密处理技术研发和服务工作的通知自然资办发202122号各省自治区直辖市自然资源主管部门,新疆生产建设兵团自然资源局,国家林业和草原局,中国地质调查LK分享什么是激光雷达技术?它是如何工作的?激光雷达(或称光探测和测距)是一种常用的遥感方法,可用于测量物体在地球表面的精确距离。尽管激光雷达在20世纪60年代就已首次被安装在飞机上使用,但直到20年后才得到普及。20世纪82021年度自然资源标准制修订工作计划印发,测绘地信标准在列近日,自然资源部办公厅发布2021年度自然资源标准制修订工作计划,工作计划中涉及15001100012000数字线划图生产地理实体数据技术规程倾斜摄影三维模型大比例尺测图规范三维地一辆车内17个孩子,安全问题有没有考虑过2019年6月26日,吴桥交警大队接到一则匿名举报称收到此举报后,吴桥交警大队第一时间组织专人开展暗访调查,根据调查结果,网友反映的情况基本属实。6月26日下午17点13分左右,吴陪孩子玩转海底世界海底世界,随拍!海底世界,随拍!海底世界,随拍!海底世界,随拍!海底世界,随拍!海底世界,随拍!海底世界,随拍!海底世界,随拍!海底世界,随拍!海底世界,随拍!海底世界,随拍!海底假期宅家做饭,有哪些值得推荐的食材挑选和烹饪的技巧?前阵子喊了一哥们来家里吃饭,两个人斜靠在椅子上吃着饭,就着啤酒,吹着牛。两杯啤酒下肚,他突然感慨点外卖在外面吃饭,也会觉得好吃,但是总觉得少了些什么,在你家里,这样随意坐着,吃着你罗永浩抖音直播首秀将于4月1日开始基本不赚钱交朋友3月26日消息,今天中国第一代网红罗永浩直播带货来了。罗永浩表示,作为硕果仅存的中国第一代网红,我将于4月1日晚8点在抖音示范直播带货。我们准备了很多好东西,基本上不赚你什么钱,就
陕西加强农村电商人才培训日前,陕西省举办全省农村电商培训班,全省各地2000多名农产品电商从业者参加培训。本次全省农村电商培训班由省农业宣传信息中心主办,邀请了相关专家教授以及资深从业者,通过微信群钉钉群拍的视频声音不清楚?有必要添置麦克风吗?看看我都怎么解决的如今拍摄短视频或者是Vlog,其实画面好看,只做到了一半。如今在网络上常见的视频,其实核心元素有四个,画面,声音,字幕,背景音乐。很多朋友会在相机,镜头,灯光这些方面下下功夫,但是星图金融践行加减乘除法则交易量连续5年破万亿任何商业行为的背后都有其商业模式的本质,按照著名管理学专家奥斯特瓦德的观点,商业模式的本质就是创造价值传递价值收获价值的全过程。作为国内金融科技领域的样本企业之一,星图金融从成立至麦岩智能完成两轮融资加速智能服务机器人研发近日,智能服务机器人公司麦岩智能宣布完成近亿元的天使轮及PreA轮融资。本轮融资由耀途资本等领投,元禾原点界石投资雅瑞资本ScalePartners势乘资本跟投,ScalePart如何选择管理系统?有哪些需要注意的事项?什么系统好用选择那个结合自身实际情况才是最好1一定要选择适合自已需求的系统,这个需求可以是当前的,也可以是未来几年的。2既重品牌又不重品牌,这个软件品牌首先得有非常多的客户群体和经宁德时代股价跌破500元关口零跑赴港上市被坐实。本周,国内外新能源汽车市场都有哪些大事发生?宁德时代大跌9,2月市值蒸发两千亿2月11日,宁德时代(300750。SZ)股价继续下跌,截至收盘报489。99元,失守500元大关,跌Python笔记命令行参数解析有些时候我们需要通过命令行将参数传递给脚本,C语言中有个getopt()方法,python中也有个类似的命令行参数解析方法getopt()。python也提供了比getopt()更荣耀9X,6128的,是安卓系统好,还是鸿蒙系统好?我是荣耀9x,使用鸿蒙系统后,感觉与原来的安卓系统差别不大,当然也是有一些小的改进的,但总体来讲,差异不大,运转的流畅度还是不错的,从支持国产系统的角度来讲,我支持使用鸿蒙系统。感微软着眼于蓬勃发展的游戏行业,计划收购动视暴雪微软和动视暴雪的合并预计明年敲定微软着眼于蓬勃发展的游戏行业,计划收购动视暴雪旧金山微软公布了其收购美国视频游戏巨头动视暴雪的大手笔计划,这是游戏行业创纪录的收购。预计将于明年完成字节28岁员工猝死有感字节跳动确认28岁员工离世资本压榨内卷房车婚姻孩子焦虑压力延迟退休,一代人有一代人的难心脏和字节只有一个跳动,生命和工资只能拼一个多多!他不是第一个猝死的年轻人,也不是最后一个,悲1110新材料韧性和弹性强强组合科技日报北京2月22日电(记者张梦然)据最新一期自然材料报道,美国研究人员已经创造出一种可拉伸且非常坚韧的新材料。新材料属于更广泛的离子凝胶类别,离子凝胶是一种聚合物网络,含有在室