Troubleshooting 专题 - 问正确的问题 得到正确的答案 环球短讯

博客园   2023-04-03 11:39:34

在很多公司中,IT、数据中心、业务系统一出故障,会有很多人被叫到作战室(就是一个为了解决该问题,而把所有相关人员集中在一起的一个会议室), 但是对于这个问题他们是否可以修复, 是否他们应该负有责任, 经常没有线索.

「证据」(基础架构监控数据, 日志文件, 用户投诉等等) 表明了症状, 但是与 root cause 无关. 只有很多的日志信息和高级别的告警并不会给你与这个问题根因真正相关的答案.

为了远离这种场景, 真正的「证据」应该是什么? 你应该问什么问题?


(资料图片)

是一个用户抱怨还是所有用户都受影响?

「只是」CEO 抱怨一个问题, 因为一份 BI 报告在他的老 IE7 上无法工作? 或者「只是」使用联通上网的终端用户? 了解一个问题发生在非常小的用户群, 还是说全中国的用户都受到影响, 是重中之重.

交付链(如: CDN, 第三方, ISP, 云供应商, 托管服务, 手机网络)有问题么?

当代 web 应用、移动服务、互联网服务、O2O业务等依赖一长串交付链的服务. 知道每个的影响会告诉你是否应该检查自己的数据中心, 还是说应该打电话给服务商.

关键事务是否受影响?

是否关键业务比如保险投保受到影响? 还是说报错的页面早已经不用了? 你需要监控最关键的业务性能.

是这个应用的问题么?

应用很复杂. 如果你知道问题是发生在这个应用里, 你然后需要进行故障隔离, 然后让对应的开发和架构师定位问题效率更高.

这个问题与糟糕的代码有关么?

如果客户使用加载缓慢、体验很差,应用响应时间很慢, 第一个问题应该是是否与糟糕的代码有关. 你需要分析代码级别的性能热点来找到是否原因是低效的算法还是缺乏代码和架构的最佳实践.

这个问题在虚拟机、容器、中间件...里么?

如果虚拟机(如:VMware, EC2...)或你的容器(Docker)或你的中间件或你的应用运行时(如:tomcat)没有正确的 size, 或者和其他虚拟机及容器存在资源争用也可能引起性能问题. 如果你知道虚拟机的性能影响到了应用, 你会知道引入 VM 专家, 而不是应用开发, 来解决这个问题.容器、中间件、应用运行时同理。

是基础架构导致的问题么?

如果不是应用自身问题, 而是因为 app 运行在资源不足的基础架构上会怎样? 如果需要运行垃圾回收的 CPU 因为超用导致不可用会怎样? 那么是时候考虑拆分应用或扩展基础架构了.

是应用服务器的问题么?

因为不正确的配置或错误的部署, 应用服务器也可能是性能问题的原因. 正确的资源池(线程, 数据源等)大小, 安全配置或日志参数都会影响性能. 如果发现是应用服务器的问题, 如果是商业应用服务器,你需要联系 IBM, Oracle, 微软专家;如果是开源应用服务器,你需要联系贵司的相关中间件专家.

总结

有了这些问题的答案, 你可以消除作战室, 迅速定位问题根源, 优化并找到解决方案. 所以不需要 20 人的作战室, 你只需要3个人 - 一个开发, 一个测试, 一个运维 - 评估详细的性能 insight, 并引入需要的专家. 完美!

三人行, 必有我师; 知识共享, 天下为公.本文由东风微鸣技术博客 EWhisper.cn 编写.

相关新闻

猜你喜欢

Troubleshooting 专题 - 问正确的问题 得到正确的答案 环球短讯

2023-04-03

多家银行加快数字化转型 金融服务更便捷

2023-04-03

世界新消息丨焦点访谈丨电商助力 跑出兴农“加速度”——打通最后一公里

2023-04-03

今日讯!早报:realme GT Neo5 SE即将发布 ROG将打造新掌机

2023-04-03

2023厦门马拉松开跑 35000名跑者展开耐力角逐 独家焦点

2023-04-03

微头条丨让大学生远离不良“校园贷”还需多方合力

2023-04-03

【我们的家园】四川绵阳:互帮互助互学 民族团结之“花”盛开校园_天天新消息

2023-04-03

环球短讯!最近疯狂打喷嚏,流鼻涕,是普通感冒还是过敏性鼻炎?

2023-04-01

211大学全部名单 全国211大学排名一览表|全球播报

2023-04-01

【世界聚看点】海南太阳河温泉花园房价会降价吗?太阳河温泉花园房价高涨了吗?

2023-04-01

每日关注!警惕手机软件通过陀螺仪进行监听

2023-04-01

隐匿在陕西镇巴的小众村落,被一片李子花海所包围,风景绝美_世界快报

2023-04-01

从个别国家封杀抖音所想到的... 全球实时

2023-04-01

当前快讯:国米将在欧冠小组赛第二轮比赛中客场对阵顿涅茨克矿工

2023-03-31

益普索Ipsos与京东旗下京洞察达成战略合作

2023-03-31

456是什么意思网络用语_456是什么意思 每日头条

2023-03-31

志存高远用来形容哪些人物_志存高远用来形容哪些人? 全球速讯

2023-03-31

3月31日北向资金最新动向(附十大成交股)

2023-03-31

全球热文:覆唐(覆唐txt全集下载)

2023-03-31

看热讯:长晶科技IPO:杨国江控制34.38%股份,清华大学EMBA在读

2023-03-31

三月阳春花似海 世界热闻

2023-03-31

环球观焦点:停息挂账的广告是真的吗?帮忙申请停息挂账是真的吗? 当前快讯

2023-03-31

中信股份(00267)更改呈列货币为人民币|全球视讯

2023-03-31

观速讯丨洛克王国邪恶稻草人怎么玩 邪恶稻草人活动攻略[多图]

2023-03-31

育碧巴黎员工在新报告中揭示了精疲力竭的加班文化-世界观察

2023-03-31

精彩图集