记一次生产环境救火-20210716

今天起了个早,早早来到公司,本来吃完早餐,泡好咖啡,在工位上气定神闲的刷刷昨天的财经信息,准备开启今天的工作。想起昨天微信群里有人反映系统,系统加载较慢,于是打开阿里云后台,准备看看服务器负载情况。负载有一点点偏高,于是准备用万能解决办法,重启服务器(电脑90%的问题能通过重启解决,重装系统能解决剩下的9%,再剩下的1%就比较棘手了)。

正当我准备重启时,突然,微信群里的报警信息又来了,接着各个微信群的报警信息,相继弹出来。整改晋西北都乱成了一锅粥。

记一次生产环境救火-20210716

我心想慌什么,象没见过世面似的。于是我祭出了重启大法,待重启完毕,刷新,我期待的页面流畅加载没有出现。再刷,依旧页面加载中,看负载情况,跑到100%。

没办法,2核的服务器上放了17个站点,我之前就提议了升级一下服务器配置,刚好升级一下吧。于是祭出第二招,升服务器配置,公司申请流程有点慢,得特事特办,直接给领导微信申请。

服务器升成了8核16G内存,负载是降下来了。页面也流畅加载了。加载出来的却是404页面(系统只要报错就跳404)。各个微信群还在催,说真的心理还是有点慌的,因为没有动任何配置的情况下,出现404,这种情况暂时就没法定位问题原因。

记一次生产环境救火-20210716

那问题出现了,就得排查,从入口文件开始打断点追踪,追到一个session初始化时,开始出现404,问题出在session?继续进入session初始化中看看。最后发现是session存在数据库里(这是个老项目,没去注意session的细节)。

于是把session表数据一清,ok总算是能正常运行了,虚惊一场。

这也充分说明,遇事不能慌,无论哪个领导怎么着急也不要去狡辩。事实就是摆在这:1.系统挂了;2.不知道什么原因挂的。3.没有支援。4.这个问题需要用最快的速度解决。这样一分析,除了去找问题并解决,其他做法都是不合理的。

在此记录一下,方便作为以后解决各种问题的方法。

原创文章,作者:Zeyu,如若转载,请注明出处:https://jinzhijun.cn/develop/550

(0)
ZeyuZeyu
上一篇 2021年7月11日
下一篇 2021年7月18日

相关推荐

  • 打破壁垒:使用 PHP 和 Nginx 在本地开发 OpenAI API

    最近在开发一个OpenAI的产品,但是由于众所周知的原因, OpenAI API 有 IP 限制,使得在本地开发变得困难。开始我的想法是,把代码放服务器上去跑,可是这样一来,要修改…

    2023年4月10日
    4.4K
  • 群晖docker 安装gitlab

    一、安装 1.1 在套件中先安装Docker套件。 1.2 在docker中,注册页签下,搜索:gitlab,双击下载,选latest 1.3下载完成后,在映像页签下,选中gitl…

    2022年3月13日
    3.4K
  • fiddler修改请求信息重新执行

    最近在做一个仿制功能开发时,碰到了这样一个场景:开发的系统需要在三方app里运行,并且在app里执行完后会产生一些数据,然后需要将这些数据保存起来。因为开发是在本地,本地的环境无法…

    2022年7月1日
    3.1K
  • 记录一下宝塔搭建Redis遇到的一个小问题

    最近在对接广东省互联网医院监管平台时,发现广东这边是要求平台必须要有医生和患者要有视频通话功能。因为原本的消息通话是用的网易IM,所以音视频也选的网易。网易音视频能实现通话视频云录…

    2021年6月29日
    1.5K
  • vmware最小安装centos并配置固定本地固定ip

    最近公司互联网医院的接入工作差不多进入了尾声,接下来就是整理一些资料什么的,所以有些空闲时间,想着学一下swoole,然后就碰到了安装虚拟机的问题。之前也装过很多次,但是每次安装都…

    2021年8月16日
    1.8K
  • codeigniter发邮件sendmail报错

    最近将公司系统从Windows换成了Linux,大部分功能都能正常使用,唯独发送邮件通知功能时,出现了错误。通过var_dump($CI->email->print_d…

    2020年11月12日
    1.6K
  • 红米8A刷机root流程记录

    自从安卓版本升级以后,app抓包https就成了问题,所以上周就在咸鱼上买了一个红米8a,计划着root手机来做开发测试使用。在绑了小米账号7天后,终于可以解除bl锁,然后把手机r…

    2023年3月5日
    6.0K
  • docker的备份和迁移

    1.查看容器 2.容器保存为镜像 php是容器名称 myphp是新的镜像名称 此镜像的内容就是你当前容器的内容,接下来你可以用此镜像再次运行新的容器 然后查询镜像,看一下结果 3.…

    2020年11月17日
    1.5K
  • 常见的Web攻击手段(转)

    午饭期间,读者小李与我闲聊,谈到上周去面试的过程。经典的高开低走,面试初期答得还可以,但是到后面却不尽人意。其中有个面试问题引起了我的注意,面试官当时问小李:你知道有哪几种常见的&…

    2021年10月10日
    1.3K
  • 阿里云OSS图片上传与加水印签名访问

    最近公司的一个系统有一个需求,因为公司的产品有一些特殊性,经常有可能会被同行盗图,所以需要将所有的产品图片加水印展示。但是还有一个需求,内部人员可能需要查看原图,所以,这个就有点奇…

    2021年4月30日
    4.5K

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注