记一次生产环境救火-20210716

今天起了个早,早早来到公司,本来吃完早餐,泡好咖啡,在工位上气定神闲的刷刷昨天的财经信息,准备开启今天的工作。想起昨天微信群里有人反映系统,系统加载较慢,于是打开阿里云后台,准备看看服务器负载情况。负载有一点点偏高,于是准备用万能解决办法,重启服务器(电脑90%的问题能通过重启解决,重装系统能解决剩下的9%,再剩下的1%就比较棘手了)。

正当我准备重启时,突然,微信群里的报警信息又来了,接着各个微信群的报警信息,相继弹出来。整改晋西北都乱成了一锅粥。

记一次生产环境救火-20210716

我心想慌什么,象没见过世面似的。于是我祭出了重启大法,待重启完毕,刷新,我期待的页面流畅加载没有出现。再刷,依旧页面加载中,看负载情况,跑到100%。

没办法,2核的服务器上放了17个站点,我之前就提议了升级一下服务器配置,刚好升级一下吧。于是祭出第二招,升服务器配置,公司申请流程有点慢,得特事特办,直接给领导微信申请。

服务器升成了8核16G内存,负载是降下来了。页面也流畅加载了。加载出来的却是404页面(系统只要报错就跳404)。各个微信群还在催,说真的心理还是有点慌的,因为没有动任何配置的情况下,出现404,这种情况暂时就没法定位问题原因。

记一次生产环境救火-20210716

那问题出现了,就得排查,从入口文件开始打断点追踪,追到一个session初始化时,开始出现404,问题出在session?继续进入session初始化中看看。最后发现是session存在数据库里(这是个老项目,没去注意session的细节)。

于是把session表数据一清,ok总算是能正常运行了,虚惊一场。

这也充分说明,遇事不能慌,无论哪个领导怎么着急也不要去狡辩。事实就是摆在这:1.系统挂了;2.不知道什么原因挂的。3.没有支援。4.这个问题需要用最快的速度解决。这样一分析,除了去找问题并解决,其他做法都是不合理的。

在此记录一下,方便作为以后解决各种问题的方法。

原创文章,作者:Zeyu,如若转载,请注明出处:https://jinzhijun.cn/develop/550

(0)
ZeyuZeyu
上一篇 2021年7月11日
下一篇 2021年7月18日

相关推荐

  • 搭建以太坊轻节点

    1. 安装 go 语言 安装 go 主要是为了去编译 go-ethereum 源码 查看go版本 2. 安装 git 安装 git 主要是为了拉取 go-ethereum 源码 查…

    2020年11月30日
    5.3K
  • 单点登录SSO设计与实现(转)

    前言: 是时候了解一下SSO相关的知识了,本篇主要是概念篇,发现网上两篇不错的文章,简单整合了一下,原文链接:https://www.cnblogs.com/Java3y/p/10…

    2021年7月29日
    2.5K
  • 群晖docker 安装gitlab

    一、安装 1.1 在套件中先安装Docker套件。 1.2 在docker中,注册页签下,搜索:gitlab,双击下载,选latest 1.3下载完成后,在映像页签下,选中gitl…

    2022年3月13日
    3.7K
  • PHP控制反转(IOC)和依赖注入(DI)(转)

    IOC(inversion of control)控制反转模式;控制反转是将组件间的依赖关系从程序内部提到外部来管理;DI(dependency injection)依赖注入模式;…

    后端 2021年12月21日
    1.5K
  • 虚拟机centos安装kooder

    前天在群晖上安装了一个gitlab,在github上拉了一些项目,想着搜索项目中代码的内容,但是问题就出现了,搜索只能搜项目名和简介。难道要把所有项目拉下来搜索?于是在网上找解决方…

    2022年3月14日
    2.9K
  • CentOS修改yum源

    1. 修改yum源 最近在搭建以太坊节点时,要用到golang编译,但是服务器供应商那边给安装的contos系统默认的yum源没有golang,所以,这边给系统修改成阿里云的yum…

    2020年11月30日
    40.5K
  • Centos安装elasticsearch教程

    最近在部署一个项目是用 laravel开发,项目用到了了 elasticsearch,通过自己的搜索和学习能力不算很费力解决了。下面就整理一下安装elasticsearch教程,服…

    2020年11月26日
    1.8K
  • 打破壁垒:使用 PHP 和 Nginx 在本地开发 OpenAI API

    最近在开发一个OpenAI的产品,但是由于众所周知的原因, OpenAI API 有 IP 限制,使得在本地开发变得困难。开始我的想法是,把代码放服务器上去跑,可是这样一来,要修改…

    2023年4月10日
    4.8K
  • 广东互联网医院监管对接_前置机FTP文件上传

    最近在广东省互联网医院监管对接过程中,有些文件需要同步到前置机上,我这里用到的解决方案是通过ftp上传文件功能实现的,这里记录一下一些遇到的问题。 1.安装,配置ftp服务器软件 …

    2021年5月26日
    1.8K
  • php实现助记词转TRX,ETH 私钥和钱包地址

    TRX助记词转地址网上都是Java,js或其他语言开发的示例,一个简单的功能需要依赖其他环境来实现表示不能忍,毕竟php是世界上最好的语言。【狗头】 一、知识准备 要实现助记词转T…

    2022年8月4日
    8.0K

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注