重庆营销网站建设公司排名,备案 网站负责人,做我的奴隶腾讯网站,政务服务网站建设性建议1.跟进生产服务器内存无故增长的问题#xff08;目前已通知操作系统提供方进行排查#xff09;#xff0c;记录排查过程。
11月27日上午10点50分中心客户反馈#xff0c;政通雄安app中的租赁入口进入之后显示空白#xff0c;开始着手排查#xff0c;一下是排查步骤…1.跟进生产服务器内存无故增长的问题目前已通知操作系统提供方进行排查记录排查过程。
11月27日上午10点50分中心客户反馈政通雄安app中的租赁入口进入之后显示空白开始着手排查一下是排查步骤
第一步登录超算中心app部署服务器10.xx.94主、10.xx.95备机通过堡垒机服务登录到94服务器机器因为内存占用过高死机。
第二步为了解决生产问题将备机10.xx.95THS 服务进行了重启先保证生产环境不受影响奇怪的是为什么没有进行主备自动切换。
第三步为了生产环境的完整重启reboot 主服务器10.xx.94重启之后的机器内存占用只有5%分奇怪接下来就要分析是什么占用了大量的内存
THS高可用的切换策略HA监测到主机的httpserver不存在的时候切换 使用命令sar -f /var/log/sa/sa27查看27号之前每天的内存使用情况发现内存内存一直在逐步升高。sar命令是系统活动的报告记录30天的10分钟记 录一次 因为重启之后主机的内存已经降至5%所以我们开始转换思路对备机进行分析 我们查看备机的会后内存也很高71%,(本机内存16G) commond line 命令top查看系统各个进程是内存、cup占用情况 输入m查看系统内存使用的百分比 命令free -m查看内存的使用情况 命令ps aux --sort-%mem 列出所有进程并按照内存使用率进行排序 命令ps -e -o pid,rss | awk {sum$2} END {print sum} 将所有进程的实际使用内存加起来 命令sudo systemctl list-units --typeservice --staterunning查看系统中正在运行的服务 命令ss -a 查询所有的socket 链接 命令sync echo 1 /proc/sys/vm/drop_caches sync echo 2 /proc/sys/vm/drop_caches sync echo 3 /proc/sys/vm/drop_caches清理缓存 以上查询活成都尝试过之后依然没有分析出到底是谁消耗了更多的系统内存于是我们想在测试环境上进行验证 4.测试机器我们写在了安装的安全组件一下操作之后77服务器上面除了操作系统什么也没有内存依然居高不下所以我们怀疑可能是操作系统的问题 -----------------------------------77超算测试服务器卸载安全组件前----------- Tasks: 185 total, 1 running, 184 sleeping, 0 stopped, 0 zombie %Cpu(s): 0.3 us, 0.6 sy, 0.0 ni, 99.0 id, 0.0 wa, 0.0 hi, 0.1 si, 0.0 st MiB Mem : 48.9/15519.0 [||||||||||||||||||||||||||||||||||||||||||||||||| ] MiB Swap: 0.0/0.0 [ ---------------------------------77服务器卸载安全组件后------------- top - 16:20:29 up 52 days, 5:18, 1 user, load average: 0.02, 0.04, 0.01 Tasks: 177 total, 1 running, 176 sleeping, 0 stopped, 0 zombie %Cpu(s): 0.2 us, 0.2 sy, 0.0 ni, 99.5 id, 0.0 wa, 0.0 hi, 0.0 si, 0.0 st MiB Mem : 45.8/15519.0 [|||||||||||||||||||||||||||||||||||||||||||||| ] MiB Swap: 0.0/0.0 [ ] --------------------------------77服务器停止了THS控制台java进程之后-- top - 16:25:50 up 52 days, 5:24, 1 user, load average: 0.00, 0.03, 0.00 Tasks: 176 total, 2 running, 174 sleeping, 0 stopped, 0 zombie %Cpu(s): 0.0 us, 0.2 sy, 0.0 ni, 99.8 id, 0.0 wa, 0.0 hi, 0.0 si, 0.0 st MiB Mem : 44.4/15519.0 [|||||||||||||||||||||||||||||||||||||||||||| ] MiB Swap: 0.0/0.0 [ ------------------------------77服务器停止了HA之后的结果 top - 09:13:30 up 52 days, 22:11, 1 user, load average: 0.00, 0.01, 0.00 Tasks: 177 total, 1 running, 176 sleeping, 0 stopped, 0 zombie %Cpu(s): 0.0 us, 0.1 sy, 0.0 ni, 99.9 id, 0.0 wa, 0.0 hi, 0.0 si, 0.0 st MiB Mem : 44.4/15519.0 [|||||||||||||||||||||||||||||||||||||||||||| ] MiB Swap: 0.0/0.0 [ 等待操作系统方排查后续补全
