好好的服务器，怎么突然只能读不能写了？
我在 dmesg 里看到这行，是凌晨一点半。EXT4-fs (sda3): Remounting filesystem read-only往前翻几行，还有一句更要命的：sd 0:0:0:...
分类 · IDC运维
当前分类下共有 42 篇文章。
机房一个网口插错，整个内网卡了半小时
周三上午十点多，客户前台打电话过来，说电脑打不开网页了，微信也转圈。我让他们先别急，问了一句是不是全公司都这样，她说是，楼上楼下都一样。先看出口。我们那条专线带宽跑得不高，一百兆的线用了...
监控页面白屏，为什么浏览器连报错都不弹？
「监控页面白了，你们看下。」早上 9 点 12，客户运维老周在群里发的，后面跟了张截图。整个浏览器窗口一片白，连浏览器的报错页都没有，就是白。我第一反应是 grafana 挂了。这套是上...
服务器网卡好好的千兆，怎么自己掉成百兆了？
上周客户在微信上找我，说他们往服务器传备份文件特别慢。以前一百多兆每秒的速率，那天只有 10MB/s 出头，传一个 40 多 G 的库，照这速度得传一个多小时。客户原话是："勇哥，是不是...
磁盘明明还剩 33G，一写文件就 No space left on device
周三下午三点多，客户在微信上发来一张截图，是他们官网后台上传商品图时的报错：No space left on device。紧跟着又补了一句：勇哥，服务器硬盘是不是满了？我自己看了下，还...
凌晨两点启动的备份，上午十点还在跟业务抢磁盘
周四上午十点一刻，客户电话打过来，语气还算平静，说系统"有点卡，页面要转半天，偶尔还报个错"。我心想大清早能有多大事，先远程上去看一眼再说。top 一开我就愣了：CPU 使用率不到 20...
网站跑一阵就 502，nginx 重启就好，我前后折腾了三天
周一上午十点来钟，客户在群里发了个截图：浏览器里一片白，中间一行 502 Bad Gateway。配一句"又打不开了，刷新几下能好，过一会儿又这样"。我第一反应是问：什么时候开始的？客户...
客户说服务器最近特别慢，一查 CPU 全被拿去挖矿了
客户报障，说他们那台跑业务的 Linux 服务器最近一周越来越慢，特别是下午，卡得远程操作都一弹一弹的。我上去先看了下负载，load average 直接飙到 8 点多，但这台机器平时也...
公司网络一到下午就卡，换了光模块也没用，最后发现是 conntrack 表满了
客户的网络有个怪毛病：每天上午都好好的，一过中午十二点就开始卡。网页转圈，远程桌面用着用着就断，但内网互访倒是没受什么影响。下午六点以后，又自己好了，跟定了闹钟似的。客户先怀疑运营商，宽...
新装的系统动不动就卡一下，排查半天，是这块 SSD 在悄悄掉盘
客户新买了两台服务器，配置不低：E5 的 U，64G 内存，系统盘是两块 Intel 的 SSD 做的 RAID1。装好系统、跑上业务，看着一切正常。但用了没两天，客户就反馈：机器时不时...