宕机监控(宕机监控是什么)

一、服务器宕机是什么意思

“宕机”的拼音读法为：dàng ji。宕机属于计算机的术语，指电脑或者服务器不能正常工作。口语中我们简单地把停掉机器叫做down机，转换为汉字是“宕机”，不过多数人都叫做“当机”/“死机”，虽然不规范但却流行。

down就是up的反义，就是计算机不能正常工作了，包括一切原因而导致出现的死机。

通俗一点来说，宕机我们完全可以理解为服务器或者电脑出现故障，导致了无法正常工作。相信我们在浏览一些不知名的网站，有的时候出现无法访问的问题，那么这种现象都可以叫服务器宕机。

B站回应崩了：部分服务器机房发生故障

周二( 7月 13日)晚间有消息称，B站出现服务器宕机事故。消息传来之后，哔哩哔哩股价短线走低，涨幅收窄至 3%。

稍早前，有多位网友反映，B站网页端和移动端均出现加载失败现象，有网友一开始还以为是手机或者信号的问题。

针对昨晚哔哩哔哩全平台崩溃一事官方现回应称，B站的部分服务器机房发生故障，造成无法访问。技术团队随即进行了问题排查和修复，现在服务已经陆续恢复正常。

除此之外，官方未对任何服务器方面或技术方面的细节进行讲解。

二、如何检测一台机器是否宕机

检测一台机器是否宕机的应用场景如下：

1,工作机器宕机，总控节点需要能够检测到并且将原有服务迁移到集群中的其它节点。

2,总控节点宕机，总控节点的备份节点（一般称为Slave）需要能够检测到并替换成主节点继续对外服务。

检测一台机器是否宕机必须是可靠的。在大规模集群中，机器可能出现各种异常，比如停电，磁盘故障，过于繁忙导致假死等。对于机器假死，如果总控节点认为机器宕机并将服务迁移到其它节点，假死的机器又认为自己还可以提供服务，则会出现多个节点服务同一份数据而导致数据不一致的情况。

首先必须明确，理论上检测另外一台机器是否宕机是无法做到的，有兴趣的同学可以参考Fischer的论文。可以简单理解如下：A机器往B机器发送心跳包，如果B机器不发送响应，A无法确定B机器是宕机了还是过于繁忙，由于A和B两台机器的时钟可能不同步，B机器也无法确定多久没有收到A机器的心跳包可以认为必须停止服务。因此，A机器没有办法确定B机器已经宕机或者采取措施强制B机器停止服务。

当然，工程实践中，由于机器之间会进行时钟同步，我们总是假设A和B两台机器的本地时钟相差不大，比如相差不超过0.5秒。这样，我们可以通过Lease机制进行宕机检测。Lease机制就是带有超时时间的一种授权。假设总控节点需要检测工作节点是否宕机，总控节点可以给工作节点发放Lease授权，工作节点持有有效期内的Lease才允许提供服务，否则主动下线停止服务。工作节点的Lease快要到期的时候向总控节点重新申请Lease（一般称为renewLease），总控节点定时检测所有工作机的Lease授权是否合法，如果发现某台工作机Lease失效，可以将工作机上的服务迁移到集群中的其它机器，这时因为工作机发现自己Lease失效会主动停止服务。当然，这里需要注意，由于总控节点和工作机的时钟可能不一致且有网络延迟，总控节点上的Lease超时时间要长，也就是说，如果工作节点的Lease超时时间是12秒，总控节点可能需要13秒后才能确认工作节点已经停止了服务，从而避免数据不一致问题。

同构节点之间的选主也有一个宕机检测问题。比如总控节点宕机，备份节点需要能够检测并升级为主节点继续对外服务。Mysql数据库经常采用Heartbeat+ DRBD(Distributed Replicated Block Device)+ Mysql的高可用性方案，据说能够达到3个9的高可用性，主节点和备节点维持Heartbeat心跳，当提供服务的主节点出现故障时，备节点的Heartbeat检测到主节点没有心跳（例如，Ping不通主节点），备节点自动接管虚拟IP，升级为主节点提供Mysql读写服务。由于Heartbeat检测机器主节点宕机不可靠，这个方案存在众所周知的脑裂问题，即集群中可能同时存在多个主节点同时提供服务。解决这个问题本质上还是需要引入仲裁节点，比如Heartbeat+ DRBD方案中引入Fence节点使出现问题的节点从集群中脱离，或者引入分布式锁服务，比如Chubby的开源实现Zookeeper服务。分布式锁服务实现主节点选举大致如下：主节点和备节点到Chubby中抢锁，抢到锁的节点在锁的有效期(Lease期)内提供服务，当主节点锁的Lease快要到期时，主节点申请延长锁的超时时间，正常情况下分布式锁服务总是优先满足主节点的请求，当主节点出现故障时，备节点能够抢到锁切换为主节点提供服务。

最后还有一个问题，假设总控节点通过Lease机制检测工作节点是否宕机，这种方案是可靠的，不过当总控节点宕机时，如果不采取任何措施，集群中的所有工作节点都将因为无法重新申请Lease而停止服务，这就是带有总控节点的设计固有的脆弱性，某个设计或者编码的错误都有可能造成严重的影响。解决这个问题一般会有一个叫做Grace Period的机制，工作节点Lease超时时将停止服务，但是工作节点并不一开始就重启或者下线，而是处于一种危险状态(称为Jeopardy)，这种状态持续一个Grace Period，比如45秒。如果在Grace Period内总控节点重启，工作节点和总控节点重新联系上从而可以切换为正常状态继续提供服务。

三、宕机是什么意思

简要回答宕机是指操作系统无法从一个严重系统错误中恢复过来，致使系统长时间无响应，只能重启计算机的现象。

当某位计算机维修人员对普通客户说，你的计算机经常宕机吗？相信很多用户都无法回答，毕竟宕机这个词太专业了，很多人都不明白是什么意思，下面让我们一起去了解宕机的真实含义吧。

详细内容 01

一般情况下宕机指的就是计算机主机出现意外故障而死机。其次，一些服务器例如数据库死锁也可以称为宕机，一些服务器的某些服务挂掉了。

02

一般来说，普通的电脑出现故障，称之为“死机”，很少会说宕机;而一些知名网站或者媒体服务器出现故障时，通常会被报道为宕机。

03

宕机是一种非常常见的现象，一般是指网站服务器出现故障，导致服务中断。由于服务器通常都是365天不间断的工作，因此很多网站都会出现宕机故障，不过大网站通常会配备多台服务器，因此宕机出现的概率极少。

04

对一些中小网站来说，其实每天都在上演宕机，只是鲜为人知罢了。媒体从来只会曝光成功的大型网站宕机故障，一些失败的企或小网站，是没有理会或在乎的，因此宕机事件也不是经常有报道，但是很多宕机现象在很多中小网站中，基本天天都在上演。

05

防止宕机的方法：可以设置一个宕机警报框架，对有可能发生宕机的网站进行监控，一般情况下，我们可以设置15分钟就诊断一次，从而减少出现宕机的几率。