V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
gkiwi
V2EX  ›  程序员

如何保证生产系统的稳定性呢?求经验

  •  
  •   gkiwi · 2014-11-13 16:51:09 +08:00 · 2953 次点击
    这是一个创建于 3445 天前的主题,其中的信息可能已经有所发展或是发生改变。
    mysql,redis,rabbit-server,websocket消息服务器,elasticsearch,app的api服务,网站服务,...

    显然如果有一个服务挂了,基本上项目就不能正常运转了.

    预备用supervisord进行服务监控,但还是觉得不安心,请问大家在此时是如何保证这些服务的稳定性呢?服务监控这块也求些经验/工具.

    谢谢!
    15 条回复    2014-11-14 10:57:44 +08:00
    mx1700
        1
    mx1700  
       2014-11-13 16:59:57 +08:00   ❤️ 1
    监控宝
    leo108
        2
    leo108  
       2014-11-13 17:03:50 +08:00   ❤️ 1
    能做主从的就主从,反正就是不要有单点,而且相同的服务不能部署在一个服务器上,尽量不要在一个网段、机房
    msg7086
        3
    msg7086  
       2014-11-13 18:12:47 +08:00 via iPhone   ❤️ 1
    高可用
    szanlin
        4
    szanlin  
       2014-11-13 18:18:25 +08:00   ❤️ 1
    异地容灾备份?
    xuwenhao
        5
    xuwenhao  
       2014-11-13 19:14:45 +08:00   ❤️ 1
    你需要有自动切换和备份,服务挂掉是不能避免的。通常的做法是把服务都注册起来上,然后上游通过服务发现机制发现下游的服务,每个服务都不只一个节点,这样挂掉单个节点,上游的服务的请求,会到下游其他的节点,对外的服务仍然是可用的。

    你说的各种服务,很多有开源的HA的解决方案,自己的App,也可以自己写相应的服务注册和发现机制
    ziyuan
        6
    ziyuan  
       2014-11-13 19:15:19 +08:00   ❤️ 1
    集群,高可用ha,load balance
    gkiwi
        7
    gkiwi  
    OP
       2014-11-13 20:19:08 +08:00
    @mx1700
    @leo108
    @msg7086
    @szanlin
    @ziyuan
    @xuwenhao

    这些短期内不大可能有多台服务器,也就两台把...想从教细的颗粒上进行处理:)
    GeekGao
        8
    GeekGao  
       2014-11-13 20:30:18 +08:00   ❤️ 1
    简单的说,Heartbeat 是你要找的,上手最快、有效的
    tushiner
        9
    tushiner  
       2014-11-13 20:45:37 +08:00   ❤️ 1
    “小王,要是服务器宕机了,你知道会怎样吧?”
    kslr
        10
    kslr  
       2014-11-13 21:15:25 +08:00   ❤️ 2
    app/system/mysql/redis/elasticsearch->newrelic
    api->监控宝
    其他未知
    GhostFlying
        11
    GhostFlying  
       2014-11-13 21:17:55 +08:00   ❤️ 1
    @gkiwi 如果性能不紧张的话,虚拟化?反正目标也是提高冗余
    frankzeng
        12
    frankzeng  
       2014-11-13 21:55:24 +08:00   ❤️ 1
    如果服务挂了,自动重启
    gkiwi
        13
    gkiwi  
    OP
       2014-11-13 22:03:26 +08:00
    @GeekGao
    @kslr

    谢谢两位,我去抽空去研究下!
    msg7086
        14
    msg7086  
       2014-11-14 03:50:10 +08:00   ❤️ 1
    @gkiwi 不会挂的服务器是不存在的……

    所以大公司都是用上千台服务器做集群来保证服务器挂掉也不影响系统工作。
    gkiwi
        15
    gkiwi  
    OP
       2014-11-14 10:57:44 +08:00
    @msg7086 这个晓得.只是想在单机上尽可能提高稳定性:)
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   2574 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 25ms · UTC 01:35 · PVG 09:35 · LAX 18:35 · JFK 21:35
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.