美文网首页又拍云Tech Minds
Tech Minds | 邵海杨:三大法宝,应对互联网运维三大挑

Tech Minds | 邵海杨:三大法宝,应对互联网运维三大挑

作者: 又小拍 | 来源:发表于2016-12-01 14:14 被阅读20次

    分享 | 邵海杨
    整理 | 路途

    Tech Minds是又拍云主办的高端技术领导人私享会系列活动,每个月在全国不同城市巡回举办。为了保障私享会的分享效果,我们对参会人数进行了控制(15人以内),参会者主要是互联网公司技术负责人(C-Level、总监级或运维负责人)。
    Tech Minds的第一、第二期分别在深圳、广州举办期,第三期Tech Minds将于8月27日移师北京。

    运维乃IT之本。
    8月6日,以“运维与架构之美”为主题的又拍云Tech Minds第二期在广州举办。作为10~15位嘉宾规模的小型私享会,Tech Minds不仅关注技术,同时关注管理,“老司机”分享的经验教训一定能让你有所启发。
    之前小拍发布了优维科技DevOps管理专家王津银在的Tech Minds第二期上的精彩分享
    今天小拍带来又拍云运维总监邵海杨的分享,邵海杨从架构设计和协同管理的角度诠释了运维的经验启示。

    过度的优化就是毁灭


    互联网运维主要解决三大挑战:高并发、高可用性、快响应。互联网运维或云运维难免要经历几大阶段:
    第一个阶段,机器从少变多,这个阶段遇到的挑战就是业内较火的自动化部署,也叫作高效运维,实现服务器轻松部署。
    第二个阶段,监控的体量从小变大,如果只有几十台机器的时候,用一台电脑,单屏或多屏就可以完成,可是当面对3000台机器、几十万的监控项的时候,就需要用一些其他的工具,比如说又拍云正在用的小米的监控、分布式的Zabbix、ELK大数据日志监控等等。
    第三个阶段,性能要求由慢到快,随着负载增大,应用复杂,要想把服务器的潜力性能全部挖掘出来。这个阶段对运维人员的经验、开发的内功要求都会很高。
    根据又拍来自身的运维发展史,从“可用”,到“用好”, 现在往“好用”的方向前进。
    我认为,过度的优化就是毁灭,运维的艺术一定是审时度势,在合适的时间,用合适的资源去完成合适的事情,做到弹性可控。如果在这个进化过程中,不把握好节奏和协调性,自动化部署时机器虽然增加了,但是监控不到位,这个时候就会失控, 好事也会变成灾难, 所以,除了有加速器还要有刹车机制 。
    在运维的道路上,一是弹性可控,二是恰到好处,过度设计、过早优化取决于公司的综合条件。”

    运维的法宝,三位一体


    在运维、监控、性能三个方面,有三大法宝:运维自动化、监控常态化、性能可视化。

    首先是运维自动化。运维的自动化是基础,又拍云现在已经过了运维自动化这个阶段。我们会通过一些工具把工作做自动化、流程化。又拍云的4000多台机器,绝大多数都是自有采购的,要求服务器厂商根据我们的需求做一些定制,如将又拍云自有的嵌入式系统烧进去,出厂时直接发往机房。因此,就算业务扩展非常忙的时候,都没有发生过几十台机器在公司上电, 部署系统, 打包发货的情况,服务器直接从产线发到机房, 连上网络,就可以对服务器进行远程控制,甚至做系统整体升级。
    第二点是监控常态化。不同的阶段它其实有很好的一些工具会出现。比如早几年前没有ELK,只能靠Zabbix这样的工具。现在的Zabbix监控,我们会根据不同的运营商分配不同的节点,构建分布式的监控系统。
    第三点性能可视化。性能可视化主要是提供一个延续的健康报表,争取内部资源。很多运维又苦又累,其实苦于没有过多的资金,也没有过多的人力,但在业务发展期,又需要运维保证设备负载稳定,这是一个非常矛盾又现实的问题, 而专业术语老板听不懂,这样就更不容易获得资源支持。因此,可以提供一些数据报表,便于老板理解,从而争取资源。
    一个好的运维架构师,绝对不会局限于运维这个专业领域, 而是要像优秀的销售一样,能够说的漂亮,抓住老板和开发人员的焦点和共鸣之处, 也要写的生动,利用数据可视化的工具,生成浅显易懂的图表,争取资源, 敢赌敢拼的精神, 运维往往是背锅侠和接盘侠的化身,但是如果能够抓住机会改变, 就是成功逆袭。

    让机器像人一样有感知


    运维的指导思想,就是让人像架构一样扩展。
    运维人熟知web如何扩展,数据库如何读写分离、动静分离、层层缓存等等,其实在管理运维团队的时候,也是要像架构一样可扩展,从而避免失控。
    第一,要做到与人无关,是人总会犯错, 受情绪影响总会误操作,但是机器不会。所以尽量能用机器生成的方式就不要浪费人力,能够将变化的东西固化成一个流程。要做到不管是谁操作,无论操作了多少次,出来的结果仍然是一样的。
    第二个,就要与己无关。当做到“与人无关”的时候,还要做好培训和工具。这样的话即便某个人不在,至少有后备的人员在,相当于人员的backup。
    第三个,就是与状态无关。大家都知道web的扩展性最强,就是因为它是无状态的,可以通过前端加一个负载均衡做到水平扩容,所以,要把有状态的东西变成无状态,就要利用好消息队列和各种中间件如rabbitmq、kafka、redis等。
    第四个,与数量无关,部署要恒定。就像把操作系统固化以后,无论一天上多少个节点,每天部署多少次,都不受影响。

    海杨的分享有没有Get到你呢?
    关注又拍云,关注Tech Minds,收获你的技术干货。

    相关文章

      网友评论

        本文标题:Tech Minds | 邵海杨:三大法宝,应对互联网运维三大挑

        本文链接:https://www.haomeiwen.com/subject/cxvxmttx.html