美文网首页Java程序员之言
大型系统重构的步骤梳理

大型系统重构的步骤梳理

作者: java面试笔试 | 来源:发表于2018-09-12 21:59 被阅读5次

目前正在参与公司一个核心大系统的重构工作。本文梳理一下大型系统重构的一些步骤和心得。

概述

随着公司业务不断的发展,用户量不断的增加,对系统的性能要求会越来越高,而原来仓促做出来的项目,其不合理性的地方就会不断的暴露出来。大家如果接触过非常赚钱的互联网产品,一定会知道产品的一个小小的bug,公司就可能损失好几百万甚至几个亿。当产品的用户数达到一定量的时候,对系统的各个方面的要求就越高,例如qps、cpu、容灾、降级、限流、可扩展性、可维护性等等。系统除了要应付大量的并发请求,还必须快速支持各种业务需求,必须对系统进行大重构。

备注:

下面的一些步骤和方式是根据我自己的项目的实际列出的。

业务梳理

要弄懂原来的业务流程,如果有不合理的业务流程,必须进行业务流程优化。这种一般是公司的业务架构师来处理的。

数据库重构

前期的项目,由于赶进度,并没有充足的时间设计表,导致各种冗余表、大表、大量的冗余的字段、扩展性差的表。所以重构系统的时候,可以先从表开始,通过对当前业务的梳理,重新把表整理一下。

1. 字段太多的表,可以根据部分字段的业务属性,抽取成一个新表;

2. 已经不再用的表字段,删除掉;

3. 可以合并的字段,尽量进行合并,例如,想表示一个商品是旅游商品,就没必要新增一个类似is_travel的字段,可以直接在商品类型product_type中增加一个枚举值即可;

4. 根据当前业务,把一些表字段下沉到其他表,从另外一个维度输出;

5. 如果一个表的扩展属性太多的话,可以另外建立一张表存储。

等等。。。。

数据库重构,一般由专门的数据架构师来处理。数据架构师必须和业务架构师紧密配合。

数据迁移

由于对数据库进行了重构,那么旧数据库的数据必须完整的迁移过来。

全量迁移:需要做一个只跑一次的全量迁移程序,把旧数据库中一次性迁移过来;

增量迁移:新系统上线之前,旧系统也一直在工作着,那么新增的数据也必须通过一个增量迁移程序把数据迁移到新数据库。这个增量程序必须一直跑,直到旧系统下线,不会产生新数据。

db数据自检程序

为了验证迁移程序是否正常工作,还必须写一个自检程序,不断的比对新旧数据库中的数据,看看有没有漏迁的数据或者值不相等的数据。

业务接口设计

针对新设计的表和新梳理的业务,重新设计对外的业务接口。当然由于重新设计了接口,方法的入参、出参等都可能不一样了。这样的话,其他系统接入的时候,会遇到一些阻力。

业务接口自检程序

必须通过一个业务接口自检程序,不断的比对新旧业务接口的输出是否一致。这个是一个非常关键的程序,可以帮助检查新数据和新接口的问题。

开发联调

新接口发布SDK后,其他系统可以通过SDK调用新接口,进行开发人员与开发人员之间进行简单的接口联调。这期间,如果遇到业务问题了,必须及时联系业务架构师和数据架构师。适当的情况下,可能业务和表得调整。

就像上文说的,由于业务接口改动比较大,其他系统接入的时候,会遇到很多阻力的。

测试人员介入

除了接口功能测试之外,必须做一个完整的性能测试和稳定性测试。同时必须搭建测试联调环境,与其他系统的测试人员进行联调,其他系统要接入到新接口。

这个阶段,最好找靠谱的测试人员,即懂测试技术技巧又懂业务的。

接入流量

可以先切万分之几的流量到新接口,试试水。有问题的话,及时修改。只要有流量接入,就必须使用各种监控系统实时监控,有问题的马上告警。另外,开发人员也必须经常查看日志系统,及早发现问题。一旦新接口非常稳定后,则可以将全部流量切入到新接口。

观察系统

新接口接入所有流量后,除了监控系统监控接口之外,开发人员必须经常看日志系统,观察系统是否正常工作。最好定一个任务,让开发人员轮流观察系统。

扩展阅读

重构 改善既有代码的设计--笔记

大型分布式Web系统的架构演进

如何快速开发中小型系统

来源:https://my.oschina.net/yomut/blog/714497

公众号:javafirst

相关文章

  • 大型系统重构的步骤梳理

    目前正在参与公司一个核心大系统的重构工作。本文梳理一下大型系统重构的一些步骤和心得。 概述 随着公司业务不断的发展...

  • 大型系统重构的步骤简单梳理

    目前我正在参与公司一个核心大系统的重构工作。写这篇文章就是梳理一下大型系统重构的一些步骤和所见及心得。 概述 随着...

  • 30 - 重构之代码解耦

    重构可以分为大规模高层重构(简称“大型重构”)和小规模低层次重构(简称“小型重构”)。大型重构是对系统、模块、代码...

  • 第十二章 大型重构

    大型重构 12.1 Tease Apart Inheritance (梳理并分解继承体系) 某个继承体系同时承担两...

  • 重构读书笔记-12总结

    重构第十二章 总结 本章展示的是整个系统的整体重构。 1.Tease Apart Inheritance(梳理并分...

  • “领域驱动设计”答疑

    过去一年主要在大型嵌入式系统中进行软件重构的咨询工作。对于大规模的遗留系统重构,一方面会借助领域建模帮助深入了解业...

  • 大型系统架构重构经验总结

    注:本文原创,转载请标明出处。欢迎转发、关注微信公众号:Q的博客。不定期发送干货,实践经验、系统总结、源码解读、技...

  • 当重构遇到糟糕的物理设计

    --- 导语 糟糕的物理设计是对遗留大型系统中进行重构的非常棘手的一个问题,本文相机阐述了遗留系统中存在哪些糟糕的...

  • Extract Method

    被重构的方法没有局部变量 重构前: 重构后: 步骤: 选中要重构的代码 android studio 快捷键 CM...

  • 《重构》- 研究成果

    大型重构 大型重构可能需要耗时数月甚至数年。在这个过程中,你应该根据需要安排自己的工作,只在需要添加新功能或修补错...

网友评论

    本文标题:大型系统重构的步骤梳理

    本文链接:https://www.haomeiwen.com/subject/vqxigftx.html