高手如何应对复杂系统架构的演进

◆◆

业务背景

◆◆

随着业务的复杂性增大、系统吞吐量增长，所有功能统一部署难度加大，各个功能模块相互影响，使系统变的笨重且脆弱；因此需要对业务进行拆分、对系统进行解耦、对系统内部架构升级，来提升系统容量及健壮性。

接下来主要分两部分介绍：系统拆分与结构演变；

◆◆

系统拆分

◆◆

系统拆分从资源角度分为：应用拆分和数据库拆分；

从采用的先后顺序可分为：水平扩展、垂直拆分、业务拆分、水平拆分；

图1 系统分解原则

1、水平扩展

水平扩展是最初始的解决的手段，也是系统遇到瓶颈的首选方案，主要从以下两个方面扩展：

应用加实例，搞集群，把系统吞吐量扩上去。
数据库利用主从进行读写分离，数据库其实是系统最应该保护的资源。

2、垂直拆分

垂直拆分才是真正开始拆分系统，主要是从业务功能角度拆分。如拆出用户系统、商品系统、交易系统等。为了解决拆分后各个子系统之间相互依赖调用的问题，这时会引入服务调用治理。系统复杂度有所加大，但系统基本解耦，稳定性相对提高，做好降级就能避免因其它系统功能异常导致系统崩溃。

业务对应的库也会按照对应的业务进行拆分出用户库、商品库、交易库等。

3、业务拆分

业务拆分主要是针对应用层面按功能特点拆分，如交易拆分出：购物车、结算页、订单、秒杀等系统。然后根据业务的特点，针对性做处理，如秒杀系统，由于同时参加秒杀的商品有限，可以提前把商品信息加载到JVM缓存中，自身减少外部调用提高性能，同时商品系统也减轻压力。

数据库拆分也可以分为几步：垂直分表、垂直分库、水平分表、水平分库分表；

垂直分表是指大表拆多张小表，可以根据字段更新或查询频次拆分；

图2 商品表拆分

垂直分库是指按业务拆库，如拆出订单库、商品库、用户库等

水平分表是解决数据量大，把一张表拆成多张表；

水平分库分表是更进一步拆分表；

图3 分库分表

4、水平拆分

服务分层，系统服务积木化，拆分功能与非功能系统，以及业务组合的系统，如最近比较火的大中台或前台拆分；中台为积木组件，承担服务功能输出。前台更多的是组合积木服务，及时响应业务发展，如在电商网站单品页能看见主图、价格、库存、优惠券或推荐等信息，都是组合各积木组件呈现。

数据库也可以进行冷热数据分离；过期或过季商品可以归档，比如诺基亚3210手机，早已经停产且没有销售；用户查看订单时，更多的只是查看最近1、2年信息，2年前数据查看量少，在存储设计时可以区别处理。

◆◆

结构演变

◆◆

结构演变主要是随着系统复杂度增加及对性能要求提高而不得不做的系统内部架构升级；

早期系统基本是应用直联数据库，但在系统进行拆分后，功能本系统不能单独完成，需要依赖其它系统，就出现远程调用；

图4 早期应用结构

随着自身系统的业务发展，对性能要求高，而数据库一定程度上成为瓶颈，就会引入缓存及索引，分别解决key-value及复杂检索；索引加缓存现在已经成为解决高并发的基本方案，但在实施过程会有所区别；

14年对3亿热数据的系统升级时，技术选型为solr redis，考虑到数据量过大，数据在solr中只存index，而结果只存并返回主键id，再通过id从redis中读取数据，redis也不存放全部数据，数据设置过期时间，若未命中redis，回源数据库查询并反写redis；主要考虑资源与性能的平衡，solr的存储减少及IO性能提高，结果数据只在redis存放一份，redis的数据经过运行大部分是热数据；当然现在也流行ES Hbase组合。