从0开始搭建坚不可摧的Web系统主流架构（有彩蛋）-搜狐

　　本文根据DBAplus社群第92期线上分享整理而成，文末还有书送哦~

　　讲师介绍

战学超

青航数据架构师

曾任职于NEC软件、海尔B2B平台巨商汇，负责企业数据平台构建、B2B电商平台数据管理与搭建。
拥有丰富DBA、系统运维架构经验，擅长数据库、数据平台搭建、私有云部署、自动化运维等。

　　主题简介：

　　1、网站系统架构当前现状

　　2、Web系统主流架构解析

　　3、互联网技术团队初期组建经验分享

　　本文主要结合我之前在海尔电商平台和现在公司的一些实际架构经验，综合实际情况和个人的理解，跟大家分享一下搭建Web系统的一些常用的技术架构和应用技巧。

　　首先要跟大家探讨一个问题，就是当前传统IT企业或是传统企业的IT系统目前的系统架构是怎样的呢？

　　就我所经历的NEC软件、海尔集团、青岛航空等某种程度上都属于传统企业。我本人也是最近三年在海尔搞电商平台的时候，才更多地接触互联网的思维和技术架构。

　　我在青岛航空的这一年多时间里以及与青岛其他IT同行讨论时，发现了一个现象：就是目前很多传统企业的技术架构跟互联网企业的技术架构越来越相似了，或是传统企业越来越倾向于互联网的主流技术架构和服务器部署等方式。

　　虽然传统企业可能没有互联网企业的大流量、数据量，高并发(互联网企业真正大流量高并发的也就那么几家)，但是两者在技术架构上的很多方面、方向都是一致的，个人感觉这是一个比较好的现象。传统企业借鉴互联网企业的一些优秀的技术架构和部署方式，可以更好地保障自身的业务系统，提高系统的使用效率等。成熟的开源技术架构也可以为企业节省很多IT成本。

　　青岛航空有自己的官网，偶尔搞个抢票，促销或是暑运春运，有时候会受到一些网络的恶意攻击。这时虽然流量会陡增，但是在目前的技术架构上完全可以抵挡住。

　　本文将分析目前主流的一些Web技术架构，可能更适合中小互联网公司或是一些中大型的传统企业，技术好坏关键看与实际情况集合得怎样，希望大家能够有所收获，能够在各自领域架构系统的时候，能有所帮助。

　　架构总图

接下来进入正题，首先看这张总图：

　　网络接入层

　　防火墙

　　所有的访问请求(企业内部访问可能除外)都是要经过企业级的防火墙设备。不管是企业自身的机房还是托管的IDC机房，一般最外层都是由防火墙把关所有访问请求。对于一些恶意的木马植入等，防火墙会抵挡住大部分。作为Web架构，最外层一定要选好防火墙，而且防火墙的架构最低一般会选择不同型号的两台。

　　安全设备

　　防火墙之后会接入IPS(入侵防御系统)，WAF(Web应用防护系统)。这一块区域主要对网络安全，系统安全做检测和防护的，可以采用商业设备(推荐)，资金不足的企业也可以采用开源设备，这里推荐一款开源产品OSSIM，有兴趣的同学可以了解一下。

　　负载均衡

　　经过网络安全防护之后，接下来是我们的硬负载设备（该层可有可无），一般硬负载均衡设备主要有F5，A10，相对比较贵，企业可以根据情况选择。

　　硬负载接下来一般会有一层软负载(当然软负载和硬负载可以只留一种也可以都有)。软负载层一般也会部署反向代理服务器，用作反向代理，也起到了防护安全的作用。

　　一般在网络规划上，该层位于DMZ区域，该层之下的服务器位于内网。这块隔离了外部请求和内网的直接交互，安全上有所提高。一般该层的技术选择有Nginx，Apache，Haproxy，LVS等。大部分应该是一Nginx居多，既可以做负载均衡，也可以做反向代理，并且相对而言高并发效率更好。

　　关于这几者的区别，网上也有很多，有兴趣的同学可以多多比较。其中说明一点的是LVS是工作在网络4层之上仅作分发之用，没有流量的产生，其他三种是工作在7层之上，如果不适用硬负载设备的话，建议使用LVS作为流量转发的负载设备，然后再是Nginx或是Haproxy。Apache在一些传统企业存在或是使用得比较多，也比较稳定。

　　前端架构

　　一般在负载均衡后面是挂载的各种各样的应用服务器。在部署应用服务器的时候一般会将静态资源（JS，CSS，图片，文件）等单独一台服务器部署，以减轻应用服务器的带宽和IO，提高访问效率。将这些静态资源部署在静态资源服务器、文件服务器、图片服务器等。一般地如果我们有CDN，会将这些静态资源放在CDN上以提高网络加载速度。常见的文件服务器和图片服务器的技术架构有FastDFS，MogileFS，GraphicsMagick等。

　　但是中小企业建议直接购买云服务。一是可以减少运维成本，二是可以提高访问的速度，一般云服务都搭配CDN。自己搭建文件或图片服务器的运维成本还是比较高，对技术要求也比较深入。这里大家在架构的时候需要仔细考虑好。

　　应用服务器

　　web应用服务器

　　应用服务器一般是tomcat，IIS，resin等。一般有一个应用视情况会有多台服务器(最少2台)，应用之间要解耦，应用之间的依赖尽量采用接口交互（尽量避免数据库方面dblink等方式）。各位在做应用系统解耦的时候可以参考现在比较流行的服务化，微服务等技术架构如dubbox等，但是需要对开发有一定的了解。虽然我们的团队经历过和正在做dubbox的服务化，但是本人参与不是很多，所以也希望能够向大家多学习。

　　消息队列服务器

　　增加消息队列服务器有以下几点好处：

由于消息队列服务器的速度远高于数据库，能够快速处理并返回数据；
消息队列服务器具有更好的扩展性；
在高并发的情况下，延迟写入数据库，可以有效降低数据库的压力。

　　消息队列经常用在高并发应用（如抢购），不同系统模块间高速数据交互等。常用的消息队列技术有ActiveMQ，RabbitMQ等，这些技术本身就有很好的集群或是主备机制，并且有监控的页面，非常方便快速扩展和使用。监控在使用的时候，一般需要脚本(CURL获取监控页面的值和监控页面的http staus)或其他方式监控，实现故障自动告警。

　　缓存服务器

　　数据缓存服务器，常有的部署有Memcached，Redis等，目前应该是以Redis居多吧。另外应用应用服务器集群的session问题也常常用到Redis。Redis自身的哨兵模式，集群Cluster(3.0以上版本支持)可以避免单点故障，方便横向和纵向扩展，缓存热点数据提高访问效率，在高并发环境也是经常用到的技术。

　　这里要注意一下，并不是所有的Web架构都需要消息队列或是数据库缓存，视情况而定，根据系统的并发量和访问量评估。合适自己的才是最好的。

　　数据库层

　　数据库连接池

　　应用跟数据库之间一般要尽量避免应用直接连接数据库，采用数据库连接池的方式。数据库连接池技术带来的优势有资源复用、更快的相应速度、统一的连接管理、避免连接泄露等好处。常用的有c3p0,dbcp,druid等，这里强烈推荐Druid。

　　数据库架构

　　数据库连接池后面就是数据库了。数据库种类也比较多，常用的有Oracle，MySQL等。当然了，一个系统使用一套数据库，尽量避免多套应用系统使用同一个数据库。

　　由于数据库的重要性，需要考虑到数据库方案。包括实现数据库的高可用、负载均衡等，有些电商平台还需要实现读写分离，数据库的横向纵向拆分等，以实现复杂的数据库应用。

　　Oracle的常用架构有RAC，DG(dataguard)，而Oracle的成本比较高，所以很多中小企业会选择MySQL。MySQL也有不同的分支和技术方案，如官方版本的MariaDB，PerconaDB等。常用的高可用架构有复制，Cluster，不同分支都有支持，这里我推荐大家使用MariaDB10.0以上的版本，效率相对较高。

　　MySQL的中间件也比较多，用来支持负载均衡，读写分离，分库分表等。如OneProxy，MyCAT等都是非常优秀的MySQL数据库中间件，建议大家有时间多研究，架构出稳定可靠的数据库集群。

　　数据库的备份和恢复这里就不单独说了，在下面的灾备方案中统一说明。

　　存储设备

　　一般企业会有专业的存储设备。存储设备的raid选择、主备架构方案等都需要提前架构以及跟存储厂商沟通讨论。作为最关键的设备之一，一定要避免单点故障，否则将导致整个IT系统宕机。

　　以上是关于常见的Web系统架构的一个概述，以及常用的一些技术方案的说明，有不足之处，请大家多多指教，相互学习。

　　灾备方案

　　接下来跟大家介绍关于备份相关的问题。不管传统企业还是互联网，备份一定是一个及其关键重要的工作。没有备份，就意味着系统没有最基本的保障。

　　常见的灾备方案一般是同城热备，异地灾备的方式，即两地三中心的方式。同城的网络延迟一般可以做到比较小，所以在用实时热备的方式是可行的。将应用服务器、数据库等通过实时同步的方式，数据传输到同城其他机房，实现跨机房的热备。

　　异地采用延迟备份的方式。将本地机房的备份集通过网络传输传送一份到异地机房实现异地灾备。其中异地灾备是有数据延迟的，一般一天。

　　不管是应用服务器，还是数据备份的方式都有很多种，因时间限制就不一一跟大家分享了。这里要着重注意的是备份集的测试方案，一定要与灾备方案一起，并根据测试方案严格定时执行，确保备份集的准确性。

　　其他方面

　　作为一套完整的IT技术架构方案，其实还有很多方面需要考虑，例如监控方案。我们常用的监控方案有lepus监控数据库、Zabbix、脚本三者结合的方式。通过邮件，阿里大于短信等方式发送报警，日志服务器用于采集和分析日志，如ELK等。还有一般企业会有数据平台用于分析自己数据，这里可以参考我的另一篇文章《数据即金钱，中小企业如何搭建数据平台分得一杯羹？》

　　另外一般企业为了节省成本会考虑虚拟化，将服务器等硬件资源虚拟化，提高利用率节省企业的成本，进而为企业的私有云搭建奠定基础。以后希望有机会跟大家一起交流虚拟化+私有云的技术方案，这也是我们现在正在着手进行的，很有实践参考意义。

　　关于互联网创业初期技术团队

　　上面这些是关于技术方面的架构，接下来的时间简单分享一下关于技术团队初创期间的一些经验教训和想法，欢迎拍砖。

　　主要以下几点：

以核心业务为中心，初期技术团队不断满足业务需求。避免盲目扩张团队规模和采用过于超强的技术架构，技术架构要匹配业务发展的需求和规模。
建议初期以外包为主，但是核心业务和技术架构必须以自己团队的人为主且不能动摇。要有外包项目结束后能迅速接手的能力。
团队要小而精，扁平化管理，少管理岗，多技术岗，团队要有共同的目标和发展愿景。

　　传统企业转型互联网尤其要注意，纵使财大气粗，也要精打细算。就个人而言，经历过IT团队短短一年左右的时间从13人到200多号人，业务规划却迟迟没有突破的情况，最终大批裁员，拼命挣扎的一种状态。

　　友情提醒一下各位，当注意到团队成员工作并不饱和，但同一岗位还有招聘计划时，一定要考虑一下是该招聘还是该减员。

　　纵观一批批倒下的初创公司，失败的经验教训很值得我们深入研究和学习。

　　Q&A

　　Q1：如果公司对于it不打算花太多成本，请问如果仅对于企业内部使用erp管理系统的架构哪些节点可以省掉，哪些又是必须的呢？

　　A1：如果是打算上ERP的话，建议直接购买国内的ERP系统，一般价格相对便宜，功能比较齐全适合国人使用。我本人并没有部署过成型的商业ERP系统，所以对于商业ERP系统这一块不是特别理解。就我们青岛航空而言呢，是购买的oracle的ERP系统，但是呢，只是购买了财务模块，ERP和数据库都是部署在一台机器上，跟其他业务系统如官网等是分开隔离的。另外购买商业ERP系统的时候，供应商在实施的时候，一定要让最好热备(或是冷备)和数据库相关的备份，避免单点故障导致整个公司的ERP系统难以运作影响正常经营。