大型网站技术架构（一）大型网站架构演化

灰太狼 2022-10-02 08:51 350阅读 0赞

[2019独角兽企业重金招聘Python工程师标准>>> ][2019_Python_] ![hot3.png][]

看完了有一本书，就应该有所收获，有所总结，最近把《大型网站技术架构》一书给看完了，给人的印象实在深刻，再加上之前也搞过书本上讲的反向代理和负载均衡以及session独立存储和缓存，因此书本看起来还是挺通俗易懂的，而且作者李智慧给人的印象（书本）也挺深刻的，我从这本书中也学到了许多，了解的许多，但是理解还是比较抽象的，写出来才是真正的理解，因此准备写一系列的博客来介绍和加深理解大型网站技术架构。

说道大型网站，就的先说大型网站的特点：**高并发，大流量，高可用，海量数据**等。下面就说说大型网站的架构演化过程吧。

## 1、初始阶段的网站架构 ##

初始阶段都比较简单，通常一台服务器就可以搞定一个网站了，看图。

![04180941_LOqs.jpg][]

## 2、应用服务和数据服务分离 ##

随着网站业务的发展，一台服务器逐渐不能满足需求；这时候就需要将应用和数据分离，如图。

![04180941_2K1a.jpg][]

## 3、使用缓存改善网站性能 ##

毫无疑问，现在的网站基本上都会使用缓存，即：80%的业务访问都会集中在20%的数据上。

![04180941_kbm6.jpg][]

## 4、使用应用服务器集群改善网站的并发处理能力 ##

因为单一应用服务器能够处理的请求连接有限，在网站访问高峰时期，应用服务器会成为整个网站的瓶颈。因此使用负载均衡处理器势在必然。通过负载均衡调度服务器，可将来自浏览器的访问请求分发到应用的集群中的任何一台服务器上。

![04180941_GCdx.jpg][]

## 5、数据库读写分离 ##

当用户达到一定规模后，数据库因为负载压力过高而成为网站的瓶颈。而目前主流的数据库都提供主从热备功能，通过配置两台数据库主从关系，可以将一台数据库的数据更新同步到另一台服务器上。网站利用数据库这一功能实现数据库读写分离，从而改善数据库负载压力。

![04180941_8tZC.jpg][]

## 6、使用反向代理和CDN加上网站相应 ##

提高网站的访问速度，主要手段有使用CDN和反向代理。

** CDN和反向代理的基本原理都是缓存**，区别在于CDN部署在网络提供商的机房，而反向代理是部署在网站的中心机房，当用户请求到达中心机房后，首先访问的反向代理，如果反向代理缓存着用户请求的资源，则直接返回给用户。

![04180941_v9cI.jpg][]

## 7、使用分布式文件系统和分布式数据库系统 ##

任何强大的单一服务器都满足不了大型网站持续增长的业务需求。

**分布式数据库时网站数据库拆分的最后手段，只用在单表数据规模非常大的时候才使用。不到不得已时，网站更常用的数据库拆分手段是业务拆分，将不同业务的数据部署在不同的物理服务器上**。

![04180941_r0xQ.jpg][]

## 8、使用NoSQL和搜索引擎 ##

搜素引擎也基本已经形成现在大型网站必须提供的功能了，网站需要采用一些非关系数据库技术如NoSQL和非数据库查询技术如搜索引擎。

![04180941_Fzmk.jpg][]

## 9、业务拆分 ##

大型网站为了应对日益复杂的业务场景，通过使用分而治之的手段将真个网站业务拆分成不同的产品线。

**具体到技术上，也会根据产品线话费，将一个网站拆分成许多不同的应用，每个应用独立部署维护。应用之间可以通过超链接建立管理，也可以通过消息队列进行数据分发，当然最多的还是通过访问同一个数据存储系统来构成一个关联的完整系统。**

![04180941_04lt.jpg][]

## 10、分布式服务 ##

由于每一个应用系统都需要执行许多相同的业务操作，比如用户管理，session管理，那么可以将这些公用的业务提取出来，独立部署。

![04180941_Mc6p.jpg][]

转载于:https://my.oschina.net/zhanghaiyang/blog/597027

[2019_Python_]: https://my.oschina.net/u/2663968/blog/3061697
[hot3.png]: /images/20220113/ea658ed4d3bc4ef397bba0c839f3683f.png
[04180941_LOqs.jpg]: /images/20220113/8794c9a8275246128296727aa0303ed3.png
[04180941_2K1a.jpg]: /images/20220113/a89ba63504e344bf8f0dcc408dd83afe.png
[04180941_kbm6.jpg]: /images/20220113/6ae60a5dac6a4ff1982dcbe9937b2e66.png
[04180941_GCdx.jpg]: /images/20220113/4512465bb95d443984960b8410edb2d8.png
[04180941_8tZC.jpg]: /images/20220113/fdf075f5fa87424aab948ed97fb90c2e.png
[04180941_v9cI.jpg]: /images/20220113/33fdade1a59a4c819b26c37fbdfd4a17.png
[04180941_r0xQ.jpg]: /images/20220113/35b02553b4a74435ae5805376c2e8d87.png
[04180941_Fzmk.jpg]: /images/20220113/331f8d0640304fa6afd827d984cfabbb.png
[04180941_04lt.jpg]: /images/20220113/6a223a1965c442b29019764a51c3bb92.png
[04180941_Mc6p.jpg]: /images/20220113/9c2e1506c4304d669fc8f564a83f7718.png