1、大型网站所须要具备的功能：
1）高可用性
2）高性能
3）易拓展性
4）可伸缩性
2、大型网站架构系统的特点
1）高并发、大流量：像双十一淘宝、京东、凭多多这样NB大访问，承载着海量数据的网站
2）高可用：724
3）海量数据
4）用户分布广泛、网络情形繁芜
5）安全环境恶劣
6）需求快速变更、发布频繁
7）发展都是渐进式的，都是从小网站逐步的发展成大型网站
3、为什么要大型网站架构呢？
大型网站架构便是为理解决弘大的用户、高并发的访问、海量的数据、这些棘手的问题
4、大型网站的发展进程之路
1）小型网站-：所有的资源都是支配在一台做事器，运用程序、数据库、文件系统
比如LAMP/LNMP
2）运用数据分离：运用做事器、文件系统做事器、数据库做事器
资源哀求：
运用做事器：须要处理大量的运用业务数据，所以是须要更高配置的CPU
数据库做事器：须要进行快速磁盘检索、对数据进行缓存。以是须要更大的磁盘、更大的内存。
文件系统做事器：须要存储大量的用户商传的数据，以是须要巨大的硬盘。
5、 如何提高大型网站的性能呢？（网站访问特点也是遵照28定律，80用户至是访问网站的20数据）
利用缓存：
1、缓存在运用做事器上确当地缓存
2、缓存在分布式缓存做事器上的远程缓存
6、 如何提升网站的并发处理能力？
利用运用做事器集群
7、办理网站数据库访问压力过大成为瓶颈？
数据库读写分离
8、如何加速网站的快速相应？
1）利用CDN加速做事
2）利用代理：专业反向代理做事器、nginx
3）两者的差异：CDN是支配一样平常在网络供应上的机房里面，用户访问网站做事，可以从间隔自己最近的网络供应上机房获取所须要的数据。
反响代理是支配在网站的中央机房，用户直接访问中央机房的反响代理做事器，如何反响代理做事器有缓存数据则会直接返回给用户，没有的话就会去帮忙向运用做事器抓数据。
4）利用CDN、反响代理的好处：
1、加快访问
2、减轻后端做事器负载压力
9、如何知足大型网站的持续性增长业务的需求？
1）数据库读写分离
2）运用数据分离
3）分布式数据库+分布式文件系统
4）利用NoSQL(redis)+搜索引擎（ELK ）
5）业务拆分：比方说淘宝，他的网站是氛围很多的不同的业务的，不同的地方区域与这不一样的模块功能，而这些模块功能在网站上就分别代表着不同的选项：首页、订单、买家卖家、首付款…..等等这些不同的模块分别是给不同的业务团队去掩护开拓的。
每一个运用都是独立支配的，所有的不同的运用之间通过一个超链接简历关系连接-就像在淘宝、支付宝页面上，有很多的不同功能的连接选项，我们这些用户通过点击这些选项链接可以直接到达我们想去的功能界面。
其余便是，我们也可以通过行列步队进行数据分发，这里的话，更多还是通过访问同一个数据库系统进行关联的完全部系，也便是说很多运用共用同一个数据库。
6）终极办理方案：分布式做事
技能上操作便是将共用的运用业务单独的提取出来，再独立的支配。这些共用运用只是供应共用业务做事，运用系统只须要管理用户界面就行了，通过分布式做事调用共用业务做事完成详细的业务操作。
一样平常到了这一步，基本上所有的大型网站的问题就都得到理解决。
10、大型网站架构的代价不雅观，什么是驱动大型网站技能发展的紧张缘故原由？
很多大型网站都是从小的网站一步一步逐步的演化的，没有谁一开始便是考虑到为处理弘大用户、海量数据、高并发访问而设计的。
因此，大型网站架构核心代价该当是随着网站的所需而可以灵巧应对。这个才是最主要的。
目前天下上公认的大型网站无不遵照这个规律：谷歌，雅虎，百度，淘宝，脸书
驱动技能发展的紧张缘故原由：业务造诣了技能发展，创新是的网站架组成长越来越成熟。··
11、网站设计的误区：
1）一昧的追求达共识的办理方案：生搬硬套，俗话说适宜自己的才是最好的
2）为了技能而追求技能：为了追求新的时髦技能而利用这个技能，会导致后面每每势成骑虎。
二、大型网站机构模式
无论是人类还是世间万物，都存在着一个存在的模式，动物会生老病去世，很多事物都是存在相同的模式运行着，终极又会重新开始循环着同样的模式。
人生的模式：读书、娶妻、生子、然后培养自己的孩子接着走这样的道路。
1、大型网站架构的模式：办理业务上的问题
1）海量数据处理
2）高可用
3）高性能
4）易伸缩
5）可拓展
6）安全合规
这些方向目标一贯在被重复借鉴和利用着，很多网站都是遵照着这个办理方案从而逐渐成为大型网站架构的。
技能上模式：
1）分层：将系统在横向维度是那个分层及格不同的部分，每个部分分别卖力自己的职责，末了通过上层对下层的依赖和调用组成一个完全的系统。
分层设计可以参考网络通信的事理：不同的层有责不同的通讯的协议，物理层、链路层、网络层、传输层
2）分割：分层是将软件横向方面进行切割，分割便是将软件在纵向方面进行切分。
比如淘宝的购物业务可以分割：3C业务、小商品业务、首页商品详情、搜索
3）分布式：通过分层与分割，目的便是为了实现切分后的模块可以实现分布式支配。分布式意味着可以利用更多的资源完成同样的功能：后台做事器越多，可以利用的资源也是越多，能够处理的并发访问、数据量也就越多、可以供应给更多的用户做事。
常见的分布式方案：分布式运用、做事
分布式静态资源
分布式数据、存储
分布式打算
分布式配置
分布式锁
分布式文件系统
4）搭建集群：后台利用多台做事器搭建支配集群内通过负载均衡同时对外供应做事，可以实现抗高并发访问、提高可用性。
5）缓存：将数据存储放在间隔打算最近的位置从而加快处理速率。缓存是改进软件性能的第一手段。
CDN：内容分发网络，支配在间隔用户最近的地方-网络供应商，蝇虎的网络申请都是最先到达网络做事商的，在这里每每是会缓存很多的静态资源数据，这样子可以以最快的速率返回给用户，这些CDN节点做事可以缓存视频、网站静态内容。
反向代理
本地缓存
分布式缓存
6）异步：业务之间不是通过同步调用，一个业务操作而是被分成多个阶段调用，每个阶段是通过共享数据办法异步实行进行操作：像抢票、王者光彩角色抢转移名额
打算机软件的发展一个主要的目标便是将爱过低软件运用彼此之间的耦合性，实物之间的直接关系越少的话，他们之间的越少被彼此影响，就越可以相互独立发展。
大型网站打仗耦合的方法：分层、分割、分布、异步
7）冗余：数据备份、
冷备份
热备份
8）自动化：实现无人值守
尽可能的较少人为成分的干预，使得发布过程的自动化可以有效的减少故障，发布的过程：
自动化的代码管理：开拓提交自己的开拓产品代号，系统自动为其创建开拓分支，后期自动进行代码合并。
自动化的测试：系统会自动的将代码提交到测试环境进行功能测试，并且向测试职员发送测试报告。
自动户的安全检测：安全检测工具进行安全攻击测试，评估安全性
自动化支配：末了是将测试没问题的代码支配莅临盆环境上供应做事。
自动户监控：监控做事器运行情形，程序bug、存储、访问高峰
自动化报警：提醒干系职员事件
自动化失落效转移：将有故障的做事自动隔离
自动化规复：自动做事看重启
自动化分配资源：空闲资源分配为主要的运用做事。
9）安全
系统层次划分：
底层：供应根本做事，数据库、存储、缓存、搜索
中间层：平台做事、运用做事层
最上层：API、业务层、第三方运用
小结：好的模式设计不仅仅是模拟，而是在对其深刻理解之后的创造与创新，山寨与创新最大的不同不是在于抄袭，是否模拟，而是在于对问题和需求的真正理解和把握。
比如在2020年，小米UI 抄袭苹果ios设计，UI设计险些让人以为这便是苹果设计师设计的，但是这后面却可能是小米工程师的深刻理解之后的创新也说不定呢。
2、大型网站架构核心架构的要素
什么是架构？最高层次的方案，难以改变的决定。
这些方案决定着事物未来发展的方向、蓝图
1）性能
2）可用性
3）伸缩性
4）扩展性
5）安全性
三、大型网站如何进行优化啊
1、web前端优化：浏览器加载、网站视图模型、图片做事、CDN做事
1）浏览器优化：
减少HTTP要求利用浏览器缓存压缩Css放在最上面，jsp放在页面最下面：我们通过浏览器访问一个网站，返回内容时由于浏览器会不才载所有的CSS之后才对页面进行渲染，因此最好的做法是将CSS放在页面的最上面，让浏览器最先最快的下载好CSS，由于JSP加载的时候是会急速立时实行的，以是kennel会导致加载JSP阻满全体页面，导致也敏啊现实缓慢。减少cookie传输2）反向代理
3）CDN
2、运用做事器性能优化
什么是运用做事器呢？运用做事器便是处理网站业务的做事器，网站的业务大妈都是放在支配在这里面，是一个网站开拓最繁芜、变革最多的笛梵，优化手段紧张有：缓存、集群、异步
1）分布式缓存、
合理利用缓存分布式缓存架构memcached2）集群
3）异步：利用行列步队将会调用异步化，可以改进网站的拓展性，提高全体网站的性能
4）代码优化：
多线程：将工具设计为无状态工具什么是无状态呢？无状态是指工具本身是不存储状态信息的，这样的无状态设计在多现车个并发访问的时候就不会涌近况况的不一致。
JAVA、web开拓时候常常利用的servlet便是设计为无状态的，以是可以被运用做事器多现车个并且调用处理用户的要求，这样子就很厉害了。
2.资源复用
3.优化数据构造
4.垃圾回收
3、存储性能的优化
固态数据排序存储：B+tree或者LSM树Raid磁盘阵列或者HDFS
四、大型网站架构实现高可用方法？
实现高可用架构的紧张手段便是数据与做事的冗余备份、失落效转移，一旦某些做事器宕机了，可以将做事切换到其他可以利用的做事器上，如果磁盘坏了，就可UI利用备份的磁盘。
分层：运用层、数据层、做事层
运用层：紧张是卖力详细业务的逻辑处理—文库、贴吧、百度知道、百度百科
做事层：供应可以反复利用访问的做事--账户登录做事、session做事、
数据层：卖力数据的存储和访问--数据库做事器、文件系统、缓存做事、搜索做事
1、如何实现高可用的运用
负载均衡运用做事器集群session共享、复制、绑定2、高可用的做事
分级管理：核心运用做事利用更好的硬件、不同优先级的运用、做事支配在不同的做事器上超时设置异步调用：行列步队做事降级（谢绝做事、关闭做事）3、高可用的数据
数据备份失落效转移：失落效确认、访问转移、数据规复4、高可用网站的软件质量担保
1）网站发布规范流程
2）自动化测试
3）预发布验证
4）代码掌握：GIT/SVN
5）自动化发布
6）灰度发布：常常是在对用户进行测试
5、大型网站运行监控
1）监控数据采集
用户行为日志数据网络做事器日志数据网络客户端浏览器日志数据网络2）做事器的性能监控
3）运行数据报告：监控详细业务干系的技能业务指标：缓冲命中率、清军相应市场、处理任务数
五、大型网站架构伸缩性该如何进行设计
1、运用做事器集群的伸缩性架构
HTTP重定向DNS域名解析负载均衡反响代理负载均衡IP负载均衡：在网络层通过修正要求的目标IP地址进行负载均衡数据链路层负载均衡常见的负载均衡算法：轮训、加权轮训、随机、最少链接、原地址哈希
2、分布式缓存集群的伸缩性设计架构
memchched分布式缓存节点支配寻衅：分布式缓存的同等性hash算法
3、数据存储做事集群的伸缩性架构设计
1）关系型数据库集群的伸缩性设计
2）NoSQL数据库伸缩性架构设计
HBase高手定律：这个天下上只有遇不到的问题，没有办理不了的问题，高手之以是成为高手，是由于他们碰着了很多凡人很难办理的问，并且办理了，以是呢，在百度是有很多广告所搜的高手，淘宝有很多海量数据处理的高手，QQ有很多处理高并发访问的高手。
六、大型网站的安全架构该如何设计
1）XSS攻击：跨站脚本攻击
黑客通过修改网页，注入恶意的html脚本，在用户访问网页的时候，掌握用户的浏览器进行恶意操作的一种攻击办法。
类型：反射性、持久性
2）注入攻击：SQL、OS注入
黑客攻击获取的数据信息的手段：开源网站、数据显示、盲注
应对办法：
消毒参数绑定3）CSRF：攻击者通过跨站要求假造，利用合法的用户身份进行造孽的操作，比如转账交易、揭橥评论
在用户不知情的情形下，利用用户的身份假造要求
这个CSRF的核心事理是利用了用户的浏览器的cookie、做事器session策略、盗取了用户的身份
验证码表单Token4）缺点网站代码（毛病默认打开信息回显输出）
5）HTML注释
6）文件上传
防御：设置文件上传b白名单、修正文件名，利用专有的存储
7）路径遍历：攻击者在要求的URL中利用相对的路径，遍历系统开放的目录和文件
如今的所有的大型网站都是从眇小到包罗万象，是需求推动着大型网站架构的不断更新换代，推动技能的不断发展，天下上所有的技能发展无不遵照这个规律。
欢迎大家与我谈论网站架构设计与掩护，本人有从事阿里云网站掩护事情经历，也欢迎大家一起磋商互联网干系兴趣问题。本人禁绝时在头条分享读书条记、视频。
