大型网站技术架构(二)架构模式

news/2024/5/9 16:25:34/文章来源:https://blog.csdn.net/weixin_33860528/article/details/92651041

2019独角兽企业重金招聘Python工程师标准>>> hot3.png

 每一个模式描述了一个在我们周围不断重复发生的问题及该问题解决方案的核心。这样,你就能一次又一次地使用该方案而不必做重复工作。

          所谓网站架构模式即为了解决大型网站面临的高并发访问、海量数据、高可靠运行灯一系列问题与挑战。为此,在实践中提出了许多解决方案,以实现网站高性能、高可靠性、易伸缩、可扩展、安全等各种技术架构目标。

1、分层

        分词是企业应用系统中最常见的一种架构牧师,将系统在横向维度上切分成几个部分,每个部分负责一部分相对简单并比较单一的职责,然后通过上层对下层的依赖和调度组成一个完整的系统。

        在网站的分层架构中,常见的为3层,即应用层、服务层、数据层。应用层具体负责业务和视图的展示;服务层为应用层提供服务支持;数据库提供数据存储访问服务,如数据库、缓存、文件、搜索引擎等。

       分层架构是逻辑上的,在物理部署上,三层架构可以部署在同一个物理机器上,但是随着网站业务的发展,必然需要对已经分层的模块分离部署,即三层结构分别部署在不同的服务器上,是网站拥有更多的计算资源以应对越来越多的用户访问。

      所以虽然分层架构模式最初的目的是规划软件清晰的逻辑结构以便于开发维护,但在网站的发展过程中,分层结构对网站支持高并发向分布式方向的发展至关重要

2、分隔

       如果说分层是将软件在横向方面进行切分,那么分隔就是在纵向方面对软件进行切分。

       网站越大,功能越复杂,服务和数据处理的种类也越多,将这些不同的功能和服务分隔开来,包装成高内聚低耦合的模块单元,不仅有助于软件的开发维护也便于不同模块的分布式部署,提高网站的并发处理能力和功能扩展能力。

      大型网站分隔的粒度可能会很小。比如在应用层,将不同业务进行分隔,例如将购物、论坛、搜索、广告分隔成不同的应用,有对立的团队负责,部署在不同的服务器上。

3、分布式

       对于大型网站,分层和分隔的一个主要目的是为了切分后的模块便于分布式部署,即将不同模块部署在不同的服务器上,通过远程调用协同工作。分布式意味着可以使用更多的计算机完同样的工作,计算机越多,CPU、内存、存储资源就越多,能过处理的并发访问和数据量就越大,进而能够为更多的用户提供服务。

       在网站应用中,常用的分布式方案有一下几种.

       分布式应用和服务:将分层和分隔后的应用和服务模块分布式部署,可以改善网站性能和并发性、加快开发和发布速度、减少数据库连接资源消耗。

       分布式静态资源:网站的静态资源如JS、CSS、Logo图片等资源对立分布式部署,并采用独立的域名,即人们常说的动静分离。静态资源分布式部署可以减轻应用服务器的负载压力;通过使用独立域名加快浏览器并发加载的速度。

       分布式数据和存储:大型网站需要处理以P为单位的海量数据,单台计算机无法提供如此大的存储空间,这些数据库需要分布式存储。

       分布式计算:目前网站普遍使用Hadoop和MapReduce分布式计算框架进行此类批处理计算,其特点是移动计算而不是移动数据,将计算程序分发到数据所在的位置以加速计算和分布式计算。

4、集群

       对于用户访问集中的模块需要将独立部署的服务器集群化,即多台服务器部署相同的应用构成一个集群,通过负载均衡设备共同对外提供服务。

       服务器集群能够为相同的服务提供更多的并发支持,因此当有更多的用户访问时,只需要向集群中加入新的机器即可;另外可以实现当其中的某台服务器发生故障时,可以通过负载均衡的失效转移机制将请求转移至集群中其他的服务器上,因此可以提高系统的可用性

5、缓存

       缓存目的就是减轻服务器的计算,使数据直接返回给用户。在现在的软件设计中,缓存已经无处不在。具体实现有CDN、反向代理、本地缓存、分布式缓存等。

       使用缓存有两个条件:访问数据热点不均衡,即某些频繁访问的数据需要放在缓存中;数据在某个时间段内有效,不过很快过期,否在会因为数据过期而脏读,影响数据的正确性。

6、异步

      使用异步,业务之间的消息传递不是同步调用,而是将一个业务操作分成多个阶段,每个阶段之间通过共享数据的方法异步执行进行协作。

      具体实现则在单一服务器内部可用通过多线程共享内存对了的方式处理;在分布式系统中可用通过分布式消息队列来实现异步。

      异步架构的典型就是生产者消费者方式,两者不存在直接调用。

7、冗余

      网站需要7×24小时连续运行,那么就得有相应的冗余机制,以防某台机器宕掉时无法访问,而冗余则可以通过部署至少两台服务器构成一个集群实现服务高可用。数据库除了定期备份还需要实现冷热备份。甚至可以在全球范围内部署灾备数据中心。

8、自动化

      具体有自动化发布过程,自动化代码管理、自动化测试、自动化安全检测、自动化部署、自动化监控、自动化报警、自动化失效转移、自动化失效恢复等。

9、安全

      网站在安全架构方面有许多模式:通过密码和手机校验码进行身份认证;登录、交易需要对网络通信进行加密;为了防止机器人程序滥用资源,需要使用验证码进行识别;对常见的XSS攻击、SQL注入需要编码转换;垃圾信息需要过滤等。

转载于:https://my.oschina.net/zhanghaiyang/blog/592637

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.luyixian.cn/news_show_701308.aspx

如若内容造成侵权/违法违规/事实不符,请联系dt猫网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

如何通过手机客户端Android、Iphone 等访问要求使用客户端证书SSL加密的https网站...

我们在开发手机网站时,对于企业如何想发布加密的只给特定手机访问的网站,那么必须要使用“SSL的客户端证书”, 是不是所有的手机系统都对SSL 客户端证书支持得很好呢?我们看看如何使用各种手机系统去访问带SSL客户端证书网站。 iP…

支持手机版网站的We7CMS

你还在使用Wap手机网站吗,亲,你OUT了,加载速度慢,使用不方便,发布信息需要二次发布,这是你需要的吗,告诉你个好消息,快使用Web版的手机网站吧,图片加载速度快&#xff0c…

3000+ NLP资源一网打尽,只需用这个分类检索网站 | 免费

NLP资源免费搜索神器来了~有了它,就能一键直达arXiv论文PDF、相关研究的关联网、GitHub存储库,以及Colab,再也不用逐项搜索!这是一个NLP资源检索网站,在reddit上获得了460赞,里面涵盖了3000多个代码库&…

独家 | 虚假疫苗网站如何获取你的个人信息

作者: Lance Whitney翻译:陈超校对:王可汗本文约1000字,建议阅读3分钟本文揭示了诈骗网站如何利用人们对新冠疫苗信息的关注获取用户的个人信息。该网站最近被政府查封,该网站仿造一家开发冠状病毒疫苗的真实公司,试图…

有哪些优秀的科学网站和科研软件推荐给研究生?

链接:https://www.zhihu.com/question/37061410编辑:深度学习与计算机视觉声明:仅做学术分享,侵删推荐一些好的科研网站或者适合科研人员用的软件以及APP,给研究生新手鸡,帮助提高科研效率,了解…

推荐收藏 | 常用图片处理网站合集(8个网站)

来源:R语言统计与绘图本文附链接,建议阅读5分钟图片处理是很常见的事情,今天分享一些图片处理网站。1. All2All格式转换网址:https://www.alltoall.net/这是一个免费的在线格式转换网站,可转换的格式极多,…

6 个接私活的网站,你有技术就有钱!

点击上方“AI遇见机器学习”,选择“星标”公众号重磅干货,第一时间送达来源 | GitHubDaily大家好,我是发哥,很高兴跟大家再次见面。上周我在 GitHubDaily 公众号上发布了一篇文章《分享靠写代码赚钱的一些门路》,里面分…

17岁高中生独立开发全球最火疫情追踪网站

点击上方“AI遇见机器学习”,选择“星标”公众号重磅干货,第一时间送达来源:新智元【导读】疫情在全球蔓延,很多国家和地区的信息公开不及时,而普通民众又容易被流言误导,引发恐慌。西雅图一个17岁的高中生…

google学术全面封锁,这几个网站完全可以替代~

点击上方“AI遇见机器学习”,选择“星标”公众号重磅干货,第一时间送达这个假期对在家写论文的同学来说这几天又是雪上加霜,虽说之前google学术在国内也是不允许的,但是通过一系列镜像还是可以查到我们需要的文献,而就…

这回导师们颤抖了,这个网站能匿名评价其“人品”,已有大量“不良”导师被爆...

点击上方“AI遇见机器学习”,选择“星标”公众号重磅干货,第一时间送达来自:研究生v研究生导师如此良莠不齐,如何得知导师的好坏?今天推荐给大家这个网站,导师评价网:https://www.mysupervisor.…

成为GPT-3的甲方,让它来帮你设计网站

点击上方“AI遇见机器学习”,选择“星标”公众号重磅干货,第一时间送达萧箫 发自 凹非寺量子位 报道 | 公众号 QbitAI制作网站用什么,Dreamweaver还是Fireworks?现在,用GPT-3就可以。一位来自旧金山的程序员小哥做了款…

公开处刑:研究者自建Papers Without Code网站,张贴复现不了的论文

点击上方“AI遇见机器学习”,选择“星标”公众号重磅干货,第一时间送达来自:机器之心在 Papers 「Without」 Code 网站上,复现不了的论文可是要被公开处刑的,作者也可能面临「社会性死亡」。「无法复现的论文都是耍流氓…

网站上传到服务器mysql数据库,网站上传到服务器mysql数据库吗

网站上传到服务器mysql数据库吗 内容精选换一换安装MySQL本文档以“CentOS 6.5 64bit(40GB)”操作系统为例,对应MySQL版本为5.1.73。CentOS 7及以上版本将MySQL数据库软件从默认的程序列表中移除,需执行sudo rpm -Uvh http://dev.mysql.com/get/mysql-co…

90行代码!大一学生自学编程,自创搜题网站,已在GitHub开源

点击上方“AI遇见机器学习”,选择“星标”公众号 重磅干货,第一时间送达大数据文摘出品作者:Caleb考试早已不是学生的“特权”了。入党要考试,面试要考试,日常考核要考试,升职可能都要先让你做一套试卷了。…

linux 网站架构的演变

上一节,我们学习了linux下文件服务器NFS的搭建,了解了他的基本原理。可以说也是很简单的一个服务。今天我们学习影响互联网最重要服务web服务(应用服务)。什么是web服务呢?就是我们平常在浏览器输入一个网站的地址&…

Project推荐节选|几个超级有用的学术网站和好玩的github(附带网站!)

点击上方“python与机器智能”,选择“星标”公众号 重磅干货,第一时间送达1. Papers With Code该网站按照计算机的不同应用领域进行划分,收集并整理了众多技术论文,每篇论文都包含着相关开源项目供学习参考。地址:http…

谈谈网站性能技术

前端性能优化技术 http://hudeyong926.iteye.com/blog/933548 一、前端负载均衡 通过DNS的负载均衡器(一般在路由器上根据路由的负载重定向)可以把用户的访问均匀地分散在多个Web服务器上。这样可以减少Web服务器的请求负载。因为http的请求都是短作业,所以&#x…

神网站PaperWithoutCode:举报无法复现的论文,让一作社死??

点击上方“AI遇见机器学习”,选择“星标”公众号重磅干货,第一时间送几乎是可以肉眼可见的看到机器学习领域的论文几何级的增长,在铺天盖地的论文雪花纸片般涌来时,灌水、可复现性、工作真实的意义这些概念也伴随着 Paper 的洪水进…

转载 干货 | 陪伴我学习NLP、知识图谱的那些资源(教程+书籍+网站+工具+论文...可以说很全面了)

https://blog.csdn.net/guleileo/article/details/81140179 干货 | 陪伴我学习NLP、知识图谱的那些资源(教程书籍网站工具论文...可以说很全面了)... csdn人工智能头条 2018-07-20 17:30:15 8744 已收藏 33 作者 | antkillerfarm 来源 | antkillerfa…

ROR与社区网站开发

Ruby on Rails社区网站开发 “这是一部杰作!有它在手,足以开发出一个真正的社区网站。书中采用了模块化的方法,实例可以非常容易地复用,比如在现有网站中添加社区网络功能。” ——David Berube,资深Ruby技术专家&…