大型网站架构之大型网站的演变过程

news/2024/5/20 11:32:15/文章来源:https://xiyuan.blog.csdn.net/article/details/102327868

大型网站的演变过程

现在网站面临的问题:
1.企业在网站技术上的进行了大量的投入,但总是在关键的时刻频繁宕机(高性能);
2.工程师夜以继日的加班工作,网站缺总是故障频繁、新功能上线缓慢(扩展性);
3.互联网快速发展多领域挑战传统行业,但却在网站的安全上频繁出错(安全性)。

大型互联网应用的特点:
高并发,大流量:需要面对高并发,大流量访问。
高可用:系统7*24小时不间断服务。
海量数据:需要存储、管理海量数据,需要使用大量服务器。
用户分布广泛,网络情况复杂:用户分布范围广,各地网络情况千差万别。
需求快速变更,发布频繁:互联网产品通常来说产品发布频率是极高的。
渐进式发展:产品是在业务环境下螺旋式发展的。

大型网站的发展历程

1.网站最初阶段:应用程序、数据库、文件等所有资源都在一台服务器上。

2.应用服务和数据服务器分离,通常会三种类型服务器:(兴业银行代客系统目前的阶段)

  • 应用服务器:需要处理大量的业务逻辑,因此需要强大的CPU
  • 数据服务器:需要快速磁盘检索和数据缓存,因此需要更快的硬盘和更大的内存
  • 文件服务器:需要存储大量用户上传的文件,因此需要更大的硬盘

3.使用缓存来改善网站的性能
网站的访问特点符合二八定律:80%的业务访问集中在20%的数据上。
采用本地缓存或者分布式缓存系统,能够把热数据放在性能更加优越的内存中。

4.使用应用服务器集群改善网站的并发处理能力(nginx负载均衡)
采用软件或者硬件的方式实现对业务请求进行负载均衡,从而达到不断改善系统性能,提升系统可伸缩性的目的。

5.数据库读写分离(相同的数据库可以使用它自己的特性进行主从热备,不同的数据库可以借助消息中间件来实现)
主流的数据库都提供主从热备功能,通过配置两台数据库主从关系,可以将一台数据库服务器的数据更新到另一台服务器上。
借助数据库主从热备的特点,从而改善数据库负载压力。

6.使用反向代理和CDN加速网站响应
由于信号传递的过程中是有延迟的,并且应用可能部署在不同地域的服务器上,所以把请求发送到最近的服务器,能够大大降低请求响应的延迟。
CDN和反向代理基本原理都是缓存,区别在于:

  • CDN部署在网络提供商的机房,使用户在请求网站服务器时,可以从距离自己最近的网络提供商机房获取数据。(缓存数据)
  • 反向代理则部署在网站的中心机房,当用户请求到达中心机房后,首先反向的服务器是反向代理服务器,如果反向代理服务器中缓存着用户请求的资源,就将其直接返回给用户。(缓存数据)

7.使用分布式系统和分布式数据库系统
分布式数据库是网站数据库拆分的最后手段,只有在单表数据规模非常庞大的时候才使用。
网站更常用的数据库拆分手段是业务分库,将不同业务的数据部署在不同的物理服务器上。

8.使用NoSQL和搜索引擎
采用NoSQL和搜索引擎技术,能够满足对数据存储和检索的需求。
应用服务器通过一个统一数据访问各种数据,减轻应用管理诸多数据源的麻烦。

9.分布式服务
1.采用中台的思想,可以将公共的业务提取出来,独立部署,以服务的形式进行调用。
2.采用微服务的思想,按照业务逻辑,对诸如用户管理、商品管理等业务模块进行拆分子系统,以服务的形式相互调用。
3.应用程序只要专注于界面的展示,业务通过调用服务来完成具体的业务操作。

架构的本质
业务成就了技术,正如事业成就了人,而不是相反。
在网站还很小的时候就去追求网站的架构是舍本逐末、得不偿失的。
小型网站需要做的就是为用户提供好的服务来创造价值,得到用户的认可,活下去,野蛮生长。

在这里插入图片描述

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.luyixian.cn/news_show_827795.aspx

如若内容造成侵权/违法违规/事实不符,请联系dt猫网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

大型网站架构之大型网站架构模式

大型网站架构模式 什么是模式呢?(模式就是针对特定问题目前行业的解决方案) 模式描述了一个在我们周围不断重复发生的问题以及该问题解决方案的核心。借助模式我们可以减少很多重复的工作。 大型互联网公司在实践过程中提出了很多的解决方案,以实现网站…

大型网站架构之大型网站核心架构要素

大型网站核心架构要素 软件架构指的是,有关软件整体结构与组件的抽象描述,用于指导大型软件系统各方面的设计。 1.性能 在浏览器端 a.通过浏览器缓存、使用页面压缩、合理布局页面、减少Cookie传输等手段改善性能; b.可以使用CDN&#xff0c…

大型网站架构之性能篇

网站的高性能架构(性能) 不同视角下的网站性能有着不同的标准,也有不同的优化手段。 1.用户视角的网站性能优化 通过优化页面HTML样式、利用浏览器端的并发和异步特性(即用户不用等待结果)、调整浏览器缓存策略、使用…

大型网站之高可用篇

网站的高可用架构(高可用) 由于种种情况,在业务中硬件故障是常态,所以网站的高可用架构设计的主要目的就是保证服务器硬件故障时服务依然可用、数据依然保持并能够并访问。 高可用的主要手段:数据和服务的冗余备份及失…

大型网站之伸缩篇

网站的伸缩性架构(伸缩性) 绝大数网站都是渐进式成长的,在这个过程中最重要的技术是就是使用服务器集群,通过不断地向集群中添加服务器来增加整个集群的处理能力。 网站架构的伸缩性设计 网站的伸缩性设计分为两大类 根据功能进…

大型网站之扩展篇

网站的可扩展架构(扩展性) 伸缩性:通常指利用集群的方式增加服务器数量、提高系统的整体事务吞吐能力。 扩展性:指对现有系统影响最小的情况下,系统功能可持续扩展或提升的能力。 网站的可扩展性,依托于系…

大型网站之安全篇

网站的安全框架(安全性) a.黑客攻击 XSS攻击 XSS攻击即跨站点脚本攻击,指黑客通过篡改网页,注入恶意HTML脚本,在用户浏览网页时,控制用户浏览器进行恶意操作的一种攻击方式。 常见的XSS攻击分为 反射型&am…

使用openssl 模拟ca进行证书的申请和颁发,并使用证书部署网站的安全连接访问,即https的加密通信

亲测,已经建立了https链接 参考链接: https://blog.csdn.net/guoxiaojie_415/article/details/80554109 https://www.cnblogs.com/kezi/articles/11512420.html

浏览器版本过高导致无法访问网站 burpSuiteBrowser

错误: 建立安全连接失败 连接到 172.24.11.101 时发生错误。对等端使用了不支持的安全协议版本。 错误代码:SSL_ERROR_UNSUPPORTED_VERSION 由于不能验证所收到的数据是否可信,无法显示您想要查看的页面。 建议向此网站的管理员反馈这…

js 获取服务器ip_如何提高香港服务器网站的访问速度

从选择服务器上入手1.选择直连国内网络骨干的机房 直连国内网络骨干机房通常节点都比较少。通常数据在经过路由器进行转发时,都需要花费一定的时间,因而节点比较少的机房,它所提供的香港服务器多相对快一些,具体我们可以通过ping服…

php一维数组合并为二维数组,php输出数据并转换成若干一维数组最后合并为一条二维数组 - 傲世零零个人技术网站...

代码功能:php输出数据并转换成若干一维数组最后合并为一条二维数组//数据库连接require(db.php);//查询语句$sql2 "select * from xc_pic where xcid89 ";$result2 mysql_query($sql2,$conn);$dd0;while($row2 mysql_fetch_array($result2)){$dd$dd1…

逆向某电影网站signKey参数

1.打开我们要获取数据的页面 这里我们可以看到,这个有个加密参数signKey,猫眼好像改了,这个页面一些东西变成动态渲染了。他会发送一个请求去请求这个数据 我们打开这个页面,可以看到 这里面都是我们要的参数,像评分呀…

补某视频网站的js,进行视频解密

前言: 前不久,有个群友在群里发了一个视频的m3u8文件,其中的key是16字节,但是就是无法进行下载。但是用m3u8下载器进行下载时,无法下载下来,我开始怀疑是有请求头检验,用代码请求了一下&#x…

java web gzip_java使用gzip对静态资源的压缩,提供web网站访问速度

一、gzip简介Gzip是若干种文件压缩程序的简称,通常指GNU计划的实现,此处的gzip代表GNU zip。也经常用来表示gzip这种文件格式。软件的作者是Jean-loup Gailly和Mark Adler。在1992年10月31日第一次公开发布,版本号0.1,1993年2月&a…

Web大作业-关于创业计划网站制作的第二天......

嘶......转专业真的是麻烦,前有C语言大作业算法实现,现有Web工程网页要做..... 贴几张预览图吧,第一部分算是完成了,接下来还有两个部分,分别是宣传视频和个人计划的安排。 另外,学校的校园网真菜&#x…

Web大作业-关于创业计划网站制作的第三天......

代码都是我一行一行敲下来的,虽然我相信得分不会很高(确信)。 但是第二部分算是完成了,就是宣传视频部分,让三个网页互相连接,其实我还想用用js把网站写活,奈何能力有限。 第三部分我打算讲述自己的创业计划&#xf…

Web大作业-关于创业计划网站制作的第四天......

主要是登录和注册界面。 还有自己的创业计划。差不多完工了。

5 qlineedit获取内容_SEO内容营销:你应该关注的5个考核指标!

在SEO工作中制定内容营销策略是一个必不可少的工作,毕竟内容为王的时代,任何的营销与推广我们都脱离不了内容,每隔一段时间SEO主管都会对内容营销做复盘,通过数据分析,查看相关指标,是否达到预期。 那么&am…

爬虫学习记录(四)————利用pyquery,re爬取静态网站信息存储到mongodb中

爬虫学习记录(四)————利用pyquery,re爬取静态网站信息存储到mongodb中静态页面爬取引入需要的包定义获取html文件的基本函数定义获取所有详情页的url函数定义解析详细信息的函数将函数链接起来存储到mongodb中链接mongodb的基本参数定义存…

《筑巢引凤:高黏度社会化网站设计秘诀》读书笔记

难怪所有人都想在亚马逊购物,它有其他任何网站都没有的信息——真相(*备注:我们网站的特点:真实性、扩展性) 处于群体之中,围绕群体活动,却又保持个人独立性,这种关系深刻地影响着我…