大型网站--负载均衡架构

news/2024/5/20 7:48:59/文章来源:https://blog.csdn.net/weixin_30294709/article/details/97821969

负载均衡 (Load Balancing) 负载均衡建立在现有网络结构之上,它提供了一种廉价有效透明的方法扩展网络设备和服务器的带宽、增加吞吐量、加强网络数据处理能力、提高网络的灵活性和可用性。

大型网站负载均衡的利器

  • 全局负载均衡系统(GSLB)
  • 内容缓存系统(CDN)
  • 服务器负载均衡系统(SLB)

DNS域名解析的基本过程

最初的负载均衡解决方案(DNS轮询)

优点

  • 基本上无成本,因为往往域名注册商的这种解析都是免费的;
  • 部署方便,除了网络拓扑的简单扩增,新增的Web服务器只要增加一个公网IP即可

缺点

  • 健康检查,如果某台服务器宕机,DNS服务器是无法知晓的,仍旧会将访问分配到此服务器。修改DNS记录全部生效起码要3-4小时,甚至更久;
  • 分配不均,如果几台Web服务器之间的配置不同,能够承受的压力也就不同,但是DNS解析分配的访问却是均匀分配的。用户群的分配不均衡导致DNS解析的不均衡。
  • 会话保持,如果是需要身份验证的网站,在不修改软件构架的情况下,这点是比较致命的,因为DNS解析无法将验证用户的访问持久分配到同一服务器。虽然有一定的本地DNS缓存,但是很难保证在用户访问期间,本地DNS不过期,而重新查询服务器并指向新的服务器,那么原服务器保存的用户信息是无法被带到新服务器的,而且可能要求被重新认证身份,来回切换时间长了各台服务器都保存有用户不同的信息,对服务器资源也是一种浪费。

全局负载均衡系统(GSLB)

优势

  • 数据中心冗余备份
  • 多站点流量优化
  • 确保用户体验

全局负载均衡系统(GSLB)的原理

 

 

DNS检查工具网上有很多,感兴趣的可以搜索一下。

内容缓存系统(CDN)

  • 内容缓存系统(CDN)之静态加速
  • 内容缓存系统(CDN)之动态加速

动态加速的特点

  • 智能路由
  • 传输控制协议(TCP)优化
  • HTTP预载

 

服务器负载均衡系统

应用背景

  • 访问流量快速增长
  • 业务量不断提高

用户需求

  • 希望获得7×24的不间断可用性及较快的系统反应时间

负载均衡必须满足性能、扩展、可靠性 

服务器负载均衡系统三种接入方式

部署方式

特点

优点

缺点

串联路由模式

比较常见的部署方式

  • 负载均衡设备将服务器有效隔离,安全考虑上最好
  • 服务器网关指向负载均衡设备,   功能实现更简单,有利于最大化负载均衡性能
  • 服务器可以直接接收到真实访问源客户IP地址
  • 对现有拓扑结构变动较大
  • 需要考虑内网服务器是否有对外访问需求,必要时需要设置静态NAT转换

单臂模式

最常见的部署方式

  • 部署方便,对现有拓扑结构变动小
  • 和应用无关的流量不会通过负载均衡设备
  • 内部应用无影响,外部应用通常需要前端防火墙做NAT映射到应用VIP
  • 服务器不能直接接收访问客户源地址,需要对应用做修改后才可以通过其他方式获得真实访问地址

DSR

服务器回程报文不通过负载均衡设备,直接返回给客户端; 

延迟短,适合流媒体等对延时要求较高应用

  • 性能高,可处理吞吐量高
  • 服务器可以直接接收到真实访问源客户IP地址
  • 只能做4层的负载均衡,基于7层的服务无法实现优化(例如压缩等)无法使用
  • 需要在服务器上配置loopback地址

 

服务器负载均衡系统的常见调度算法

  • 轮询(Round Robin)
  • 加权轮询(Weighted Round Robin)
  • 最少连接(Least Connections)
  • 加权最少连接(Weighted Least Connections)

健康性检查

健康性检查算法的目的:通过某种探针机制,检查服务器群中真实服务器的健康情况,避免把客户端的请求分发给出现故障的服务器,以提高业务的HA能力。

目前常用的健康性检查算法:

  • Ping(ICMP)
  • TCP
  • HTTP
  • FTP

系统加速

优化功能-SSL加速

优化功能-HTTP压缩

 HTTP压缩是在Web服务器和浏览器间传输压缩文本内容的方法。F5 HTTP压缩技术通过具有智能压缩能力的 BIG-IP 系统可缩短应用交付时间并优化带宽。HTTP压缩采用通用的压缩算法压缩HTML、JavaScript或CSS文件。压缩的最大好处就是降低了网络传输的数据量,从而提高客户端浏览器的访问速度。

 

优化功能-连接复用

优化功能-TCP缓存

 

会话保持

会话保持-客户端源IP会话保持

源IP地址会话保持就是将同一个源IP地址的连接或者请求认为是同一个用户,根据会话保持策略,在会话保持有效期内,将这些发自同一个源IP地址的连接/请求都转发到同一台服务器。

会话保持-Cookie会话保持

当采用基于源地址的会话保持无法做到负载均分时,例如客户端发起连接请求的源IP地址相对固定,发生此类问题通常可采用基于应用层的会话保持方式,Cookie通常是存在于HTTP头中,现如今基于HTTP的应用被广泛使用,因此基于Cookie的会话保持越来越多的出现在服务器负载均衡解决方案中。 

局限性:

  对于非HTTP协议,或者客户端禁用Cookie,无效。

会话保持-URL哈希(Hash)会话保持

哈希会话保持的一个基本概念就是按照某个Hash因子,根据此因子以及后台存在多少台服务器计算得到的结果来选择将请求分配到那台服务器。哈希会话保持的特点是在后台服务器的健康状态不发生改变的时候,每个特定的Hash因子被分配到的服务器是固定的。其最大的优势是哈希会话保持可以没有会话保持表,而仅仅是根据计算的结果来确定被分配到那台服务器,尤其在一些会话保持表查询的开销已经远远大于Hash计算开销的情况下,采用Hash会话保持可以提高系统的处理能力和响应速度。

 URL哈希会话保持通常针对后台采用Cache服务器的应用场景,针对URL进行Hash计算,将同一个URL的请求分配到同一台Cache服务器,这样,对后台的Cache服务器群来说,每台Cache服务器上存放的内容都是不一样的,提高Cache服务器的利用率。

 

故障案例分析

Q&A案例分析(1)-循环跳转

故障现象:

  Web服务端对用户访问的URL进行判断,对于非https的请求,重定向到http站点,结果导致用户一直302跳转。

原因分析:

  采用了负载均衡SSL加速功能,在服务端看到所有的用户请求都来自于http。

解决方案:

  全站启用SSL加速。

Q&A案例分析(2)-用户Session丢失

故障现象:

  用户在http站点上提交数据到同域名的https站点,web程序抛出session丢失的异常,用户提交数据失败。

原因分析:

  http和https在负载均衡设备上被认为是2个独立的服务,产生2个独立的TCP链接,会命中不同的真实服务器,导致session丢失。

解决方案:

  在负载均衡设备上启用基于真实服务器的会话保持。

Q&A案例分析(3)-客户端源IP取不到

故障现象:

  服务端获取不到用户外网的IP地址,看到的都是大量来自于内网特定网段的IP地址。

原因分析:

  负载均衡设备启用了用户源地址转换(SNAT)模式,修改了TCP报文中的用户源IP。

解决方案:

   负载均衡设备会用用户的外网IP改写x-forwarded-for值,服务端通过获取http协议中request header头的x-forwarded-for值作为用户源IP。IIS日志通过安装插件形式显示用户源IP。

服务器负载均衡设备选型

1.价格因素
    硬件设备:F5、 Citrix 、Redware 、A10
    软件:LVS、Nginx、Haproxy、zen loadbalance
2.性能
    4/7层吞吐量(单位bps)
    4/7层新建连接数(单位CPS)
    并发连接数
    功能模块性能指标(ssl加速、 HTTP压缩、内存Cache)
3.满足真实和未来需求
     1)如果确认负载均衡设备对所有应用的处理都是最简单的4层处理,那么理论上选择的负载均衡设备的4层性能稍高于实际性能需求即可。
     2)如果确认负载均衡设备对所有应用的处理都是简单的7层处理,那么理论上选择的负载均衡设备的7层性能稍高于实际性能需求即可。
     3)如果负载均衡设备处理的应用既有4层的也有7层的,建议按照7层应用的性能来考虑负载均衡设备。
     4)如果确认自己的应用经过负载均衡处理时,需要复杂的4层或者7层处理,例如需要根据客户端的地址做策略性分发,需要根据tcp的内容做处理,需要根据HTTP头或者HTTP报文做处理,那么建议选择的负载均衡设备4/7层性能为真实性能需求的两倍。
     5)如果负载均衡设备有混合的复杂流量处理并且还开启了一些功能模块,那么建议选择的负载均衡设备4/7层性能为真实性能需求的3倍。
     6)考虑到设备需要轻载运行才能更加稳定,所以有可能的话在以上基础上再增加30%的性能。
     7)如果还要满足未来几年的发展需求,在以上基础上还要留出未来发展所需要增加的性能。
     8)不同负载均衡设备厂家由于不同的架构,使得某些设备在复杂环境下可能也表现的比较优秀,这个客户可以对比判断,但总体来说,以上建议适合于所有厂家的设备。

 

未完待续

感兴趣的可以我关注微博或博客,如果感觉不错可以点“推荐”

http://vbooking.github.io/

 

转载于:https://www.cnblogs.com/and/p/3366400.html

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.luyixian.cn/news_show_788362.aspx

如若内容造成侵权/违法违规/事实不符,请联系dt猫网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

SharePoint2013配置网站邮箱1

来自:http://rdsrv.blog.51cto.com/2996778/1252117 站点邮箱是Sharepoint 2013的新功能,不知道大家是否知晓,可以在一个网站集下的项目网站上开启站点邮箱,这样根据项目的邮件都会在这里进行汇总,方便相关的管理和查阅…

ASP.NET 例程完全代码版(6)——网站统计模块综述(Session,Application的讨论)

在ASP.NET梦工厂群中,有朋友寻网站当前在线人数和所有访问次数的代码,因为正好看到书上有这个例子就应了下来,结果却小弄了好一阵才搞定,不过还真有些需要注意的问题,在此总结,希望和大家共同交流。原本在V…

在电脑上测试手机网站全攻略

最近公司要开发网站的移动版,让我准备准备知识,话说本人开发移动网站的经验还真不多,最悲剧的事情就是我的手机是个经典的诺基亚,而且公司还不给配手机,这是有多扣啊,没办烦啦,没有手机就用电脑…

优化网站设计(十二):删除重复脚本

前言 网站设计的优化是一个很大的话题,有一些通用的原则,也有针对不同开发平台的一些建议。这方面的研究一直没有停止过,我在不同的场合也分享过这样的话题。 作为通用的原则,雅虎的工程师团队曾经给出过35个最佳实践。这个列表请参考 Best Practices f…

网站数据库从access升级到sql server 2005

我不知道自己会什么,也不知道自己不会什么,但一段时间苦苦的思索,希望能记录这段时间的探索,以便于以后提高效益。 一、所遇情况环境; 二、初期分析阶段; 三、中期摸索阶段; 四、后期解决阶段&a…

企业网站建设方法论

麦肯锡并不神秘,方法论铸就神奇!这是出现在麦肯锡系列丛书封面上非常醒目的一句广告语。博文标题的想法正来源于此,感谢麦肯锡。今天我们要谈论的主角并非麦肯锡,而是方法论,是建设企业网站的方法论。正如标题说言&…

MySQL盈利_个人网站如何盈利

个人网站如何盈利?大多数人第一时间会想到打广告盈利,网站被迫加上一些没有营养或低俗的内容干扰读者阅读,体验十分糟糕😰。最近发现有两个个人网站的运营模式很有意思:网站自己不做宣传,如果用户觉得内容优…

seo原创工具_网站seo需要用到哪些工具,seo工具大全

我们在做seo优化的时候,如果有一款合适便捷工具能够辅助到自己,就会事半功倍,对新手来言更是需要这些工具来帮助自己优化自己的网站,小编也准备了相关工具,希望能帮助到大家。seo工具-站长平台首先在seo工作的时候&…

WebMatrixRazor建站系列之WebMatrix介绍

WebMatrix介绍 WebMatrix是微软开发的一个免费的,轻量级Web开发工具。提供了一种简单的方式让我们创建一个站点。它包括IIS Express(Web服务器),ASP.NET(Web框架),和SQL Server Compact&#xf…

php 怎么添加字体_WP菜鸟建站22:怎样给wordpress主题添加友情连接功能模块?

为了给我们的wordpress网站提升流量,作为站长的我们,往往会通过互换友情链接来方式来为自己的wordpress网站增加外来入口。另外,如果对方的网站对于搜索引擎的权重比较高时,对我们wordpress网站权重会有相应的提升,就好…

网站代码用什么打开_网站打开速度对企业有什么影响?

网站制作一年350元,五站合一,快速建站 ,www.sxjcwzjs.com,只需进入网站右上角注册快速建站即可(需要电脑登录注册),需要联系我吧!电话:13752214574,微信号:m1078582894网站打开慢了&…

网站极限优化之php优化

这段时间忙死了,早上一大清早就要起来学计算机英语,听商务英语,前些日子搞数据库优化研究已经有了结果,现在就剩下php优化了,当然了,人各有志,只是发表下个人的看法,大家可以踊跃发表…

设备能力指数cmk计算公式_网站运营数据分析指标及计算公式

做互联网运营的人,不管是网站运营、产品设计或是交互设计等,都需要对网站的一些运营数据做分析,通过数据分析结果做出相应调整,进而达到最优的投资回报。本期,我们给大家整理的是常用的网站运营数据分析指标及计算公式…

js怎么判断点击了哪个li标签的下标_你要知道的企业网站怎么优化?

随着互联网时代的兴起,很多公司都建立了自己的官方网站,但很多公司认为建立官方网站,会有很多用户来到我们的网站,其实这是错误的观点,如果你的公司没有品牌实力如何有人搜索您的网站并点击进入官方网站?建…

php后台html模板_织梦后台一键更新网站、更新文档HTML卡死的解决方法

如果你正在用的是最新版的织梦程序(2018-01-09),你可能会遇到后台一键更新网站、更新文档HTML卡死的情况,织梦后台一键更新网站、更新文档HTML卡死的解决方法那是因为织梦官方的德得广告服务器挂了,后台生成文档时会加载德得广告库文件与官方…

birt中文手册在线_强烈推荐几个SQL在线刷题的网站

↑ 关注 星标 ,后台回复【大礼包】送你Python自学大礼包SQLZOO (⭐⭐) https://sqlzoo.net/上面的网址是一个免费的SQL学习网站——SQLZOO!它支持语言:English • 日本語 • 中文(繁体),不过选择繁体中文后会发现翻译的也一般&a…

搭建 Nginx 静态网站

示例代码:/etc/nginx/nginx.conf user nginx;worker_processes auto;error_log /var/log/nginx/error.log;pid /run/nginx.pid;include /usr/share/nginx/modules/*.conf;events { worker_connections 1024;}http { log_format main $remote_addr - $remote…

插入网站连接_第八组 网站开发

DW简介Adobe Dreamweaver,简称“DW”,中文名称 "梦想编织者",最初为美国MACROMEDIA公司开发,2005年被Adobe公司收购。DW是集网页制作和管理网站于一身的所见即所得网页代码编辑器。利用对 HTML、CSS、JavaScript等内容的…

网站如何记录访客的个人信息?

大多数网站都会带有留言或者评论功能,那么访客在留言或者评论时肯定要记录访客的个人信息!这样访客在下一次访问网站时不需要再次填写个人信息,直接评论就ok啦!那么怎么记录访客的个人信息呢? 一、利用cookie来记录访客…

linux下yii框架,YII框架网站开发流程

Yii 是什么Yii 是一个基于组件的高性能 PHP 框架,用于快速开发大型 Web 应用。它使Web开发中的 可复用度最大化,可以显著提高你的Web应用开发速度。Yii 这个名字(读作易(Yee) 或 [ji:])代表 简单(easy), 高效(efficient) 和 可扩展(extensible).安装Yii …