大型网站架构之百万PV网站架构

news/2024/5/8 22:08:48/文章来源:https://blog.csdn.net/weixin_33728268/article/details/91681267

PV(page view)即页面浏览量,通常是衡量一个网络新闻频道或网站甚至一条网络新闻的主要指标。网页浏览数是评价网站流量最常用的指标之一,简称为PV。

  • 案例概述
    本案例设计采用四层模式来实现,主要分为前端反向代理、web层、数据库缓存层、数据库层。
    前端反向代理层采用主备模式,Web层采用群集模式,数据库缓存层采用主备模式,数据库层采用主备模式

  • 架构拓扑图:实现是正常情况数据流向,虚线是异常情况下的数据流向。
    大型网站架构之百万PV网站架构
  • 本案例数据库的架构简单了点,配置文件也是默认没有经过优化,如果数据库压力大,可以考虑优化,也可以使用读写分离架构。或者采用多主多从。
  • 电脑配置有限 这里就将代理层、redis缓存数据层、mysql数据库层 合并在一起了
  • 案例所用的软件包:点击下载

主机名IP用途
master192.168.200.128前端nginx反向代理主机、redis缓存主机、mysql数据主库
backup192.168.200.129前端nginx反向代理备机、redis缓存备机、mysql数据备库
web1192.168.200.130tomcat服务器、显示网站
web2192.168.200.131tomcat服务器、显示网站
VIP192.168.200.200

  • master、backup 服务器上配置
  • keepalived+nginx安装配置
  • 安装带有nginx rpm软件包的源

    # systemctl stop firewalld.service
    # setenforce 0
    # rpm -ivh http://nginx.org/packages/centos/7/noarch/RPMS/nginx-release-centos-7-0.el7.ngx.noarch.rpm
  • 使用centos 默认仓库完成下面的安装
  • 注意主从配置 3处不同,已经标注

    # yum install -y keepalived nginx
    # vi /etc/keepalived/keepalived.conf     //从上修改三个参数! Configuration File for keepalivedglobal_defs {route_id NGINX_HA              //备份为 NGINX_HB
    }  //下面删除4行//触发脚本↓↓
    vrrp_script nginx {script "/opt/shell/nginx.sh"   interval 2
    }vrrp_instance VI_1 {state MASTER               //备份为BACKUPinterface ens33virtual_router_id 51        priority 100                 //备份优先级小于主advert_int 1authentication {auth_type PASSauth_pass 1111
    }track_script {nginx
    }virtual_ipaddress {192.168.200.200}
    }# mkdir /opt/shell
    # vi /opt/shell/nginx.sh      //编写触发nginx启动的脚本#!/bin/bashk=`ps -ef | grep keepalived | grep -v grep | wc -l`if [ $k -gt 0 ];then/bin/systemctl start nginx.serviceelse/bin/systemctl stop nginx.servicefi
    # chmod +x /opt/shell/nginx.sh
  • 配置nginx前端调度功能
  • 主备配置一样

    # vi /etc/nginx/nginx.conf //在include 上面一行新增upstream tomcat_pool {server 192.168.200.130:8080;    //web节点服务器server 192.168.200.131:8080;ip_hash;           #会话稳固功能,否则无法通过vip地址登陆}server {listen 80;server_name 192.168.200.200; #虚拟出的IP  location / {proxy_pass http://tomcat_pool;proxy_set_header X-Real-IP $remote_addr;}}

    大型网站架构之百万PV网站架构

    # nginx -t -c /etc/nginx/nginx.conf  //测试配置文件语法
    # systemctl start keepalived.service    //nginx启动会等待一会
  • master、backup 服务器上配置
  • 数据库的安装配置

    # yum install -y mariadb-server mariadb
    # systemctl start mariadb.service
    # systemctl enable mariadb.service
    # netstat -anpt | grep 3306
    # mysql_secure_installation    //常规安全设置输入( 回车 n n n n y)
  • 导入数据库

    # mysql -u root -p  < slsaledb-2014-4-10.sql
    # mysql -uroot -p
    # show databases;
    > GRANT all ON slsaledb.* TO 'root'@'%' IDENTIFIED BY 'abc123';
    > flush privileges; 
  • web服务器上配置
  • 安装配置tomcat (节点服务器 两台都要做)

    # systemctl stop firewalld.service
    # setenforce 0
    # tar xf apache-tomcat-8.5.23.tar.gz -C /opt
    # tar xf jdk-8u144-linux-x64.tar.gz -C /opt
    # cp -rv jdk1.8.0_144/ /usr/local/java
    # vi /etc/profile   //末尾添加下面4行export JAVA_HOME=/usr/local/javaexport JRE_HOME=/usr/local/java/jreexport PATH=$PATH:/usr/local/java/binexport CLASSPATH=./:/usr/local/java/lib:/usr/local/java/jre/lib
    # source /etc/profile
    # java -version    //查看版本
    # cp -r apache-tomcat-8.5.23 /usr/local/tomcat8
    # ln -s /usr/local/tomcat8/bin/startup.sh /usr/bin/tomcatup
    # ln -s /usr/local/tomcat8/bin/shutdown.sh /usr/bin/tomcatdown# tomcatup    //启动tomcat
    # netstat -anpt | grep 8080  //查看端口是否启动

大型网站架构之百万PV网站架构

    # vi /usr/local/tomcat8/webapps/ROOT/index.jsp //修改默认网页内容<h1>Server 130</h1>   //节点1的网页内容<h1>Server 131</h1>  //节点2的网页内容
  • 在浏览器测试页面
  • http://192.168.200.200/ 输入调度器地址,也就是虚拟地址,测试两台节点的调度情况。

大型网站架构之百万PV网站架构
大型网站架构之百万PV网站架构


# cd /usr/local/tomcat8/conf/
# vi server.xml   //跳到行尾,在Host name下新增  在149行<Context path="" docBase="SLSaleSystem" reloadable="true" debug="0"></Context>
日志调试信息debug为0表示信息越少,docBase指定访问目录       # tomcatup    //启动tomcat

大型网站架构之百万PV网站架构


  • 搭建商城网站

    # tar xf SLSaleSystem.tar.gz -C /usr/local/tomcat8/webapps/
    # cd /usr/local/tomcat8/webapps/SLSaleSystem/WEB-INF/classes
    # vi jdbc.properties   //修改数据库IP地址是VRRP的虚拟IP,以及授权的用户名root和密码abc123。
    # tomcatdown    //停止tomcat
    # tomcatup    //启动tomcat

大型网站架构之百万PV网站架构

  • 网站测试
  • http://192.168.200.130:8080/ //默认的用户名admin 密码:123456
  • http://192.168.200.131:8080/
  • http://192.168.200.200 //输入虚拟地址测试登录,并且关闭主再测试登录

大型网站架构之百万PV网站架构大型网站架构之百万PV网站架构大型网站架构之百万PV网站架构

  • master、backup 服务器上配置
  • 部署redis主从和群集

    # yum install -y epel-release
    # yum install redis -y
    # cat /etc/redis.conf | grep -v "^#" | grep -v "^$"
    # vi /etc/redis.confbind 0.0.0.0从服务器上266行多如下一行配置slaveof 192.168.200.128  6379  //主服务器的IP不是虚拟IP# systemctl start redis.service
    # netstat -anpt | grep 6379
    # redis-cli -h 192.168.200.128 -p 6379 //测试连接
    192.168.200.128:6379> set name test  //设置name 值是test
    192.168.200.128:6379> get name  //获取name值
    "test"
    # redis-cli -h 192.168.200.129 -p 6379 //登录从,获取值,成功说明主从同步成功
    192.168.200.129:6379> get name
    "test"


  • web服务器上配置
  • 配置商城项目中连接redis的参数

    # vi /usr/local/tomcat8/webapps/SLSaleSystem/WEB-INF/classes/applicationContext-mybatis.xml47                 <constructor-arg value="192.168.200.200"/>48                 <constructor-arg value="6379"/>
    # tomcatdown    //停止tomcat
    # tomcatup    //启动tomcat

大型网站架构之百万PV网站架构


  • master、backup 服务器上配置
  • 测试redis缓存效果
  • 登录商城,然后反复点击需要数据库参与的操作页面,再回来检查keyspace_hits或者keyspace_misses: 值变化
  • keyspace_hits: 或者 keyspace_misses://关注这个值,命中数和未命中数

    # redis-cli -h 192.168.200.200 -p 6379
    192.168.200.200:6379> info

    大型网站架构之百万PV网站架构
    大型网站架构之百万PV网站架构


  • 配置redis集群主从切换
  • 只在主服务器是操作

    # redis-cli -h  192.168.200.128 info Replication   //获取当前服务器的角色

大型网站架构之百万PV网站架构

# vi /etc/redis-sentinel.conf (17行  68行 98行)
17 protected-mode no
68 sentinel monitor mymaster 192.168.200.128 6379 1 //1表示1台从 注意:修改
98 sentinel down-after-milliseconds mymaster 3000 //故障切换时间单位是毫秒# service redis-sentinel start //启动集群
# netstat -anpt | grep 26379
# redis-cli -h 192.168.200.128 -p 26379 info Sentinel  //查看集群信息

大型网站架构之百万PV网站架构
大型网站架构之百万PV网站架构

  • 验证主从切换
  • 在主上

    #  systemctl stop redis.service
    # redis-cli -h 192.168.200.128 -p 26379 info Sentinel //发现主变成了129
    # systemctl start redis.service   //验证切换成功后在开启服务

大型网站架构之百万PV网站架构


  • master、backup 服务器上配置
  • 配置mysql主从复制
  • mysql主服务器配置

    # vi /etc/my.cnf      // [mysqld]下binlog-ignore-db=mysql,information_schemacharacter_set_server=utf8log_bin=mysql_binserver_id=1log_slave_updates=truesync_binlog=1

    大型网站架构之百万PV网站架构

    # systemctl restart mariadb
    # netstat -anpt | grep 3306# mysql -u root
    > show master status; //记录日志文件名称和 位置值
    > grant replication slave on *.* to 'rep'@'192.168.200.%' identified by '123456';
    > flush privileges;
  • mysql从服务器配置

    # vi /etc/my.cnf / /[mysqld]下server_id=2# systemctl restart mariadb
    # netstat -anpt | grep 3306
    # mysql -u root
    > change master to master_host='192.168.200.128',master_user='rep',master_password='123456',master_log_file='mysql_bin.000001',master_log_pos=245;
    > start slave;
    > show slave status\G;    

大型网站架构之百万PV网站架构


  • 验证架构
  • 关掉master 浏览网页:192.168.200.200

大型网站架构之百万PV网站架构

转载于:https://blog.51cto.com/13630803/2152335

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.luyixian.cn/news_show_845760.aspx

如若内容造成侵权/违法违规/事实不符,请联系dt猫网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

NET开发人员必知的八个网站

当前全球有数百万的开发人员在使用微软的.NET技术。如果你是其中之一&#xff0c;或者想要成为其中之一的话&#xff0c;我下面将要列出的每一个站点都应该是你的最爱&#xff0c;都应该收藏到书签中去。 对于不熟悉.NET技术的朋友&#xff0c;需要说明一下&#xff0c;.NET提供…

软件测试面试题-网站

个人收集归纳&#xff1a; 1. 软件测试面试题&#xff08;汇总&#xff09; 2. 软件测试面试题 3. 软件测试题目(4)——实际工作问题 4. 下拉框测试点 转载于:https://www.cnblogs.com/snailon/p/10761991.html

汾酒集团seo搜索引擎_思缺短悟的时候你会怎么做?才能让品牌SEO优化文章写得更好...

思缺短悟是琢金集团小编经常发生的状态&#xff0c;每次想要动笔&#xff0c;却又不知道如何动&#xff0c;怎么动。然在下笔编撰品牌SEO优化文章时常失措&#xff0c;让笔中无神&#xff0c;让墨中无知。虽有雄心&#xff0c;却胸中无印。不过琢金集团小编虽然经常不知道写些什…

Linux上部署的网站偶尔无法访问问题

前言&#xff1a;&#xff1a;&#xff1a;&#xff1a;差不多一切的问题不是网络问题就是配置问题&#xff01;&#xff01;&#xff01;&#xff01;&#xff01; 懒得看的就往下看&#xff0c;最最最后面&#xff0c;问题解决和总结 当时有一个项目&#xff0c;有一定的并…

企业微信如何实现PC端扫码登录第三方网站

1 登录企业微信 https://work.weixin.qq.com/ 创建应用 2 在应用里需要配置 工作台应用主页 (即扫码后的跳转地址) 和 企业微信授权里的授权回调域 (必须跟跳转地址是相同域名) 3 开始开发 文档地址 <!DOCTYPE html> <html lang"en"> <head><…

7个超强自学Python的网站,比收费还好用,让你剩下好几万的学费

很多同学在学习编程之初&#xff0c;都苦于不知道上哪里寻找学习资料。其实网上免费的教程就有很多&#xff0c;足够我们入门学习。 今天给大家分享几个自学python经常用到的网站&#xff0c;非常实用&#xff0c;建议收藏&#xff01; 1.中文版官方教程 https://docs.pytho…

Hosts反黑文件最新版:用HOSTS文件屏蔽恶意网站列表

Vista之家&#xff08; www.vista123.com&#xff09;隆重推荐大家使用HOSTS反黑文件&#xff08;感谢电脑报黑榜栏目&#xff1a;http://www.cpcw.com/web/f/host.html&#xff09;&#xff0c;首先&#xff0c;大家先来了解它的用途。 HOSTS反黑文件最新版本更新时间&#x…

腾讯建站主机linux,腾讯云Linux服务器安装Wordpress,一键建站入门教程

一、环境笔者用的是腾讯云服务器1核1G的配置&#xff0c;操作系统是centos7.2二、安装lnmp在lnmp官网(https://lnmp.org/download.html)里找到最新版的链接。目前的版本为1.5&#xff0c;链接是http://soft.vpser.net/lnmp/lnmp1.5.tar.gz然后在服务器中运行以下命令进行安装:w…

购物网站研究分析报告

本人在公司负责erp开发和网络销售网站的开发工作&#xff0c;购物网站已经上线,网站是“荣荣毛巾网”&#xff0c; 大家可以去参考一下。以下是我在项目之初做的“可行性分析”报告里的第一章内容&#xff0c;后几章 内容涉及到公司商业机密&#xff0c;不便发上来&#xff0…

Clubof.net 社交网站代码分析系列课程

Clubof.net 社交网站代码分析系列课程(1)&#xff1a;概述 (Level 200) 讲  师&#xff1a;钟卫 课程简介&#xff1a;与开心网不同&#xff0c;Clubof.net是一个垂直行业的IT人社交网站&#xff0c;它以Friendev为项目原形&#xff0c;其中借鉴了很多Social Network理念及应…

gitee本机关联网站建设的库

输入&#xff1a; //初始化目录 git init//链接现有库 git remote add origin https://gitee.com/xxx/xxx.git//下载代码 git pull origin master//.所有上传代码 git add .//提交注释 git commit -m "注释"//提交上传代码 git push origin master 适合网站创建后本…

一个学习技术网站导航分享

https://index.tesla-space.com/ 里面有很多的资源贼香

大型网站架构演变和知识体系

大型网站架构演变和知识体系2009-10-23 09:13之前也有一些介绍大型网站架构演变的文章&#xff0c;例如LiveJournal的、ebay的&#xff0c;都是非常值得参考的&#xff0c;不过感觉他们讲的更多的是每次演变的结果&#xff0c;而没有很详细的讲为什么需要做这样的演变&#xff…

大型电子商务网站架构,摘抄

7.同一个网站的多语言该如何处理是好,使用配置文件然后cookie或url来判别?客户是自己公司&#xff0c;使用标准方法即可8.电子商务网站最多的就是 商品的打折方式和积分的赠送了,这里要怎么设计才好(工厂模式)?采购成熟的规则引擎9.如果同一时间并发大量订单的话,如果确保一个…

甲骨文 大规模可伸缩网站 MySQL参考架构

甲骨文发布了《面向大规模可伸缩网站基础设施的MySQL参考架构》白皮书&#xff0c;针对将MySQL用作数据存储的不同类型和不同规模的网站给出了推荐的拓扑结构。 根据分别提供4类服务——用户和会话管理、电子商务、分析类应用 (多结构数据)和CMS(元数据)——的网站的规模和可用…

使用k-近邻算法改进约会网站的配对效果以及手写数字识别测试

创建k-近邻算法分类器 def classify0(inX,dataSet,labels,k):## inX:用于分类的输入向量## dataSet:输入的训练样本集## labels:训练样本标签## k:选择的近邻数目dataSetSizedataSet.shape[0] ##样本集的数目diffMattile(inX,(dataSetSize,1))-dataSet ##输入向量与训练样本相…

leetcode算法总结(基于carl网站)

前言 本篇参考链接: 代码随想录. 所有类型题都可在网站里找到&#xff0c;这里不做详细标注 数组 二分查找 适用情况&#xff1a;在已经排序好的数组&#xff08;元素无重复&#xff09;中快速找到某一个满足条件的元素。 例题&#xff1a; 给定一个 n 个元素有序的&#x…

jsp获取网站域名 域名解析

部署主机如果有弄域名解析的话 访问http://www.domain.com时会自动请求到相应的页面http://ip:port/webApp/index.jsp 此时在index.jsp代码 Html代码 String basePath request.getScheme()"://"request.getServerName()":"request.getServerPort()path&q…

可扩展、高可用、负载均衡网站架构设计方案

可扩展、高可用、负载均衡网站架构设计方案作者&#xff1a;田逸(sery163.com) 本作品已刊登在《IT实验室周报》第6期第6版基本需求: 1、高可用性&#xff1a;将停止服务时间降低到最低甚至是不间断服务2、可扩展性&#xff1a;随着访问的增加&#xff0c;系统具备良好的伸缩能…