JMS-使用消息队列优化网站性能

news/2024/5/9 11:33:52/文章来源:https://blog.csdn.net/zhushuai1221/article/details/52346640

在当今互联网和电商盛行的情况下,网站的性能受到了极大地挑战。大数据,高并发成为大型网站的标志。无论淘宝的双11优惠,还是小米抢购,它们都有一个共同的特点,那就是在短时间内,突然涌入超出平时数倍的用户。

如果每个用户从请求,到订单处理,再到响应返回均在一个请求中同步处理的话,用户的响应时间将会随着并发量的提高越来越久,直到最后服务器崩溃。在这种情况下,可以使用JMS消息队列,异步处理订单。用户发出请求,服务器接收请求以后,向消息队列中发送一个消息,就立刻返回“订单正处理”的消息给用户。而订单处理服务器可以不停的从消息队列中取出消息,按照自己的节奏进行处理。这就像生产者-消费者模式一样。通过这种异步的处理方式,用户响应时间得到缩减,服务器的压力也可以被时间分担,从而避过洪峰期。

在之前的文章 JavaMail发送google email 中,我使用的是同步方式发送email,可以一个用户的响应有多慢。今天我将使用JMS的方式,改进邮件发送系统。

JMS

首先还是要简单的介绍下JMS(Java Messaging Service)。太基础的就不再唠叨了,这里只列出JMS的两种消息模式:

PTP模式

PTP模式中,消息是Queue的形式从一端到另一端。无论client2是否连接,运行中, JMS的可靠性使得 Msg都不会丢失。当client2恢复运行时,Queue会继续传输。Queue的两端可以有多个clients,但是每一个消息,只能被一个consumer client消费。所以,对于消费客户端们而言,也属于争抢式消费。


Pub/Sub模式

在发布订阅的模式中,则是以topic,subscription,client的方式。所有的订阅者均可受到消息,一个消息会被重复的发送给不同的消费者。



一个topic下面可以挂很多的subscription,但是这些subscription只有4种类型,这4中类型如下图:



Subscription:只能有一个client,当client断开连接,subscription则自动销毁。

Durable Subscription:只能有一个client,当client断开连接后,Message会被存在subscription中,一旦client重新连接,则继续发送消息。

Shared Subscription:可以有多个client同时挂在一个subscription上,这样可以有多个client并行的处理此Subscription下的消息。记住,消息只能被其中一个client所消费,不能被多个client同时消费。

Shared Durable Subscription:区别在durable上,即client断线,subscription会继续存在。

PTP适合单一消息类型,单一消费者类型。而Pub/Sub适合多种类消息,和多种消费者类型。

此外,消息可以是可持久化的,也可以是非持久化的。持久化的消息将被写入硬盘,当MQ server重启后,消息不会丢失。

消息的消费方式也存在两种模式:

  1. JMS client API调用。此种方式的缺点在于,需要自己维护多线程。

  2. MDB(Message Driven Bean)。使用EJB的方式,可以由EJB容器帮忙管理多线程。其中MDB是多实例的,每个消息过来都是一个新的线程。

JMS服务器

一般,称为MQ server。当前最火的是Apache ActiveMQ,也有使用JBoss Messaging的。但本文将使用Oracle的Glassfish Open MQ。

Open MQ是Oracle Glassfish下的一款MQ server,它是第一个实现了JMS2.0标准的MQ server。它可以单独使用,搭建集群,也可以内嵌到Glassfish中使用。在Glassfish4中,OpenMQ已经集成在Glassfish4中。Glassfish4可以使用内嵌的OpenMQ来满足小型网站的异步消息处理,也可以使用外部的OpemMQ集群来满足大型网站的异步消息处理。

有人会很纠结,ActiveMQ,OpenMQ到底哪一个好?其实我觉得每一款软件都有各自的特点,它们均能支撑起一个大型网站的架构,问题在于你如何使用它们。Glassfish是一个缩小型的WebLogic,轻巧易用。OpenMQ支持JMS2.0,易集成于Glassfish,又为Oracle支持的开源项目,其能力一样强悍。唯一的缺点是,集成于Glassfish中的OpenMQ不支持C客户端。

接下来,我将使用JMS消息队列来优化邮件发送系统。

小型网站的邮件发送系统

必备软件

Glassfish4,版本4是必须的,因为4中集成了OpenMQ,我们可以直接在Glassfish4中使用本地JMS服务。针对大型网站的远程JMS服务,我们将在下一篇文章中实现。

改造方案

本文将尝试两种改造方案:

  1. JMS client API + threadPool,自己在后台启动线程监听,并管理多线程。

  2. MDB, EJB容器进行Message监听,并帮助管理多线程。

应该使用多少线程? 线程的数量与CPU的数量和IO阻塞时间有关系。如果线程没有任何IO阻塞,那么,线程数量应该和CPU数量相同。因为多余的线程需要等待CPU。如果存在IO阻塞,则需要多余CPU数量的线程,一个线程阻塞在IO上的时候,CPU不至于空闲,可以去执行其它线程。仔细推导,可以能通过IO阻塞时间跟运行时间的比例,可以计算出所需线程的数量 。

显然,方案二是最明智的做法。家下来,开始实现方案二。

配置JMS Resources

打开Glassfish管理页面 http://localhost:4848  

配置JMS ConnectionFactory。可以使用glassfish默认的。


配置Destination Resources. 展开Resources->JMS Resources->Destination Resources. 创建一个Queue resource。



配置Java Mail Session

请在上一篇文章中 http://my.oschina.net/xpbug/blog/263974#OSC_h2_3  找到Gmail的配置方法。

创建一个Web项目

创建一个名为sample的web项目。

创建MDB

创建接收JMS消息的MDB,我们使用简单的text message。email地址在message体中。MDB会向地址中发送一个简单邮件。

package com.mycompany;import java.util.logging.Level;
import java.util.logging.Logger;
import javax.ejb.ActivationConfigProperty;
import javax.ejb.MessageDriven;
import javax.jms.JMSException;
import javax.jms.Message;
import javax.jms.MessageListener;
import javax.mail.Address;
import javax.mail.MessagingException;
import javax.mail.Session;
import javax.mail.Transport;
import javax.mail.internet.InternetAddress;
import javax.mail.internet.MimeMessage;
import javax.naming.Context;
import javax.naming.InitialContext;
import javax.naming.NamingException;/**** @author none2*/
@MessageDriven(activationConfig = {@ActivationConfigProperty(propertyName = "destinationLookup", propertyValue = "jms/myQueue"),@ActivationConfigProperty(propertyName = "destinationType", propertyValue = "javax.jms.Queue")
})
public class EmailMessageBean implements MessageListener {private final Session mySession;public EmailMessageBean() throws NamingException {Context initCtx = new InitialContext();mySession = (Session) initCtx.lookup("mail/mySession");}@Overridepublic void onMessage(Message message) {	try {String address = message.getBody(String.class);javax.mail.Message mail = new MimeMessage(mySession);mail.setFrom(new InternetAddress("joey.zhangpeng@gmail.com"));Address toAddress = new InternetAddress(address);mail.addRecipient(javax.mail.Message.RecipientType.TO, toAddress);mail.setSubject("Hello");mail.setText("A notification.");Transport.send(mail);} catch (MessagingException | JMSException ex) {Logger.getLogger(EmailMessageBean.class.getName()).log(Level.SEVERE, null, ex);}}
}

index.html

创建网站的默认页面

<html><head><title>TODO supply a title</title><meta charset="UTF-8"><meta name="viewport" content="width=device-width, initial-scale=1.0"></head><body><form method="post" action="/sample/NotifyServlet">Email:<input name="email" value=""/><input type="submit" value="Buy" name="submit"/>			</form></body>
</html>

创建NotifyServlet

在servlet中,使用jms client,发送jms消息到queue中。

package com.mycompany;import java.io.IOException;
import java.io.PrintWriter;
import javax.annotation.Resource;
import javax.jms.ConnectionFactory;
import javax.jms.JMSContext;
import javax.jms.Queue;
import javax.servlet.ServletException;
import javax.servlet.annotation.WebServlet;
import javax.servlet.http.HttpServlet;
import javax.servlet.http.HttpServletRequest;
import javax.servlet.http.HttpServletResponse;/**** @author none2*/
@WebServlet(name = "NotifyServlet", urlPatterns = {"/NotifyServlet"})
public class NotifyServlet extends HttpServlet {@Resource(lookup = "java:comp/DefaultJMSConnectionFactory")private ConnectionFactory connectionFactory;@Resource(lookup = "jms/myQueue")private Queue queue;@Overrideprotected void doPost(HttpServletRequest request, HttpServletResponse response)throws ServletException, IOException {String email = request.getParameter("email");try (JMSContext context = connectionFactory.createContext();) {context.createProducer().send(queue, email);}response.setContentType("text/html;charset=UTF-8");try (PrintWriter out = response.getWriter()) {/* TODO output your page here. You may use following sample code. */out.println("<!DOCTYPE html>");out.println("<html>");out.println("<head>");out.println("<title>Servlet NotifyServlet</title>");			out.println("</head>");out.println("<body>");out.println("<h1>You have send a notification to " + email + "</h1>");out.println("</body>");out.println("</html>");}}
}

最后,进行项目打包并部署。访问 http://localhost:8080/sample/  来测试一下。


原文链接:http://www.tuicool.com/articles/QfEri2



本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.luyixian.cn/news_show_818945.aspx

如若内容造成侵权/违法违规/事实不符,请联系dt猫网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

大型网站架构之分布式消息队列

以下是消息队列以下的大纲&#xff0c;本文主要介绍消息队列概述&#xff0c;消息队列应用场景和消息中间件示例&#xff08;电商&#xff0c;日志系统&#xff09;。 本次分享大纲 消息队列概述消息队列应用场景消息中间件示例JMS消息服务常用消息队列参考&#xff08;推荐&am…

谈谈网站防盗链

引子&#xff1a;明明引用了一个正确的图片地址&#xff0c;但显示出来的却是一个红叉或写有“此图片仅限于***网站用户交流沟通使用”之类的“假图片”&#xff08;下图便是网易博客的防盗链效果&#xff09;。用嗅探软件找到了多媒体资源的真实地址用下载软件仍然不能下载。下…

CSDN网站在800x600分辨率下看不到真正有用的内容

首页都是广告帖子浏览是广告和多余的空白

大学四年因为知道了这 60 个网站,我成了别人眼中的大神!

哈哈&#xff0c;大佬&#xff0c;你咋又进来白嫖了&#xff0c;难道辛苦整理的网站又滚到收藏夹吃灰了吗&#xff1f;明人不说暗话&#xff0c;我就喜欢你白嫖的性格。但是白嫖的人素质都很高&#xff0c;从来都会先点赞后白嫖的&#xff0c;欢迎白嫖 哈哈哈~~ 自从看了这些网…

大学四年,我把私藏的自学「学习网站/实用工具」都贡献出来了

我应该学哪些方向&#xff1f;要学习哪些知识&#xff1f;怎么学习&#xff0c;看视频还是做项目&#xff1f;要学好编程&#xff0c;给你一些学习网站也好、实用工具也好&#xff0c;但前提是你知道如何去学习它。对于学习&#xff0c;特别是自学&#xff0c;善于搜索网上的一…

搜索引擎SEO外挂:一边搜索,一边看PageRank

搜索引擎SEO外挂&#xff1a;一边搜索&#xff0c;一边看PageRank下载地址&#xff1a;多么乐站长工具 我原来曾写过一篇统计分析搜索引擎排名和Page Rank 关联分析 的文章。很多人引用&#xff0c;回复和我讨论了我的结论。有赞成的&#xff0c;有反对的&#xff0c;有鼓励的&…

seo优化:把百度放进数据库

seo优化:把百度放进数据库有时候我想&#xff0c;能把百度的数据放进数据库&#xff0c;用广大程序员熟悉的sql语句查询百度的搜索结果应该是一个不错的主意。在这方面Google早已经跨出了一大步&#xff0c;利用Google Search API 把Google的搜索结果放进数据库是很容易办到得。…

网站推荐机制中的艺术、科学与商务问题

网站推荐机制是电子商务或内容网站的核心功能之一。例如你在一个网站买了一本书后&#xff0c;网站会推荐其他你可能会感兴趣的书。这被认为是亚马逊等电子商务巨头成功的关键。本文对几个出色的推荐系统进行了较透彻的分析。2006年10月&#xff0c;Netflix搞了一次不寻常的有奖…

OpenCms创建网站过程图解——献给OpenCms的初学者们

很多人都听说了OpenCms&#xff0c;知道了它的强大&#xff0c;索性的下载安装了&#xff0c;终于见到了久违OpenCms&#xff0c;看到了它简洁的界面&#xff0c;欣喜过后却不免一脸茫然&#xff0c;这个东西怎么用&#xff0c;我怎么用它来建站&#xff0c;从哪开始&#xff0…

实际采用 FleaPHP 的网站

下面都是采用 FleaPHP 框架开发的网站列表&#xff0c;如果发现无效连接请在留言。如果你有采用 FleaPHP 开发的网站&#xff0c;并且愿意公开网址&#xff0c;可以发邮件到 dualface (at) gmail.com需要提供的信息包括网站名称和连接地址&#xff0c;以及简单的介绍文字。云南…

[转]开发大型高负载类网站应用的几个要点

开发大型高负载类网站应用的几个要点作者&#xff1a;nightsailer 来源&#xff1a;http://www.phpchina.com/bbs/thread-15484-1-1.html看了一些人的所谓大型项目的方法,我感觉都是没有说到点子上&#xff0c;有点难受。我也说说自己的看法.我个人认为,很难衡量所谓项目是否大…

Linux 私房菜————LAMP架构企业网站 | Apache源码安装 | MySQL源码安装 | PHP源码安装

LAMP架构企业网站1.LAMP概述2.LAMP组件的作用介绍2.1 Linux[基础平台]2.2 Apache[ 前台]2.3 MySQL[后台]2.4 PHP/Python/Perl[中间连接]3.源码编译安装Apache服务3.1 安装环境依赖包3.2 配置模块3.3 开始编译安装3.4 创建链接文件方便日后配置维护[可选]3.5 添加httpd系统服务方…

Linux 私房菜————Nginx网站服务|访问状态统计配置|访问控制|

1.Nginx概述 一款高性能、轻量级Web服务软件 稳定性高 系统资源消耗低 对HTTP并发连接的处理能力高 单台物理服务器可支持30000~50000个并发请求 2.编译安装Nginx服务 2.1 关闭防火墙将nginx所需软件包到/opt目录下 systemctl stop firewalld systemctl disable firewalld …

推荐几个好玩又有难度的编程网站

分享一下我老师大神的人工智能教程&#xff01;零基础&#xff0c;通俗易懂&#xff01;http://blog.csdn.net/jiangjunshow也欢迎大家转载本篇文章。分享知识&#xff0c;造福人民&#xff0c;实现我们中华民族伟大复兴&#xff01;推荐几个好玩又有难度的编程网站作者&#x…

Red Hat推出”MugShot”社交娱乐网站

网址: http://mugshot.org/Red Hat近来推出”MugShot”网站, MugShot是一个致力于在线社交娱乐的开源项目. 它提供了更方便的网页和音乐分享. 当前MugShot处于测试阶段, 只提供邀请帐号. 你可以从这里申请. 更多信息见常见问题和开发主页.欢迎任何问题和建议.

Google 联合一些社交网站来对抗 facebook

谷歌(Google) 将与其它一些行业领先的社交网站联手&#xff0c;共同对抗互联网新贵Facebook。  谷歌将于周四推出一个通用标准集 ( OpenSocial )&#xff0c;允许软件开发者为谷歌旗下社交网站Orkut&#xff0c;以及LinkedIn、hi5、Friendster、Plaxo和Ning等其它社交网站开…