[转贴] 著名社交网站LinkedIn的Java架构技术

news/2024/5/13 23:08:16/文章来源:https://blog.csdn.net/zhujiaxing666666/article/details/13991707

在JavaOne 2008的会议上,著名社交网站LinkedIn的开发者做了2个关于LinkedIn网站的架构技术的演讲,目前这两个演讲的PPT已经可以下载了。下载地址如下:

  • LinkedIn - A Professional Social Network Built with Java™ Technologies and Agile Practices
  • LinkedIn Communication Architecture

需要注册才可以下载,能下载PDF版本。

LinkIn开发者透露LinkedIn 99%都是用java写的,除了缓存通过C++实现。

下面是详细架构图:  

可以看一下LinkedIn网站的基本情况:     1、2千2百万用户     2、每个月4百万独立用户访问     3、每天4千万page view     4、每天2百万搜索流量     5、每天25万邀请发送     6、每天1百万的回答提交     7、每天2百万的email消息发送

这是一个世界顶尖级别流量的网站了,看看LinkedIn的系统架构:     * 操作系统:Solaris (running on Sun x86 platform and Sparc)     * 应用服务器:Tomcat and Jetty as application servers     * 数据库:Oracle and MySQL as DBs     * 没有ORM,直接用JDBC No ORM (such as Hibernate); they use straight JDBC     * 用ActiveMQ在发送JMS. (It’s partitioned by type of messages. Backed by MySQL.)     * 用lucene做搜索Lucene as a foundation for search     * Spring做逻辑架构Spring as glue

下面是随着流量增加,LinkedIn的架构演化:

2003-2005     1、一个整体的web程序,     2、一个核心数据库,     3、在Cloud中缓存所有network图,Cloud是用来做缓存的独立server。     4、用lucene做搜索,也跑在Cloud中。

2006年     1、复制另外一个数据库,减少直接load核心数据库,另外一个server来管理非只读数据库的数据更新     2、把搜索从Cloud中移出来,单独一个server跑搜索     3、增加Databus数据总线来更新数据,这是通过分布式更新的核心组件,任何组件都需要Databus

2008年     1、WebApp不再任何事情都它自己做,把业务逻辑分成很多部分,通过server群来做。WebApp仍然提供用户界面给用户,但是,通过server群来管理用户资料,小组等等。     2、每个服务有自己的域数据库     3、新的架构允许其他应用链接LinkedIn,比如增加的招聘和广告业务。

The Cloud     1、Cloud是整个架构最重要的部分,整个LinkedIn的网络图都缓存在Cloud里面     2、Cloud大小:22M nodes, 120M edges     3、需要12GB RAM     4、在生产环境要跑40个实例     5、从硬盘重建Cloud一个实例需要8个小时     6、Cloud通过databus实时更新     7、关闭时持久化到硬盘     8、缓存通过C++实现,用JNI调用,LinkedIn选择C++而不是Java有两个原因:        1)尽可能的减少RAM的使用        2)垃圾收集暂停会杀死整个系统,LinkedIn用了最新的GC程序,也就是就是说java的的垃圾搜集性能不太好     9、将所有东西放在缓存里面是一种限制,但是LinkedIn指出,分割业务图将更麻烦     10、Sun提供了2TB的RAM

Communication Architecture交流架构包括:

Communication Service Communication Service是用来提供永久信息的,比如收件箱里面的消息和email     1、整个系统通过JMS异步通讯     2、客户端用JMS发送消息     3、消息通过路径服务器来到达相应的邮箱或者直接放到email进程中     4、消息发送:同时使用Pull主动寻求信息(如用户需要信息)和Push发送信息(如发email)     5、使用Spring和LinkedIn专业Spring插件完成,使用HTTP-RPC

Scaling Techniques     1、通过功能来划分:发送,接受,文档等。     2、通过类别来划分:用户信箱,访问者信箱等     3、等级划分:用户ID等级,Email等级等     4、所有的操作都是异步的。

 

转自 http://www.wokaoo.com/2008/06/%E8%91%97%E5%90%8D%E7%A4%BE%E4%BA%A4%E7%BD%91%E7%AB%99lin

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.luyixian.cn/news_show_871126.aspx

如若内容造成侵权/违法违规/事实不符,请联系dt猫网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

XAMPP修改Apache默认网站目录htdocs

方法/步骤 打开文件xampp\apache\conf\httpd.conf 在httpd.conf文件中找到DocumentRoot "I:/xampp/htdocs" 步骤阅读 3 修改httpd.conf文件中的内容为DocumentRoot "D:/www" 4 在D盘新建一个www文件夹,重启apache,将文件移到w…

JSP+SQL企业门户网站

<% page language"java" contentType"text/html; charsetUTF-8" pageEncoding"UTF-8"%> 代码已经上传github&#xff0c;下载地址&#xff1a; https://github.com/21503882/companydoor <!DOCTYPE html PUBLIC "-//W3C//DTD…

java+mysql+servlet论坛网站BBS

管理员子系统功能划分 管理员子系统完成本论坛各种信息的管理与维护的功能&#xff0c;管理员子系统包括的主要功能模块有权限管理、发帖、回帖、修改个人用户信息、发帖状态设置。管理员子系统功能模块图如图4-1。 代码已经上传github&#xff0c;下载地址&#xff1a;https:/…

基于Spring+SpringMvc+Hibernate的JSP+MYSQL保健品销售网站

基于SpringSpringMvcHibernate的JSPMYSQL保健品销售网站 1.包含源程序&#xff0c;数据库脚本。代码和数据库脚本都有详细注释。 2.课题设计仅供参考学习使用&#xff0c;可以在此基础上进行扩展完善 代码已经上传github&#xff0c;下载地址 https://github.com/21503882/sa…

基于java的志愿者交流网站

技术&#xff1a;Java、JSP等 摘要&#xff1a; 随着社会的发展&#xff0c;人民自身素质水平的提高&#xff0c;志愿活动越来越成为大家实现自身价值&#xff0c;投身社会建设的一项主流活动。一项有意义的志愿活动不仅有利于人文社会的建设&#xff0c;还能使志愿者的综合素质…

基于Java的婴幼儿产品销售网站

技术&#xff1a;Java、JSP等 摘要&#xff1a; 婴幼儿产品销售是指各婴幼儿产品生产企业通过电子商务网站的形式&#xff0c;利用网络进行的多种形式销售。是将传统的线下商品销售业务通过与互联网的结合&#xff0c;形成线上线下双渠道的销售模式&#xff0c;即商家利用现有的…

java通过Cookie实现网站自动登录

第一步&#xff0c;登陆的时候如果选择了[自动登录]的选项&#xff0c;则需要在登陆成功后&#xff0c;附加下面的代码 应为一般网站都提供保存用户名的功能&#xff0c;所以我把这个写到了外面。只有密码是单独处理的。 其中的host就是你的域名 login.jsp Java代码 String …

如何搭建个人网站

首先&#xff0c;申明下本文所指的新人是指会上网站看网页&#xff0c;会自己聊QQ&#xff0c;会在新浪、网易等平台上写博客的人。当然你要说这个只要会上网的人都会了&#xff0c;是的&#xff0c;我所指的新人就是会上网的人。所以本文的技术含量不会很高&#xff0c;高手可…

网站大访问量如何应对(1)

作为一个合格的架构师&#xff0c;需要熟悉网络架构&#xff0c;服务器架构&#xff0c;其次才是应用程序开发。 1负载均衡&#xff0c;让一堆机器来对外提供服务 常见的负载均衡方案有很多&#xff0c;比如DNS域名解析&#xff0c;nginx反向代理&#xff0c;根据ISO七层网络模…

怎么反爬虫爬取网站信息

我们在爬取网站的时候&#xff0c;都会遵守 robots 协议&#xff0c;在爬取数据的过程中&#xff0c;尽量不对服务器造成压力。但并不是所有人都这样&#xff0c;网络上仍然会有大量的恶意爬虫。对于网络维护者来说&#xff0c;爬虫的肆意横行不仅给服务器造成极大的压力&#…

iis网站替换ssl证书注意事项

1.在iis中添加证书&#xff1b; 2.中级证书需要注册&#xff0c;添加详细信息&#xff1b; 3.更新网站证书&#xff1b; 4.防火墙的wap上需要更新证书&#xff0c;一定要注意&#xff1b;

22个免费的UI界面设计工具、资源及网站

1.原型界面制作工具Lumzy 官方地址&#xff1a;http://www.lumzy.com/ Lumzy是一个网站应用和原型界面制作工具。使用Lumzy&#xff0c;您可以轻松创建UI模型并即时发送到客户电脑中。 Lumzy还具有团队协作编辑工具。 2.在线工具Mockingbird 官方地址&#xff1a;https://go…

使用百度 google 搜索特定网站下的 文件类型

有不少朋友在上网的时候可能会遇到这样的困惑&#xff1a;如何搜索某一类的文件&#xff0c;而不是网页内容&#xff1f;如&#xff0c;我想搜索ppt文件&#xff0c;我想搜索某一个网站的ppt文件&#xff0c;该如何搜索呢&#xff1f; filetype可以帮到我们完成这一搜索问题。…

[R语言] 快速搭建网站——使用shiny实现聚类算法可视化

前言 建模的过程一向是枯燥乏味的&#xff0c;今天就让我们用R语言中丰富的可视化工具&#xff0c;自己搭建一个网站&#xff0c;实现聚类算法的可视化。源码已上传至我的资源空间&#xff0c;感兴趣的朋友可以在这里查看&#xff0c;一起学习、一起提高。网站效果如下&#x…

[R语言] 快速搭建网站——使用shiny实现时间序列预测过程可视化

前言 之前我们发布了一篇 “[R语言] 快速搭建网站——使用shiny实现聚类算法可视化” 的文章 参考这里&#xff0c;本文沿着同样的思路&#xff0c;去繁存简&#xff0c;更加简单实用的展示了时间序列预测的一般过程&#xff0c;算是用R语言实现数据分析可视化的另一个实例吧。…

推荐几个无版权的免费图片网站

文/方子龙 平常在写作和写博客时&#xff0c;需要找配图的时候&#xff0c;没找到免费无版权的图片&#xff0c;而且又不高清。我自己花时间收集整理一些免费无版权的图片网站&#xff0c;分享。 1. pixabay 惊人的免费图片—发现我们慷慨的社区分享的 0.1 百万张图片和视频。…

纯css 网站导航

这两天重新把前端的只是梳理了下&#xff0c;按照简约的设计理念做了几套样例&#xff0c;记录下&#xff0c;方便自己方便他人。先上结果图&#xff0c;一个很简单的网站导航&#xff0c;没有图片&#xff0c;没有JS 为了方便查看&#xff0c;css样式没有分开&#xff0c;下面…

网站开发技巧参考大全

事件源对象 event.srcElement.tagName event.srcElement.type 捕获释放 event.srcElement.setCapture(); event.srcElement.releaseCapture(); 事件按键 event.keyCode event.shiftKey event.altKey event.ctrlKey 事件返回值 event.returnValue 鼠标位置 event.x …

java在线电影网站

Java在线电影网站 项目简介 这次分享一个电影网站&#xff0c;基于JspServletC3p0mysql&#xff0c;难度适中。网站内视频均是跳转到相应的平台播放&#xff08;如腾讯视频、爱奇艺、优酷等&#xff09;&#xff0c;后台管理员可观察在线人数&#xff0c;并添加新的视频&…

导致SEO策略失败的12个原因及改进方法

这里有一个新闻快报给你:你的SEO策略失败不是因为搜索引擎为难你&#xff0c;或者因为你遭受了一些神秘的惩罚。 虽然很容易把你的网站在有机搜索引擎优化中的失败解释为你无法控制的因素造成的&#xff0c;但现实是有很多更平凡的原因导致SEO活动失败。 看看下面的列表&…