2013 年文章归档
共 46 篇文章
java服务,cpu高,内存高,telnet不通排查及分析
记录上周五的一个java服务的异常排查及分析过程,以备将来参考。 java服务的异常主要表现为3点: 1.cpu使用率高; 2.内存占用较大; 3.本机telnet访问服务被拒绝 具体情况: 1.cpu高。启动时会打到800%以上,访问量不大的时段,top看到使用率在100-400%之间,基本稳定在100%-200%左右。 2.内存高。启动后java服务占用的内存不断增大,服务器12G物理内存,增大到12*26%=3G左右时,不再增大,但服务器物理内存也已接近用尽。 3.telnet服务端口没响应。应用刚启动时,telnet 可通,但过10-20分钟左右,服务开始不响应本机测试的telnet…
2013-12-22 12:29 · 故障处理及调优
应用二级缓存设计
最近ssss系统对redis的访问压力较大,为了减轻对redis服务器的访问压力,需要对功能进行优化,下面参考了同事的优化思路,并对思路进行了改进。
2013-09-09 13:01 · 系统架构设计
strategy(策略)模式
策略模式属于对象的行为模式。其用意是针对一组算法,将每一个算法封装到具有共同接口的独立的类中,从而使得它们可以相互替换。策略模式使得算法可以在不影响到客户端的情况下发生变化。 策略模式的结构 策略模式是对算法的包装,是把使用算法的责任和算法本身分割开来,委派给不同的对象管理。策略模式通常把一个系列的算法包装到一系列的策略类里面,作为一个抽象策略类的子类。用一句话来说,就是:“准备一组算法,并将每一个算法封装起来,使得它们可以互换”。下面就以一个示意性的实现讲解策略模式实例的结构。 这个模式涉及到三个角色: 1)环境(Context)角色:持有一个Strategy的引用。 2)抽象策略(Str…
2013-08-12 15:54 · design pattern
Adapter(适配器)模式
《设计模式》GOF : 将一个类的接口转换成客户希望的另外一个接口。Adapter模式使得原本由于接口不兼容而不能一起工作的那些类可以一起工作。 在GOF设计模式中,Adapter可以分为类模式和对象模式两种,类模式通过继承实现,对象模式通过委托实现。 类模式示意图: 对象模式示意图:
2013-08-12 13:34 · design pattern
观察者模式(发布-订阅)
由于网站带有弱sns功能,因此需要设计关注和被关注的消息或是动作通知,那么将这个需求抽象出来的时候就会发现正好符合java中发布订阅模式。 一、概述 Java 的设计模式很多,观察者模式被称为是模式中的皇后,而且Java jdk也对它做了实现,可见该设计模式的重要位置。在图形化设计的软件中,为了实现视图和事件处理的分离,大多都采用了Observer模式,比如 Java的Swing,Flex的ActionScript等。在现实的应用系统中也有好多应用,比如像当当网、京东商城一类的电子商务网站,如果你对某 件商品比较关注,可以放到收藏架,那么当该商品降价时,系统给您发送站内消息、手机短信、邮件。…
2013-08-08 11:27 · design pattern
深入分析 Java I/O 的工作机制
Java I/O 类库的基本架构 I/O 问题是任何编程语言都无法回避的问题,可以说 I/O 问题是整个人机交互的核心问题,因为 I/O 是机器获取和交换信息的主要渠道。在当今这个数据大爆炸时代,I/O 问题尤其突出,很容易成为一个性能瓶颈。正因如此,所以 Java 在 I/O 上也一直在做持续的优化,如从 1.4 开始引入了 NIO,提升了 I/O 的性能。关于 NIO 我们将在后面详细介绍。 Java 的 I/O 操作类在包 java.io 下,大概有将近 80 个类,但是这些类大概可以分成四组,分别是: 基于字节操作的 I/O 接口:InputStream 和 OutputStream…
2013-08-04 15:15 · corejava
装饰器(Decorator)模式
今天被问起装饰器模式,已没有什么印象,回来了查查资料,发现java io这块是对装饰器模式的典型应用,画张类图备忘。后面再对java nio进行统一地梳理和深入。 BufferedInputStream,顾名思义就是对InputStream添加缓冲的装饰,通过在构造函数中传入InputStream对象获得需要装饰的流,其他具体装饰子类的设计思路与此相同。OutputStream与此类似,参考如下类图:
2013-08-03 01:31 · design pattern
QPS、PV和需要部署机器数量计算公式
QPS = req/sec = 请求数/秒 【QPS计算PV和机器的方式】 QPS统计方式 [一般使用 http_load 进行统计] QPS = 总请求数 / ( 进程总数 * 请求时间 ) QPS: 单个进程每秒请求服务器的成功次数 单台服务器每天PV计算 公式1:每天总PV = QPS * 3600 * 6 公式2:每天总PV = QPS * 3600 * 8 服务器计算 服务器数量 = ceil( 每天总PV / 单台服务器每天总PV ) 【峰值QPS和机器计算公式】 原理:每天80%的访问集中在20%的时间里,这20%时间叫做峰值时间 公式:( 总PV数 * 80% ) / ( 每…
2013-07-31 16:39 · 故障处理及调优
RPC之java应用
什么是RPC?Remote Procedure Call,远程过程调用。也就是说,调用过程代码并不是在调用者本地运行,而是要实现调用者与被调用者二地之间的连接与通信。比较严格的定义是: Remote procedure call (RPC) is a protocol that allows a computer program running on one computer to cause a subroutine on another computer to be executed without the programmer explicitly coding the details…
2013-07-31 10:09 · java分布式
rmi工厂模式实例
rmi编写java分布式系统时,采用工厂模式的使用示例,参考孙卫琴的《java网络编程精解》,比较简单,仅供日后备忘。 类图: 远程接口 import java.rmi.Remote; import java.rmi.RemoteException; public interface IFlight extends Remote{ public String getFlightNumber() throws RemoteException; public String getOrigin() throws RemoteException; public void setOrigin(Stri…
2013-07-29 15:50 · java分布式
socket、RMI、WebService 比较
RMI vs Socket 一般来说,基于CS(client-server)软件架构的开发技术有很多种。比较常用的有:基于socket的网络编程、RPC、基于 Java技术的 RMI(当然C#也有类似技术)、CORBA等。在这里我们只是对基于socket的网络编程与RMI作个对比,有助于我们了解它们各自的应用领域,帮助 我们在面对一个具体问题的时候选用适合的技术。另外,本文所做的讨论可以认为是脱离了语言层面的东西,只是对技术的本身做一个讨论,无关乎你是用C++、 C#或Java 在开发。 一、 RMI技术简介 本文就以Java为例,简单介绍一下RMI技术。 从Java1.1开始,远程方法调用…
2013-07-26 21:30 · 系统架构设计
几种主要通信协议的性能比较
总体性能比较: Socket(BIO/NIO)>RMI>HTTPInvoker>=Hessian>REST>>Burlap>EJB>>Web Service 如果协议设计的比较好,Socket性能毫无疑问是最高,同时灵活性和复杂度也最高,如果采用高效的网络框架如:Mina、Netty等可以降低开 发复杂度,一般在对性能有非常苛刻的条件下使用。 RMI的性能相对略低,但是与Socket还在同1个数量级,同时只能在Java系统间通信,如果是基于互联网使用, 还存在穿越防火墙的问题 。 采用 Spring封装的方式使用比原始RMI方式性能略高,主要原因是:Spring采用了代理和缓存机制,节省了对…
2013-07-26 21:24 · 系统架构设计
Linux: 10 个 Netstat 命令实例
Netstat 命令用于显示各种网络相关信息,如网络连接,路由表,接口状态 (Interface Statistics),masquerade 连接,多播成员 (Multicast Memberships) 等等。本文提供 10 个非常实用的 Netstat 命令实例。 1. 列出所有端口 (包括监听和未监听的) 列出所有端口 netstat -a netstat -a | more [root@diancai1 ~]# netstat -a | more Active Internet connections (servers and established) Proto Recv-Q S…
2013-07-23 19:34 · OS
mysql函数实例-统计月登陆用户数
统计月使用用户数,仅作备忘。 CREATE FUNCTION statics_user_login_month() RETURNS int(11) COMMENT '月使用用户数\r\n' BEGIN #Routine body goes here... DECLARE stopFlag INT DEFAULT 0 ; DECLARE _shop_id INT(11) DEFAULT 0; DECLARE _device VARCHAR(50); DECLARE _a_token CHAR(64) DEFAULT '-1'; DECLARE _s_token VARCHAR(64) DEFA…
2013-07-14 21:31 · mysql
mysql函数实例-统计1周内未登陆的用户
流失用户统计(1周内未登陆的用户)。 CREATE FUNCTION `statics_user_unlogin_week`() RETURNS int(11) COMMENT '流失用户统计(一周内未登录的用户)' BEGIN #Routine body goes here... DECLARE stopFlag INT DEFAULT 0 ; DECLARE _shop_id INT(11) DEFAULT 0; #餐厅id DECLARE _device VARCHAR(50); #手机设备号 DECLARE _a_token CHAR(64) DEFAULT '-1'; #与苹果服务…
2013-07-14 21:13 · mysql
mysql函数实例-统计日新增用户
新增用户统计,仅用作备忘。 CREATE FUNCTION `statics_user_new`() RETURNS int(11) COMMENT '统计新增用户' BEGIN #Routine body goes here... DECLARE stopFlag INT DEFAULT 0 ; DECLARE _shop_id VARCHAR(11) DEFAULT NULL; #餐厅id DECLARE _device VARCHAR(50) DEFAULT NULL; #手机设备号 DECLARE _a_token CHAR(64) DEFAULT NULL; #与苹果服务器会话 D…
2013-07-14 21:02 · mysql
mysql函数实例-统计日存留率
根据项目报表需求,需要统计通过手机app登录系统的用户的日存留率。统计功能比较简单,仅作日后参考,欢迎经验丰富的朋友指点。 1.数据库表 手机用户的信息保存在一张visitor_user的表中,其中包含了用户使用手机app软件时,可以获取的数据,包括: 商家id、手机设备号、下线时间等信息。 2.功能分析与设计 数据统计报表一般都采用DB的存储过程或函数进行统计,并将数据保存到数据库表中,提供前台应用查询和展示。对于实时性的报表需求,建议在非业务库上进行统计。一般主库对外提供业务服务,通过复制等机制将业务数据存储到专门的数据库,或者专门的物理节点上,这样就有效的避免了报表统计功能对正常业务的…
2013-07-13 14:57 · mysql
java自带监视工具使用_jmap_jhat
jmap命令(Java Memory Map) 1.介绍 打印出某个java进程(使用pid)内存内的,所有‘对象’的情况(如:产生那些对象,及其数量)。 可以输出所有内存中对象的工具,甚至可以将VM 中的heap,以二进制输出成文本。使用方法 jmap -histo pid。如果连用SHELL jmap -histo pid>a.log可以将其保存到文本中去,在一段时间后,使用文本对比工具,可以对比出GC回收了哪些对象。jmap -dump:format=b,file=outfile 3024可以将3024进程的内存heap输出出来到outfile文件里,再配合MAT(内存分析工具(Mem…
2013-07-06 17:50 · 故障处理及调优
java自带监视工具使用_jps_jstack
jps命令(Java Virtual Machine Process Status Tool) 1.介绍 用来查看基于HotSpot JVM里面所有进程的具体状态, 包括进程ID,进程启动的路径等等。与unix上的ps类似,用来显示本地有权限的java进程,可以查看本地运行着几个java程序,并显示他们的进程号。使用jps时,不需要传递进程号做为参数。 Jps也可以显示远程系统上的JAVA进程,这需要远程服务上开启了jstat服务,以及RMI注及服务,不过常用都是对本对的JAVA进程的查看。 2.命令格式 jps [ options ] [ hostid ] 3.常用参数说明 -m 输出传递…
2013-07-06 17:32 · 故障处理及调优
处理OutOfMemoryError: PermGen space
前两天后台系统内存溢出错误,查看tomcat日志,看到如下信息: Exception in thread "ContainerBackgroundProcessor[StandardEngine[Catalina]]" java.lang.OutOfMemoryError: PermGen space 分析及判断: 1.日志提示比较明确, PermGen内存溢出。 2.采用适当加大 PermGen的容量,跟踪是否继续出现该问题。 3.由于之前没有配置生成Heap Dump的参数,现在增加该jvm参数,便于出现类似问题时进行具体分析。 jdk1.6 jvm参数配置: JAVA_OPTS='-X…
2013-07-06 12:15 · 故障处理及调优