ITeye博客

2014 年文章归档

共 2 篇文章

mq的用途

最近几个月,参与了一个大数量,高并发的项目,遇到过一个问题,由于并发较高,导致系统间的tcp调用超时严重,调用者和被调用者都不堪重负,后来添加了一个MQ,负责两者之间的消息传输,有效地解决了两者的窘境。调用者将消息发送到MQ,它容量巨大,调用者发送很顺畅,接收方也可根据自己的处理能力来决定接收速度,处理完1条消息,再接收下1条,遇到处理异常还可重发,真可谓一石二鸟...

2014-09-13 00:01

mysql大数据量下访问实践

最近参与了一些用户相关系统的开发,经历了数据库在大数据量下出现的一些问题,记录备忘,也请有经验的牛们指点指点。 目前数据量大概在40亿条左右,最近1周大概增长了50%左右,后面可能会小一些,每天预估在几百到几千W条左右。 功能: java服务接口接收请求,执行sql操作。 查询: 读操作共有5,6种,group by, max()比较多,查询数据时间范围在1年左右。但要求尽可能的实时,同时并发量较大,记得出现过一次1分钟内某个查询执行了260W次左右的情况。一般情况下1秒钟有1W条左右的sql在执行,除了1个write,1个update,其他都是查询。 阶段1: 开始时按照1主1从的结构部署…

2014-09-01 11:14 · mysql