互联网在人们交流和获取信息中扮演着越来越重要的角色,微博在这种趋势下诞生并成为热门的互联网应用。相对于传统的互联网应用,微博需要同时应对海量的用户请求和高实时性的数据处理,如何建设高效率和可水平扩展的Web应用架构成为此类应用的关键。Web2.0应用推动了非关系型数据库的发展,如何利用非关系型数据库也是Web应用架构领域的热门课题。本文基于消息队列和非关系型数据库实现了分布式、高实时和可扩展的微博系统。本系统主要采取的策略是:异步后台处理、缓存更新优先和采用非关系型数据库。异步后台处理就是通过消息队列将HTTP请求中的写请求分为多个阶段,并实现任务的分布式处理。缓存更新优先策略保证了读请求的缓存命中率,加速了读请求的响应速度。微博应用的数据结构简单,采取非关系型数据库能更容易实现高性能和分布式。本文首先分析了目前互联网技术的相关技术,重点是非关系型数据库和基于消息队列实现分布式异步计算。然后提出了微博系统的整体架构。接着基于面向文档的数据库MongoDB设计了微博系统的数据模式,并实现了分布式的数据持久化服务。根据微博的特点,选择内存数据库Redis实现了分布式的高性能缓存服务。接着基于一致性哈希算法实现了消息队列服务的分布式应用,避免了消息队列服务节点变化后大量消息乱序的问题;并利用消息队列实现了分布式的任务分发处理功能,能够负载均衡地分配任务,也能对特定的消息队列灵活增加任务处理后台服务器。最后利用SpringMVC 3.0框架实现了REST风格的微博系统。