随着网络和数字技术的发展,快速增长的计算量和数据量对计算机的能力提出了更高的要求,而随着处理器高频和多核时代的到来,高性能计算机的频率提高日渐困难,内存瓶颈问题更加严重。同时,处理器、存储器等部件之间的紧密耦合,使得资源无法共享,限制了系统性能,提高了系统成本。网格化动态自组织计算机体系结构(Dynamic Self-organized computer Architecture based on Grid-component,DSAG)将计算机部件拆分为网格化的功能部件,打破了部件间的紧密耦合,并根据应用的需求进行动态聚合与重组,实现体系结构按需定制,并通过共享降低成本。随着光互连和可重构计算等技术的发展,实现可共享的网格化内存部件成为可能。从应用特征看,数据密集型和网络密集型应用在快速增长,数据传输的开销已经超出计算的开销。从技术方面,逻辑所占用的芯片面积相比存储越来越小,功能裁剪和部署也比存储容易。从以上两方面看,“小计算、大存储”和“数据驱动”的特征越来越明显。那么以CPU为中心的系统设计就有可能转变为以内存为中心的设计。本文基于DSAG思想、结合应用特征和技术趋势提出了以网格化内存服务为中心的系统结构(Grid Memory Service,GMS),并设计和实现了网格化内存服务器Memory Box(MBox)。具体如下:(1)提出了一种以网格化内存服务为中心的系统结构(GMS)模型。网格化内存服务是指将内存部件赋予网格化的特性,其特点是供需双方相互独立、动态请求和响应、具有一定的服务质量保证、具有统一的接口和访问模式。网格化服务模式可以解决由于处理器和内存紧密耦合带来的性能和成本问题;以网格化内存为中心的系统结构可以减小内存数据传输量,分散内存总线的压力,从而减小解决内存瓶颈的影响。针对GMS模型的特点,提出并分析了需要重点解决的关键技术问题,包括访问接口与编程模型、可扩展的架构和互连协议、智能内存和延迟隐藏等。GMS的核心部件是内存聚合体Memory Box,可以看作一种高速、大容量、智能化的多端口存储器。以Memory Box为载体,对GMS的关键技术进行研究。(2)介绍了Memory Box的访问接口和编程模型。首先对应用模式和服务模式进行了分析,为了实现统一的访问接口和服务语义,定义了网格化内存访问协议GMAP(Grid Memory Access Protocol);编程库实现了GMAP协议,供客户端程序调用。为了适应不同的应用模式,访问接口单元通过协议转换桥实现客户端网络协议和MBox内部互连协议间的转换,兼容不同类型的客户端协议。设计和实现了一个基于光互连的可重构验证系统“小雨点1号”,用以验证以内存总线为接口实现远程内存访问的可行性。“小雨点”系统实现了DDR RAM协议和自定义的互连协议间的转换,在内存接口为DDR200时,硬件带宽达到10Gbps,接近内存带宽;用户级通信带宽达到285MB/s,也接近了用benchmark测试到的内存带宽。通过测试指出有必要实现MBox内内存到内存的直接内存存取(M2M-DMA)。(3)基于光互连和串行通信技术提出了高扩展性的无背板堆叠式架构。为了实现高速、高扩展性的互连,设计和实现了一种轻量级、高带宽、低延迟、串行包交换的网格化内存互连协议GMIP(Grid Memory Interconnect Protocol)。对电互连总线和光互连总线的延迟构成做了对比分析,根据分析结果从互连协议的设计优化和互连效能两方面对消除延迟影响的方法进行了研究。针对甚短距离光互连的特点,对链路层和物理层进行了进一步优化或提出了优化原则,以简化协议模块结构、减小电路面积和功耗,进一步提高性能。链路层延迟可以降低到10个时钟周期。针对光互连的高带宽特性和光互连总线模型的特点,提出了以互连效能为评价方法,用带宽优势补偿额外延迟带来的影响,并给出了带宽和数据块大小的关系。(4)在GMS中,利用丰富廉价的嵌入式处理器和控制逻辑,可以实现分布式智能化内存。以典型应用为基础分析了以CPU为中心的系统瓶颈和以分布式智能内存为中心的处理流程,定性说明了它对分散内存总线压力、消除内存瓶颈的作用。利用智能化内存,可以实现复杂的存储管理机制和精确的系统控制,并可以利用跨层协同降低存储管理开销。分析了以智能内存为基础的主动延迟隐藏方法,提出了主动内存模型和实现方法。(5)实现了一个基于光互连的可重构的Memory Box原型验证系统,访存延迟可以达到微秒量级。利用验证平台进行测试,验证了MBox相对磁盘的性能优势,以及使用主动内存时对性能的提升效果。