随着计算机网络的不断发展以及数字化多媒体信息在网络上大量增长,人们需要对大量的多媒体信息进行有效的组织、管理,从而为迅速、准确、有效检索提供保障。本文主要围绕基于语义信息对多媒体数据进行检索展开,主要包括以下内容:针对多媒体信息检索现状,给出了多媒体多维的表述方法,利用该方法可以从多个不同的维度对多媒体信息(图像、视频、音频)进行分析和操作。基于多维分析方法将SVM作为Adaboost的弱分类器,将两种分类器AdaBoost与SVM相结合进行聚类。针对多媒体信息给出了多维的存储结构模型,基于该模型针对多维特征检索中权重设置问题,给出了基于多维特征权重自动设置算法,进一步提高了基于多维特征的图像检索效果。针对多媒体高层语义组织结构给出了矩阵分裂算法,进而建立一个多媒体高层语义框架,同时给出基于用户检索结果部分优先算法。据此建立针对视频关键帧的语义分支结构采用软向量的表示方法得到更优的关键帧聚类效果。最后,论文利用研究成果建立一个多媒体多维检索系统,为基于语义对多媒体信息进行检索提供参考平台。