随着社会对高等技术应用性人才需求的不断扩大,我国高等职业教育得到了很好的发展。全国高等学校英语应用能力考试(简称PRETCO)是教育部批准实施的面向高职高专层次的全国性教学考试.自从该考试2000年正式实施,发展至今,正逐渐被社会认可。该考试以教学要求和考试大纲为依据,分为A级和B级两种,B级的要求略低于A级。一般而言,非英语专业的高等职业院校学生的英语水平不是很高,因此大多数高职院校采用B级考试来测试学生的英语水平。英语测试,作为英语教学的重要组成部分,直接体现了教学的成果。因此,评估高等学校英语应用能力考试的效度意义重大。由于篇幅所限,本课题将重点研究2008年至2013年的PRETCO-B的听力部分试题,旨在来研究PRECO-B是否具有:表面效度、内容效度和使用者反映效度。论文采用了文本分析,问卷调查的方法,通过定性和定量分析,以巴克曼提出的语言测试理论为依据对2008年12月至2013年6月的高等学校英语应用能力考试B级听力理解试题展开分析。本论文主要如下:首先采用问卷调查的方式分析试题的表面效度。江西建设职业技术学校和江西经济管理职业技术学校的151名参加过高等学校英语应用能力考试的大二学生和20名对该考试有经验的英语教师参加了问卷调查。其中93%的老师和83%的学生认同PRETCO-B的听力试题具有较高的表面效度。接下来,参照《高职高专教育英语课程教学基本要求》(2000)和《高等学校英语应用能力考试大纲》中关于听力理解的具体要求,从1)内容相关性、2)内容覆盖性、3)内容恰当性,来具体分析高等学校英语应用能力考试B级听力理解的内容效度。再次,通过学生问卷第二部分来分析使用者反映效度,得知被调查学生中80%的人认为考试试题对于他们提高听力以及用英语交流的能力有积极影响。这说明试题具有好的使用者反映效度。最后,分析研究过程中发现的问题,做出结论。笔者对未来高等学校英语应用能力考试听力理解部分的完善提出了建议。本论文的启示有:1)试卷设计者应扩大PRETCO-B考试听力理解类型的多样性并且应用更多真实和自然的日常生活和涉外事宜的听力材料;2)不同主题和题材的听力材料应该在平时训练中提供给学生们。由衷的希望这篇论文给出的结论和建议能对改进高等学校英语应用能力考试有所帮助,进而推进我国高职英语教学的发展。