语音是人与人之间进行交流的最直接的方式。语音识别是一种重要的人机交互手段，其在很多行业中都得到了广泛的应用。近些年随着嵌入式技术的飞速发展，基于DSP的语音识别系统正逐步成为语音识别的一个重要发展方向。本文通过研究语音识别的技术和算法，提出了以DSP芯片为核心部件，以DTW为核心算法的特定人孤立词语音识别系统。系统的硬件部分以DSP芯片TMS320VC5402作为架构核心，其中包括音频采集模块、电源模块、看门狗电路、外部存储器模块、数据采集与传送模块以及CPLD逻辑控制模块。通过语音采集芯片TLV320AIC23B对语音信号进行采集和转换，并将转换后的信号送至DSP的存储器进行处理，得出识别结果。软件部分先用MATLAB软件对编写的算法进行仿真，再用C/C++语言和汇编语言进行混合编程，并将编程结果移植到CCS平台上进行调试。本文对端点检测算法和DTW算法进行了改进和优化。经试验证明，改进后的算法使系统在识别率损失不大的情况下有效地提升了识别速度，从而使系统的总体识别性能得到了提升。