如果一个语音识别系统只是在个人的计算机上供专人使用，这就是特定人语音识别系统，这种系统是指系统在使用之前，必须有用户输入大量的发音数据，对其进行训练。

非特定人语音识别系统则试图在系统建立成功之后，用户不需要输入大量的训练数据，即可以达到使用的目的。

语音信号的可变性很大，不同的人说话的时候，即使是使用同一个音节，如果对其进行仔细分析，就会发现存在相当大的差别。要让一个语音识别系统能够识别非特定人的语音，困难程度是很大的。