Prepoznane glasove se primerja s seznamom pravil in omejitvami, ki podajajo verjetnost njihove pojavitve v primerjavi s predhodnim. Tako dobimo seznam besed, ki najbolj verjetno ponazarja izgovorjeno besedo ('n-best list'). Ena najbolj uporabljenih metod za prepoznavanje je HMM (Hidden Model).