Tienes razón, solo lo usan una o dos personas.
Una persona (ひとり), dos personas (ふたり), り y にん en Japón.
Una persona (ひとり), dos personas (ふたり), tres personas (さんにん), cuatro personas (よにん) y cinco personas. Sin embargo, esta es la experiencia japonesa. Ocho personas (はちにん) Nueve personas (きゅぅにん) Diez personas (じゅぅにん) Once personas (ん)