А мне кажется, это просто разные контексты. И разные значения, соответственно. Когда раз-два-три-четыре, мы особо не стремимся узнать количество, скорее упорядочиваем. А если количество именно, то логичнее начать с "один".