Чтобы не было путаницы во времени, нужно меньше эту путаницу вносить. А когда путаница неизбежна - стараться подбить время действия вокруг всех игроков под примерно одинаковое положение стрелок на часах.
К тому же, кооперирование игроков только усложнится, если педантично вносить время действия в каждое сбщ.