男人的性功能衰退并非有一个固定的时间点，它是随着年龄增长和个人健康状况的变化而逐渐发生的。一般来说：

1. 青少年和年轻人：性功能通常处于旺盛状态。
2. 壮年期：性功能最稳定，持续时间较长，但可能会出现性生活频率和强度的自然下降。
3. 中年期：男性的雄激素水平可能会逐渐下降，可能出现勃起功能减退、性欲减退等问题。
4. 老年期：随着年龄的增长，性功能会进一步衰退，这与多种因素有关，如心血管健康、荷尔蒙变化、神经系统退化等。一些老年人可能会经历完全丧失性能力（阳痿）。

然而，这些变化并不适用于所有男性，个体之间的差异很大。保持健康的生活方式，如定期锻炼、均衡饮食、避免烟酒、应对压力和保持心理健康，都有助于减缓性功能衰退的速度。如果有任何性功能方面的问题，应及时咨询医生。