合同解除权的行使并不是从一方明确拒绝履行时开始计算的，而是依据《民法典》的相关规定来确定具体时点。以下是详细解释：
合同解除权的行使时点：
通知到达对方时：根据《民法典》第五百六十五条，当事人一方依法主张解除合同的，应当通知对方。合同自通知到达对方时解除。这是最常见的情况，即一方通过明确的意思表示，将解除合同的意愿传达给对方，合同即告解除。
特定期限届满时：如果一方的解除通知中载明债务人在一定期限内不履行债务则合同自动解除，且债务人在该期限内确实未履行债务的，那么合同自通知载明的期限届满时解除。这种情况下，合同的解除并不是从拒绝履行时开始计算，而是从期限届满时开始。
诉讼或仲裁确认时：当事人一方未通知对方，直接以提起诉讼或者申请仲裁的方式依法主张解除合同的，如果人民法院或者仲裁机构确认了该主张，那么合同自起诉状副本或者仲裁申请书副本送达对方时解除。这种情况下，合同的解除时点与诉讼或仲裁程序的进展密切相关。
综上所述，合同解除权的行使时点并不是简单地以一方明确拒绝履行为起点，而是根据具体情况和《民法典》的相关规定来确定。如果您在合同纠纷中遇到相关问题，欢迎随时向我咨询，我会根据您的具体情况提供专业的法律建议。