结论前置：五十三岁的劳动者并不享有直接拒绝上夜班的法定权利，是否上夜班主要取决于企业的具体安排、劳动合同中的约定以及劳动者的健康状况等因素。
详细分析：
法律规定：
- 《劳动法》并未明确规定特定年龄（如50岁及以上）的劳动者不用上夜班。夜班工作的安排主要依据企业的生产经营需要、劳动合同中的相关约定，以及劳动者的个人能力和健康状况。
企业安排与劳动合同：
- 如果劳动合同中明确规定了夜班工作的相关内容，且该规定不违反法律法规的强制性规定，那么劳动者应当遵守劳动合同中的约定，按照企业的安排进行夜班工作。
- 如果劳动合同中未明确规定夜班工作，或者企业单方面变更劳动合同内容（如增加夜班工作），则需要与劳动者进行协商，并达成一致意见后才能实施。
健康因素：
- 劳动者的健康状况是决定是否适合上夜班的重要因素。如果劳动者因身体原因，经劳动能力鉴定或医疗机构诊断，确认不能适应夜班工作，那么企业应当根据相关法律法规，合理调整其工作岗位，以确保劳动者的身体健康和工作安全。
特殊保护：
- 对于特定群体（如女职工在孕期、哺乳期等），法律有明确的特殊保护规定，禁止或限制安排其从事夜班工作。但这并不适用于所有五十三岁的劳动者，而是针对特定情形下的特殊保护。
建议：
- 如果你认为自己的健康状况不适合上夜班，或者对企业的夜班工作安排有异议，建议首先与企业进行沟通，了解夜班工作的具体安排和原因，并表达自己的担忧和诉求。
- 如果沟通无果，或者你认为企业的安排违反了相关法律法规或劳动合同的约定，你可以考虑向当地劳动监察部门投诉，或者寻求专业律师的法律帮助，以维护自己的合法权益。
综上所述，五十三岁的劳动者并不享有直接拒绝上夜班的法定权利，但可以根据企业的具体安排、劳动合同中的约定以及自己的健康状况等因素来综合考虑是否适合上夜班。如果有任何疑问或争议，建议及时与企业沟通并寻求专业法律帮助。