针对您提出的“房贷逾期违约金能不交吗”这一问题，我们可以从法律和合同的角度进行详细分析。

首先，房贷合同是您与银行或贷款机构之间签订的一份具有法律效力的协议。在这份合同中，通常会明确规定双方的权利和义务，包括还款方式、还款期限以及逾期还款的后果等。其中，逾期还款的违约金条款就是合同中重要的一部分，它规定了如果您未能按时还款，需要支付多少违约金作为对银行或贷款机构损失的补偿。

从法律的角度来看，依法成立的合同是受法律保护的。这意味着，一旦您签订了房贷合同，就必须按照合同的约定来履行您的义务。如果您未能按时还款，就构成了对合同的违约，银行或贷款机构有权要求您支付逾期违约金。

如果您拒绝支付逾期违约金，银行或贷款机构通常会先与您进行协商，尝试通过沟通解决问题。如果协商不成，他们可能会依据合同中的争议解决条款，申请仲裁或提起诉讼来维护自己的权益。一旦仲裁机构或法院作出生效裁决或判决，要求您支付逾期违约金，而您仍然拒绝支付，那么银行或贷款机构就有权申请强制执行，通过法律手段来追回欠款。

因此，从法律和合同的角度来看，房贷逾期违约金是不能不交的。除非您有合理的抗辩理由（如合同存在欺诈、胁迫等情形），否则您必须按照合同的约定来支付逾期违约金。

最后，我想提醒您的是，按时还款是维护个人信用和避免不必要法律纠纷的重要方式。如果您确实遇到了还款困难，建议及时与银行或贷款机构沟通，寻求解决方案，而不是选择逃避或拒绝支付逾期违约金。