当面对旅行社合同中的霸王条款，尤其是当这些条款导致旅行社拖着不肯退钱时，消费者确实需要采取一系列措施来维护自己的合法权益。以下是对此问题的详细解答：

一、识别并确认霸王条款的效力

首先，要明确哪些条款属于霸王条款。常见的如免除旅行社自身责任、加重旅游者责任、排除旅游者主要权利等。根据《中华人民共和国民法典》的相关规定，这些不合理地免除或减轻旅行社责任、加重旅游者责任、限制或排除旅游者主要权利的格式条款是无效的。因此，一旦发现合同中存在此类条款，消费者应立即确认其无效性。

二、与旅行社协商

在确认霸王条款无效后，消费者应首先尝试与旅行社进行协商。在协商过程中，可以明确指出这些条款的不合理性和违法性，并要求旅行社按照法律规定和实际情况退还费用并给予相应赔偿。协商时，务必保留好聊天记录、通话录音等证据，以备后续维权之需。

三、向相关部门投诉

如果协商无果，消费者可以向相关部门投诉。具体途径包括：

1. 向旅游行政管理部门投诉：

   • 可以通过拨打当地政务服务便民热线（原“12301”旅游咨询公益服务专用号码已整合至此）或登录文化和旅游部官方网站、相关旅游投诉平台进行在线投诉。
   • 也可以直接前往当地的旅游质量监督管理所进行现场投诉。

2. 向消费者协会投诉：

   • 拨打“12315”消费者投诉举报专线电话。
   • 登录中国消费者协会官网或相关消费维权平台进行在线投诉。

在投诉时，应提供详细的证据材料，如旅游合同、付款凭证、沟通记录等，以便相关部门能够准确了解情况并进行处理。

四、寻求法律途径解决

如果投诉仍无法解决问题，消费者可以考虑通过法律途径来维护自己的权益。具体做法包括：

1. 提起民事诉讼：

   • 向人民法院提起诉讼，要求确认合同条款无效或撤销合同，并要求旅行社承担相应的赔偿责任。在诉讼过程中，需要提供充分的证据以证明旅行社的违约行为和消费者的损失。

2. 申请仲裁：

   • 如果旅游合同中约定了仲裁条款，也可以向约定的仲裁机构申请仲裁。仲裁结果同样具有法律效力。

五、赔偿的确定方式

在维权过程中，赔偿金额的确定是一个关键问题。具体来说：

1. 合同有约定：

   • 若合同中对于旅行社违约后的赔偿责任有明确约定，且不违反法律法规的强制性规定，应按照合同约定进行赔偿。

2. 合同无约定或约定不明：

   • 在这种情况下，消费者可以要求旅行社赔偿因违约行为所造成的实际损失。实际损失包括直接损失（如已支付的酒店预订费用、交通票务费用等）和间接损失（需具有一定的确定性和可预见性）。
   • 同时，根据《中华人民共和国消费者权益保护法》的相关规定，旅行社还应承担相应的利息损失（通常按照同期银行活期存款利率计算）。

六、注意事项

在处理旅游合同中的霸王条款时，消费者还应注意以下几点：

• 保留证据：务必妥善保管好所有与旅游合同相关的证据材料，包括合同文本、付款凭证、沟通记录等。
• 了解法律法规：熟悉相关法律法规和消费者权益保护政策，以便更好地维护自己的合法权益。
• 及时行动：一旦发现霸王条款或旅行社的违约行为，应及时采取行动进行处理，避免错过最佳维权时机。

综上所述，面对旅行社合同中的霸王条款和拒不退钱行为，消费者应积极采取措施维护自身权益。通过确认条款效力、与旅行社协商、向相关部门投诉、寻求法律途径解决以及合理确定赔偿金额等步骤，消费者可以有效地维护自己的合法权益。