在赌场上借的钱属于非法债务，不受法律保护，但对方上门胡闹的行为是违法的，你可以采取以下措施来应对：

1. 明确债务性质，拒绝非法要求：

   • 首先，你需要明确的是，在赌场上借的钱属于非法债务。根据我国法律规定，赌博是违法行为，因此因赌博产生的债务也是非法的，不受法律保护。这意味着，你无需承担偿还这笔债务的法律责任。
   • 当对方上门胡闹时，你可以明确告知对方，这笔债务是非法债务，你拒绝偿还，并要求对方立即停止骚扰行为。

2. 保护自身安全，及时报警：

   • 如果对方的行为已经构成了威胁或骚扰，甚至出现了暴力行为，你应立即保护自己的安全，并拨打当地的紧急报警电话（如110）向警方报告。
   • 警方会依法介入调查，并根据情况对对方采取相应的法律措施，如警告、罚款、拘留等。

3. 收集证据，准备应对可能的法律纠纷：

   • 在对方上门胡闹的过程中，如果可能的话，尽量收集相关证据，如录音、录像、照片等，以证明对方的行为已经构成了骚扰或威胁。
   • 这些证据在后续可能的法律纠纷中可能会起到关键作用，帮助你维护自己的合法权益。

4. 了解法律后果，避免自身违法：

   • 你需要了解的是，虽然对方的行为是违法的，但你在应对过程中也应保持冷静和理智，避免采取过激行为或违法手段来对抗对方。
   • 如果你因情绪激动而采取了违法手段，如殴打对方或损坏对方财物等，那么你也可能会面临法律责任。

5. 寻求法律帮助，维护自身权益：

   • 如果你觉得自己无法单独应对这种情况，或者对方的行为已经严重影响了你的正常生活和工作，你可以考虑寻求法律帮助。
   • 作为专业律师，我可以为你提供法律咨询和代理服务，帮助你制定应对策略，维护你的合法权益。

额外建议：

• 在日常生活中，应远离赌博等违法行为，避免陷入类似的非法债务纠纷中。
• 如果遇到类似情况，不要惊慌失措，保持冷静和理智，及时采取措施保护自己的安全和权益。

总之，虽然赌场上的债务不受法律保护，但对方上门胡闹的行为是违法的。你可以通过明确债务性质、保护自身安全、收集证据、了解法律后果和寻求法律帮助等措施来应对这种情况。如果你有任何疑问或需要进一步的法律帮助，请随时向我咨询。