结论前置：如果你交了房子的定金但之后决定不要房子了，对方确实有权追究你的违约责任，要求你承担一定的法律责任，具体责任形式可能包括但不限于定金不予退还、支付违约金等。

分析说明：

1. 定金性质：定金在房屋买卖中通常作为双方订立合同的担保，表明买方有诚意购买并愿意受合同约束。一旦买方违约，定金往往作为对卖方的补偿而不予退还。

2. 合同条款：如果你与卖方签订了购房合同，并且合同中明确规定了定金条款及违约责任，那么当你决定不购买时，卖方有权根据合同条款追究你的责任。这包括但不限于定金不予退还、要求你支付额外的违约金等。

3. 法律依据：根据《中华人民共和国民法典》的相关规定，当事人一方不履行合同义务或者履行合同义务不符合约定的，应当承担继续履行、采取补救措施或者赔偿损失等违约责任。在房屋买卖中，定金条款和违约责任条款通常是合同的重要组成部分，具有法律效力。

4. 特殊情况：当然，也存在一些特殊情况，比如双方协商一致解除合同，或者卖方存在违约行为导致合同无法履行等，这些情况下你可能不需要承担违约责任或者可以主张返还定金。但这需要具体根据合同内容和实际情况来判断。

建议：

• 如果你已经决定不购买房子，应尽快与卖方沟通，协商解决方案，以减少双方的损失。
• 在协商过程中，你可以参考合同条款和法律规定，明确自己的权利和义务，以及可能面临的法律后果。
• 如果双方无法达成一致，你可以考虑寻求法律援助或者通过诉讼等方式解决纠纷。但请注意，诉讼过程可能耗时耗力，且结果具有不确定性，因此应谨慎选择。