可以追究责任。如果你交钱买了房，但并不是房主，这通常意味着在房屋买卖过程中可能存在欺诈、违约或其他不法行为。以下是从法律角度对你的问题进行的详细分析：

1. 合同违约责任：

   • 如果你与卖方签订了房屋买卖合同，并且合同中明确约定了卖方应保证其为房屋的合法所有权人，但实际情况并非如此，那么卖方就构成了合同违约。
   • 在这种情况下，你可以依据合同法的相关规定，要求卖方承担违约责任，包括退还购房款、赔偿损失等。

2. 欺诈责任：

   • 如果卖方在出售房屋时故意隐瞒了其并非房屋所有权人的事实，或者提供了虚假的产权证明，那么这种行为就构成了欺诈。
   • 对于欺诈行为，你可以依据相关法律规定，要求卖方承担欺诈责任，包括撤销合同、赔偿损失等。

3. 善意取得与物权保护：

   • 如果你在购买房屋时并不知情卖方并非房主，且已经支付了合理的对价并完成了房屋交付，那么你可能构成善意取得。
   • 在这种情况下，虽然你并非原始的房屋所有权人，但你可能获得房屋的所有权，并受到物权法的保护。
   • 如果原始的房屋所有权人要求返还房屋，你可以依据善意取得的相关规定进行抗辩。

4. 法律建议：

   • 首先，你应尽快收集与房屋买卖相关的所有证据，包括合同、付款凭证、产权证明等。
   • 其次，你可以考虑咨询当地的房地产律师或法律机构，以便更全面地了解你的法律权益和可能的救济途径。
   • 最后，根据律师的建议，你可以采取适当的法律行动来维护你的合法权益。

综上所述，如果你交钱买了房但并不是房主，你可以根据具体情况追究卖方的合同违约责任、欺诈责任等。同时，你也应尽快咨询专业律师以获取更具体的法律建议和帮助。