您在通过中介购买房屋并签订合同后，又不想购买且中介拿走了您的公证书，这种情况下您若单方面解除合同，通常构成违约，需要承担相应的违约责任。以下是从不同角度为您进行的分析：

一、合同效力与违约责任

1. 合同效力：根据《民法典》的相关规定，依法成立的合同，自成立时生效，对当事人具有法律约束力。您与卖方及中介签订的购房合同，一旦成立并生效，就具有法律约束力，您应当按照合同约定履行义务。

2. 违约责任：若您单方面不想购买房屋，即单方面解除合同，这通常构成违约。根据合同约定，您可能需要支付违约金。违约金的数额一般依据合同中的约定执行。如果您认为约定的违约金过高，可以请求法院或仲裁机构进行适当调整。

二、处理方式与建议

1. 查看合同条款：

   • 首先，您应仔细查看购房合同中关于解除合同的条款。如果合同中有明确约定解除合同的条件和程序，您应按照合同规定操作。

2. 与卖方及中介协商：

   • 如果合同中没有相关约定，或者您希望以更和谐的方式解决问题，可以尝试与卖方及中介进行协商。诚恳地说明您不想购买的原因，争取对方的理解。
   • 如果协商成功，最好签订书面协议，明确各方权利义务的终止，以避免后续纠纷。

3. 承担违约后果：

   • 如果协商不成功，而您又单方面决定不履行合同，那么您将需要承担违约责任。这可能包括支付违约金、赔偿卖方因您违约而遭受的损失等。

4. 申请撤销合同（特殊情况）：

   • 在特殊情况下，如存在重大误解、显失公平、欺诈、胁迫等可撤销合同的情形，您可以向法院或仲裁机构申请撤销合同。但请注意，行使撤销权是有期限限制的，且需要提供充分的证据来支持您的申请。

三、关于公证书的处理

• 中介拿走您的公证书可能涉及到您个人信息的保护问题。如果公证书中包含您的敏感信息，您有权要求中介返还。同时，您也应关注公证书是否被用于非法目的，如有必要，可以寻求法律帮助来保护自己的权益。

四、法律后果与风险提示

• 如果您擅自不履行合同，除了需要承担违约责任外，还可能面临卖方的法律追索。卖方有权要求您继续履行合同或赔偿因您违约而遭受的损失，包括预期利益等。
• 因此，在做出决定前，请务必谨慎考虑各种后果，并尽量通过协商来解决问题。

建议您：首先查看合同条款，了解违约责任和解除合同的条件；其次，尝试与卖方及中介进行协商，争取以和谐的方式解决问题；最后，如果协商不成功且您确实不想购买房屋，那么请做好承担违约责任的准备，并考虑是否需要通过法律途径来维护自己的权益。如果您在此过程中遇到任何法律问题或需要进一步的法律帮助，请随时向我咨询。