结论概述：
- 一般情况下，您不能仅因对方违约就单方面决定不让其继续施工，否则可能构成您方的违约。
- 但在特定情况下，如合同中有明确约定或对方违约行为严重到导致合同目的无法实现时，您可能有权解除合同并阻止对方继续施工。
详细分析：
首先，我们需要明确的是，合同一旦签订，双方都应按照合同的约定履行各自的义务。在您所描述的情况中，对方拖着不施工，确实构成了违约行为。然而，这并不意味着您就可以单方面地决定不让对方继续进行后续的工序。
合同约定与违约责任：
- 您应首先查看合同中是否有关于工期延误、违约责任以及合同解除等条款的明确约定。如果合同中有规定，在对方违约的情况下，您有权采取何种措施（如要求赔偿、解除合同等），那么您应按照合同约定来行使权利。
- 如果合同中没有明确约定，您不能仅凭对方违约就单方面阻止其继续施工。因为这样做可能构成您方的违约，需要承担相应的法律责任。
对方违约的严重性：
- 如果对方的违约行为严重到导致合同目的无法实现（例如，工期延误导致整个项目无法按时完成，给您造成了重大损失），那么您可能有权根据《民法典》的相关规定解除合同。
- 在解除合同的情况下，您当然可以阻止对方继续施工，并要求其承担违约责任，包括赔偿损失等。
实际操作建议：
- 在采取任何行动之前，您应先与对方进行沟通，明确表达您的诉求和担忧，并尝试通过协商解决问题。
- 如果协商无果，您可以考虑向对方发出书面通知，要求其在一定期限内纠正违约行为，否则将采取法律措施。
- 在必要时，您可以寻求法律援助或向法院提起诉讼，以维护自己的合法权益。
法律后果与风险提示：
- 如果您未经合同约定或法律程序就单方面阻止对方继续施工，可能构成违约行为，需要承担赔偿损失等法律责任。
- 在解除合同的情况下，您应确保有充分的证据证明对方的违约行为严重到导致合同目的无法实现，否则可能面临解除合同被认定为无效的风险。
总结与建议：
在面对对方违约的情况时，您应保持冷静和理性，按照合同约定和法律规定来行使权利。如果您不确定如何操作或担心法律风险，建议您直接向我咨询，我会根据您的具体情况提供详细的法律建议和操作方案。