结论前置：在没有合同的情况下，工程做到一半亏损了，您确实有权选择退出，但这一行为可能涉及一系列法律后果和责任，具体取决于多种因素。以下是从不同角度对这一问题的详细分析：

一、合同缺失的法律影响

1. 合同关系未建立：在建设工程领域，合同是明确双方权利和义务的基础。若未签订书面合同，则双方之间可能未形成明确的合同关系，但这并不意味着您可以随意退出而不承担任何责任。根据《民法典》的相关规定，即使未签订书面合同，若双方实际履行了合同的主要义务，且对方接受，则合同关系仍然可能被认定为成立。

2. 口头协议与实际履行：如果双方之间存在口头协议，并且您已经按照口头协议进行了实际履行，那么这一口头协议在法律上也可能具有一定的效力。在此情况下，您的退出可能构成违约，需要承担相应的违约责任。

二、退出的法律后果与责任

1. 违约责任：如果您在没有合同或合同未明确约定的情况下擅自退出工程，且这一行为给对方造成了损失，那么您可能需要承担违约责任。违约责任的具体形式可能包括赔偿损失、支付违约金等。

2. 实际损失赔偿：除了违约责任外，如果您的退出行为导致对方产生了实际损失（如重新寻找施工队伍的费用、工期延误造成的损失等），您也可能需要承担这些损失的赔偿责任。

三、建议与应对措施

1. 协商解决：在决定退出之前，我建议您首先与对方进行协商，尝试达成一个双方都能接受的解决方案。这可能包括调整工程范围、工期、价格等条款，或者协商解除合同并明确双方的责任和义务。

2. 评估损失与风险：在协商过程中，您需要评估自己的退出可能给对方造成的损失，并考虑自己是否有能力承担这些损失。同时，您也需要评估自己继续履行合同可能面临的风险和损失。

3. 法律途径：如果协商无果，且您认为自己的权益受到了侵害，您可以考虑通过法律途径来维护自己的权益。这可能包括提起诉讼或申请仲裁等。但在此之前，我建议您先咨询专业律师，以了解自己的法律地位和可能的法律后果。

四、特殊情况下的考虑

1. 对方违约在先：如果对方在合同履行过程中存在违约行为（如未按时支付工程款、提供必要的施工条件等），且这一违约行为是导致您亏损和想要退出的主要原因，那么您可能在退出时享有更多的法律权益。在此情况下，您可以考虑在退出时要求对方承担违约责任或赔偿损失。

2. 不可抗力因素：如果工程因不可抗力因素（如自然灾害、政府政策变化等）而无法继续进行，且这一因素是您无法预见、无法避免且无法克服的，那么您可能在退出时不需要承担过多的法律责任。但在此情况下，您仍然需要与对方进行协商，并尽可能达成一个公平合理的解决方案。

最后，我建议您在处理此类问题时保持冷静和理性，不要轻易做出决定。如果您有任何疑问或需要进一步的法律帮助，请直接向我咨询。作为专业律师，我将根据您的具体情况提供有针对性的法律建议和解决方案。