在没有书面合同的情况下，承包工程所交的保证金，若工程未实际开展，一般是有可能追回的，但具体能否追回及追回的方式，需根据实际情况和法律规定来综合判断。以下从几个关键角度进行分析：
一、法律关系的认定
合同形式：虽然双方未签订书面合同，但根据《民法典》的相关规定，合同的形式并非仅限于书面形式，口头合同或其他形式（如实际履行行为）也可能构成有效的合同关系。因此，若双方存在口头约定或实际履行行为（如一方已支付保证金，另一方接受并准备开展工程），则可能被认定为存在合同关系。
保证金性质：保证金通常被视为一种担保方式，用于确保合同的履行。若合同未成立或未履行，保证金一般应予以退还。但具体是否退还及退还方式，需根据双方约定及实际情况来判断。
二、追回保证金的途径
协商：首先，建议双方尝试通过协商的方式解决纠纷。双方可以就保证金的退还问题达成一致意见，并签订书面协议以明确双方的权利义务。
诉讼或仲裁：若协商无果，则可以考虑通过诉讼或仲裁的方式解决纠纷。在此过程中，需要提供相关证据（如转账记录、聊天记录、证人证言等）来证明保证金的支付事实及双方的法律关系。法院或仲裁机构将根据双方提供的证据及法律规定来作出裁决。
三、可能遇到的法律障碍及应对策略
证据不足：若缺乏足够的证据来证明保证金的支付事实及双方的法律关系，则可能面临败诉的风险。因此，在支付保证金时，建议保留好相关证据（如转账记录、收据等），并在可能的情况下，要求对方出具书面确认文件。
对方拒不退还：若对方拒不退还保证金，且协商无果，则可以通过法律途径来维护自己的权益。在诉讼或仲裁过程中，可以要求对方承担违约责任或赔偿损失等。
四、特殊情况下的处理
若双方存在欺诈行为：若一方在支付保证金过程中存在欺诈行为（如虚构工程事实、冒用他人名义等），则另一方有权要求撤销合同并追回保证金。在此情况下，建议及时向公安机关报案，并寻求法律援助。
若保证金已被对方挪用或挥霍：若保证金已被对方挪用或挥霍，且对方无力偿还，则可能面临无法全额追回的风险。在此情况下，建议通过法律途径来追究对方的法律责任，并尽可能挽回损失。
总结与建议：在没有书面合同的情况下追回承包工程所交的保证金，需要综合考虑多种因素。建议首先尝试通过协商的方式解决纠纷；若协商无果，则可以考虑通过法律途径来维护自己的权益。在此过程中，务必保留好相关证据，并咨询专业律师的意见以制定合适的诉讼策略。若您在此方面有任何疑问或需要进一步的法律帮助，请随时向我咨询。