结论：公司没有工会的情况下，退回来的工会经费一般不可以随意花费，需根据经费来源和性质进行合规处理。以下从不同角度详细分析：
一、工会经费的来源与性质
工会经费通常来源于会员缴纳的会费、企业按工资总额一定比例拨缴的经费，以及上级工会的补助等。这些经费具有特定的用途，即用于工会开展活动、维护职工权益等。即使公司没有工会，这些经费的性质并未改变，仍需遵循其原始用途进行管理。
二、没有工会时工会经费的处理
退回经费的合规性：
- 如果公司原本有工会，但后来解散或未成立工会，且相关经费已拨缴至工会账户，那么在公司没有工会的情况下，这些经费理论上应退回给原拨缴单位或按照相关规定处理，而不是由公司随意支配。
经费的合规使用：
- 即便经费退回到了公司账户，公司也不能随意花费。因为这些经费原本属于工会，其用途受到严格限制。如果公司想要使用这些经费，必须确保符合相关法律法规的规定，且通常需要经过职工代表大会或全体职工的讨论通过。
三、可能的法律后果
违规使用的风险：
- 如果公司未经合法程序擅自使用退回的工会经费，可能面临法律风险。例如，可能被视为挪用资金或违反财务管理规定，从而受到相关部门的处罚。
职工权益的保障：
- 工会经费的合规使用关系到职工权益的保障。如果公司违规使用经费，可能损害职工的利益，进而引发劳动纠纷或法律诉讼。
四、建议与措施
咨询相关部门：
- 在处理退回的工会经费时，建议公司咨询当地工会组织或劳动行政部门，了解具体的处理方式和合规要求。
完善内部管理：
- 公司应建立健全的财务管理制度，确保经费的合规使用。对于退回的工会经费，应设立专门的账户进行管理，并严格按照相关法律法规和公司内部规定进行使用。
加强职工沟通：
- 在处理经费问题时，公司应加强与职工的沟通，确保职工了解经费的来源、性质和使用情况，增强职工的信任感和归属感。
总结来说，公司没有工会的情况下，退回来的工会经费不可以随意花费。公司应咨询相关部门了解具体的处理方式和合规要求，并建立健全的财务管理制度确保经费的合规使用。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。