结论：是否需要退钱，取决于口头居间合同的具体内容、履行情况以及公司解除原合同的原因和性质，不能一概而论。以下从不同角度进行分析：
一、口头居间合同的法律效力
口头居间合同，只要双方意思表示真实，内容不违反法律、行政法规的强制性规定，即具有法律效力。您已经履行完毕口头居间合同的义务，并拿到了相应的报酬，这表明合同已经得到了实际履行。
二、公司解除原合同的原因和性质
合法解除：
- 如果公司解除原合同是基于合法的原因，如合同到期、双方协商一致解除、因不可抗力导致合同无法履行等，且解除行为符合法律程序，那么您无需退还已收取的报酬。因为您已经按照口头居间合同的约定完成了义务，有权获得相应的报酬。
违法解除：
- 如果公司解除原合同是违法的，如无正当理由单方面解除合同、违反法定程序解除合同等，那么您可能有权要求公司继续履行合同或赔偿损失。但这种情况通常不涉及您退还已收取的报酬，除非您收取的报酬与原合同的履行存在直接关联，且因公司违法解除导致您无法继续履行居间义务（这种情况较为少见）。
三、报酬与原合同履行的关联性
- 如果您收取的报酬是基于您成功促成原合同的签订和履行，且原合同的解除并未影响到您已经完成的居间义务（即您已经为双方提供了居间服务，并促成了合同的签订），那么您无需退还报酬。
- 如果原合同的解除导致您无法继续履行居间义务，且您收取的报酬中包含了未来可能履行的义务对应的部分（这种情况在口头合同中较难界定），那么可能需要根据实际情况协商退还部分报酬。但这种情况需要具体分析，且通常需要双方协商一致或通过法律途径解决。
四、建议
- 审查口头居间合同：回顾口头居间合同的具体内容，特别是关于报酬支付和合同解除的条款，以确定您的权利和义务。
- 与公司沟通：与公司沟通，了解解除原合同的具体原因和性质，以及公司对您收取报酬的态度。
- 寻求法律帮助：如果与公司沟通无果，或您对是否需要退还报酬存在疑问，可以向我咨询，我会根据您的具体情况提供法律建议。
总结：是否需要退钱取决于多个因素，包括口头居间合同的具体内容、公司解除原合同的原因和性质以及报酬与原合同履行的关联性。建议您根据上述分析，结合自己的实际情况，做出合理的判断。如有需要，可以随时向我咨询。