结论：旅行社交了钱但未出行，是否需要赔偿违约金以及费用扣除情况，需根据旅游合同的约定、相关法律法规以及取消行程的原因来综合判断。以下从不同角度为您详细分析：
一、出发前因游客自身原因取消行程
合同有明确约定：
- 如果旅游合同中明确规定了因游客自身原因取消行程时的退款政策及违约金条款，那么应按照合同约定执行。例如，合同可能规定提前多少天取消可退全款，或需扣除一定比例的费用作为违约金。
合同没有约定：
- 若合同未明确约定退款及违约金事宜，根据《中华人民共和国民法典》的相关规定，游客有权要求退款，但旅行社可以扣除已实际发生且不可退还的费用（如预订酒店、车票等）后，将剩余款项退还。此时，通常不需要额外赔偿违约金，除非旅行社能证明因游客取消行程导致了其实际损失，且该损失超出了已扣除的费用范围。
二、因旅行社原因导致游客无法成行
旅行社违约：
- 如旅行社未达到最低成团人数、擅自变更行程安排等违约行为导致游客无法成行，根据《中华人民共和国民法典》及《旅行社服务质量赔偿标准》，旅行社应全额退款，并可能需支付违约金。违约金的数额通常根据合同约定或实际损失来确定。
不可抗力等客观原因：
- 若因自然灾害、政府发布的旅行限制令等不可抗力因素导致旅游行程取消，根据《中华人民共和国民法典》及《中华人民共和国旅游法》的相关规定，旅行社应在扣除已支付且不可退还的费用后，将余款退还游客。在此情况下，双方互不承担违约责任，因此游客通常不需要支付违约金。
三、相关法律法规依据及建议
- 《中华人民共和国民法典》：规定了合同双方的权利义务，以及因违约产生的赔偿责任。在旅游合同中，双方应明确约定退款政策、违约金条款等，以避免纠纷。
- 《中华人民共和国旅游法》：明确了旅行社在组团旅游中的责任和义务，包括因未达到约定人数不能出团时的退款规定，以及因旅行社原因导致游客无法成行时的赔偿责任。
- 建议：在签订旅游合同时，游客应仔细阅读合同条款，特别是关于退款政策、违约金条款等关键内容。如有疑问或不明确之处，应及时向旅行社咨询并要求解释。在取消行程时，应尽快与旅行社沟通并提交相关证明材料，以便旅行社及时处理退款事宜。
四、实际操作中的注意事项
- 保留证据：游客在取消行程时，应保留好相关证据，如书面取消通知、旅行社的回复等，以便在发生纠纷时证明自己的权益。
- 及时沟通：与旅行社保持及时沟通，了解退款进度及可能产生的费用扣除情况，避免因信息不对称而产生误解或纠纷。
- 寻求援助：如旅行社拒绝退款或处理不当，游客可以向当地旅游行政管理部门、消费者协会投诉，或通过法律途径维护自己的权益。
综上所述，旅行社交了钱但未出行时的退款及违约金问题，需综合考虑合同约定、法律法规以及取消行程的具体原因。如有任何疑问或需要进一步的法律帮助，请随时向我咨询。