担保人被划走的钱是否会退回，这主要取决于担保人是否需要承担最终的担保责任，以及债权人是否已经通过其他方式实现了债权。以下从不同角度为你详细分析：
一、担保人承担最终担保责任的情况
债务人无法履行债务：
- 如果债务人确实无法履行债务，且担保人按照担保合同的约定承担了担保责任（如代为偿还债务），那么在这种情况下，担保人被划走的钱通常是不会退回的。因为担保人已经履行了其担保义务，这部分钱已经用于偿还债务。
担保人无过错但需承担责任：
- 在某些情况下，即使担保人没有过错，也可能因为法律规定或担保合同的约定而需要承担担保责任。例如，在连带责任保证中，债权人可以要求债务人或担保人中的任何一方履行全部债务。如果担保人被要求履行了债务，且债务人确实无法偿还，那么这部分钱通常也是不会退回的。
二、担保人不承担最终担保责任或可追偿的情况
债权人实现债权后：
- 如果债权人通过其他方式（如拍卖债务人的财产）实现了债权，且实现的债权金额已经足够覆盖债务，那么担保人之前被划走的钱在扣除其应承担的部分后（如果有的话），剩余部分应当退回给担保人。
担保人可向债务人追偿：
- 根据《中华人民共和国民法典》的相关规定，担保人在承担担保责任后，有权向债务人追偿。这意味着，如果担保人因为承担担保责任而支付了款项，且债务人最终有能力偿还这部分款项，那么担保人可以通过法律途径向债务人追偿，从而收回之前被划走的钱。
担保合同无效或被撤销：
- 如果担保合同因为违反法律、行政法规的强制性规定或存在其他无效情形而被认定无效，或者因为欺诈、胁迫等原因被撤销，那么担保人之前基于该合同被划走的钱应当退回。因为无效或被撤销的合同自始没有法律约束力，担保人无需承担基于该合同的担保责任。
三、实际操作中的注意事项
- 保留相关证据：担保人在被划走钱款后，应当保留好相关证据（如转账记录、担保合同、债权人实现债权的证据等），以便在需要时证明自己的权益。
- 及时咨询律师：如果担保人对是否需要承担担保责任、能否追偿等问题存在疑问，应当及时咨询专业律师，以便得到准确的法律意见和帮助。
- 关注债务人动态：担保人应当关注债务人的财务状况和动态，以便在债务人有能力偿还债务时及时行使追偿权。
总结来说，担保人被划走的钱是否会退回并没有一个固定的答案，而是取决于多种因素的综合考量。如果你作为担保人遇到了这样的问题，建议直接向我咨询，我会根据你的具体情况为你提供详细的法律分析和建议。