结论：在已经支付五万块钱并签署了谅解书的情况下，是否可以追回这笔钱，取决于多种因素，包括谅解书的性质、支付款项的性质以及双方的具体约定等，一般情况下，若谅解书具有法律效力且款项支付为自愿补偿，则难以直接追回；但若存在法定撤销情形或双方协商一致，则有可能追回。
一、谅解书的性质与效力
谅解书通常是在刑事案件或民事纠纷中，受害方对加害方表示谅解并同意不再追究其法律责任或减少追究的书面文件。在法律上，谅解书一旦签署并生效，就具有一定的法律效力，意味着双方就某些事项达成了共识。
若谅解书明确款项性质：如果谅解书中明确写明了这五万块钱是作为对受害方的补偿，并且双方都认可这一性质，那么这笔钱在法律上通常被视为加害方对受害方的自愿补偿。在这种情况下，除非存在法定撤销情形（如欺诈、胁迫等），否则加害方难以直接追回这笔钱。
若谅解书未明确款项性质：如果谅解书中没有明确写明这五万块钱的性质，或者双方对款项的性质存在争议，那么可能需要通过进一步的法律程序来确定这笔钱的归属。在这种情况下，加害方有可能通过法律途径来主张自己的权益，但具体结果取决于法院的判决。
二、支付款项的性质
除了谅解书的性质外，支付款项的性质也是决定是否可以追回的重要因素。
自愿补偿：如果加害方支付这五万块钱是出于自愿，并且没有受到任何欺诈、胁迫等不正当手段的影响，那么这笔钱在法律上通常被视为加害方对受害方的自愿补偿。在这种情况下，加害方难以直接追回这笔钱。
附条件支付：如果加害方支付这五万块钱是附条件的，比如要求受害方在某个时间内不提起诉讼或撤销某些指控等，那么当这些条件没有得到满足时，加害方有可能通过法律途径来追回这笔钱。但这种情况需要具体的证据来支持加害方的主张。
三、双方的具体约定
双方在签署谅解书时，可能对款项的支付、使用和追回等事项进行了具体的约定。这些约定将直接影响是否可以追回这笔钱。
有明确约定：如果双方在谅解书中明确约定了款项的支付、使用和追回等事项，并且这些约定不违反法律法规的强制性规定，那么双方应当按照约定来履行。在这种情况下，如果加害方想要追回这笔钱，需要依据约定来主张自己的权益。
无明确约定：如果双方在谅解书中没有明确约定款项的支付、使用和追回等事项，那么可能需要通过进一步的协商或法律程序来确定这笔钱的归属。在这种情况下，加害方有可能通过与受害方协商或提起诉讼等方式来主张自己的权益。
四、建议与后续行动
审查谅解书与支付凭证：首先，加害方应当仔细审查谅解书和支付凭证，了解款项的性质、支付条件和双方的具体约定。这将有助于加害方确定自己的权益和可能的追回途径。
与受害方协商：如果加害方认为有可能追回这笔钱，可以尝试与受害方进行协商。在协商过程中，加害方可以提出自己的主张和理由，并尝试与受害方达成共识。
寻求法律帮助：如果协商无果或加害方认为自己的权益受到了侵害，可以寻求法律帮助。在这种情况下，加害方可以咨询专业律师，了解自己的法律权益和可能的追回途径，并通过法律程序来维护自己的权益。
最后，每个案件的具体情况都有所不同，因此是否可以追回这笔钱还需要根据具体情况来判断。如果您有任何疑问或需要进一步的法律帮助，请随时向我咨询。