结论：在您描述的情况下，钱是否能要回来取决于多个因素，包括转账的性质、是否有书面协议以及双方的具体行为等。以下是从不同角度的详细分析：
转账性质与书面协议：
- 如果您在转账给对方50万时，明确注明了这笔款项是用于购房，并且最好有书面协议（如借条、转账备注、聊天记录等）来证明这一点，那么这笔款项在法律上更有可能被认定为借款或特定用途的赠与。
- 若没有书面协议，但双方有口头约定，且能通过其他证据（如证人证言、聊天记录等）证明这一约定，那么您仍有可能主张这笔款项的返还。不过，口头约定的证明力相对较弱，可能需要更多的辅助证据来支持。
双方行为与证据收集：
- 如果对方在收到款项后，并未用于购房，而是用于其他个人消费或投资，且您能提供证据证明这一点（如银行流水、消费记录等），那么您主张返还的请求将更有说服力。
- 另一方面，如果对方能证明这笔款项已经被用于购房相关事宜（如支付定金、中介费等），但由于某些原因（如房价上涨、政策变化等）导致购房未成功，那么返还的请求可能会受到一定影响。不过，这并不意味着您完全无法要回这笔钱，而是需要根据具体情况和证据来进一步分析。
法律途径与诉讼策略：
- 如果双方无法协商解决，您可以通过法律途径来主张自己的权益。在诉讼过程中，您需要提供充分的证据来证明自己的主张，包括转账记录、书面协议、聊天记录、证人证言等。
- 法院在审理此类案件时，会综合考虑双方的行为、证据以及相关法律法规来做出判决。如果法院认定这笔款项是借款或特定用途的赠与，且对方未按照约定使用或返还，那么您有可能获得法院的支持，要回这笔钱。
特殊情况与少数观点：
- 在极少数情况下，如果双方存在复杂的情感关系或经济往来，法院可能会考虑这些因素对案件的影响。例如，如果这笔款项被视为对对方的赠与，且赠与已经完成，那么您可能无法要回这笔钱。不过，这种情况相对较少见，且需要充分的证据来支持。
建议：
- 首先，尝试与对方进行协商，看是否能达成一个双方都能接受的解决方案。
- 如果协商无果，建议您收集相关证据，并咨询专业律师（即我，汪琴雅律师，专注于离婚财产纠纷等领域）来制定具体的诉讼策略。
- 在诉讼过程中，保持冷静和理性，积极配合律师的工作，提供必要的证据和信息。
如果您有任何进一步的疑问或需要更多的法律帮助，请随时向我咨询。