结论：兄弟两个一块盖的房子没有协议，多年后能否要回另一个人的钱，需视具体情况而定，包括出资情况、房屋使用情况、双方协商情况以及是否超过诉讼时效等。以下从不同角度进行分析：
一、出资情况与房屋权属
共同出资：如果兄弟两人共同出资建造房屋，且出资比例明确，那么房屋应视为双方共有。在这种情况下，即使没有书面协议，也可以根据出资比例来划分房屋的权属。多年后，如果一方想要要回另一方的钱，实际上可能涉及的是房屋份额的转让或分割，而非简单的“要回钱”。这通常需要双方协商一致，或者通过法律途径解决，如起诉要求分割共有财产。
一方出资：如果房屋主要由一方出资建造，另一方仅提供了少量帮助或没有出资，那么房屋的权属可能更倾向于出资方。然而，这并不意味着另一方完全无权要求补偿。如果另一方在建造过程中提供了劳务、技术或其他形式的贡献，且这些贡献对房屋的建造有实质性帮助，那么出资方可能需要给予一定的补偿。但这种补偿的数额和方式，同样需要双方协商或通过法律途径确定。
二、房屋使用情况与权益
共同使用：如果房屋建成后，兄弟两人一直共同使用，且没有明确划分使用区域或权益，那么房屋的共有性质可能更加明显。在这种情况下，一方想要要回另一方的钱，可能更加复杂，因为涉及到的是共有权益的分割，而非简单的债务关系。
一方使用：如果房屋建成后，主要由一方使用，另一方很少或从未使用，那么使用方可能在一定程度上享有了更多的房屋权益。但这并不意味着另一方完全无权要求补偿或分割权益。具体如何处理，仍需根据双方的出资情况、贡献大小以及实际使用情况等因素综合考虑。
三、双方协商与法律途径
双方协商：在处理这类纠纷时，首先建议双方进行协商。通过友好沟通，双方可以明确各自的权益和诉求，并尝试达成一致意见。协商的好处在于可以节省时间和成本，避免不必要的法律纠纷。
法律途径：如果协商无果，或者一方拒绝协商，那么另一方可以考虑通过法律途径解决纠纷。这包括起诉要求分割共有财产、确认房屋权属或要求补偿等。在起诉前，建议收集相关证据，如出资凭证、建造过程中的照片或视频、证人证言等，以支持自己的主张。
四、诉讼时效问题
在考虑是否要回另一方的钱时，还需要注意诉讼时效的问题。根据《中华人民共和国民法典》的相关规定，向人民法院请求保护民事权利的诉讼时效期间为三年。诉讼时效期间自权利人知道或者应当知道权利受到损害以及义务人之日起计算。因此，如果一方想要通过法律途径要回另一方的钱，需要确保在诉讼时效期间内提起诉讼。
建议：由于这类纠纷涉及复杂的法律关系和权益划分，建议在实际操作中咨询专业律师的意见。律师可以根据具体情况提供针对性的法律建议和解决方案，帮助当事人更好地维护自己的合法权益。如果你有具体的法律问题或需要进一步的法律帮助，请直接向我咨询。