结论前置：

1. 房屋所有权人或合法管理人有权起诉要回房屋。
2. 若存在无权处分或侵权情况，实际权利人也可起诉。

详细分析：

在探讨无偿将别人的房屋借给他人使用，谁来起诉要回房屋的问题时，我们首先要明确的是房屋的所有权归属以及相关的法律关系。

一、房屋所有权人或合法管理人的权利

1. 所有权人：房屋的所有权人，即房产证上登记的名字所对应的个人或单位，是房屋的法定所有者。他们有权决定房屋的使用、收益和处分。因此，如果房屋被无偿借给他人使用，而所有权人希望要回房屋，他们有权直接起诉借用人，要求返还房屋。

2. 合法管理人：在某些情况下，房屋的所有权人可能将房屋的管理权委托给其他人或单位，如物业管理公司或亲属。这些合法管理人在得到所有权人的授权后，也有权对房屋进行管理，包括在必要时起诉借用人要回房屋。

二、无权处分或侵权情况下的起诉主体

1. 无权处分：如果借用人并非基于所有权人或合法管理人的同意而使用房屋，即存在无权处分的情况，那么实际权利人（即所有权人或合法管理人）有权起诉借用人，要求其返还房屋并可能要求赔偿损失。

2. 侵权情况：如果借用人通过非法手段（如欺诈、胁迫等）获得房屋的使用权，或者在使用过程中对房屋造成了损害，那么实际权利人不仅可以起诉要求返还房屋，还可以要求借用人承担侵权责任，包括赔偿损失等。

三、实际操作中的建议

1. 收集证据：在起诉前，所有权人或合法管理人应收集相关证据，如房产证、借用协议（如果有）、沟通记录等，以证明自己对房屋的所有权或管理权以及借用人的无权使用或侵权行为。

2. 咨询律师：由于法律程序可能较为复杂，建议所有权人或合法管理人在起诉前咨询专业律师，以了解具体的法律程序和可能面临的法律风险。

3. 提起诉讼：在准备好相关证据和咨询过律师后，所有权人或合法管理人可以向法院提起诉讼，要求借用人返还房屋并可能要求赔偿损失。

举例说明：

假设甲是房屋的所有权人，乙未经甲同意无偿借用了甲的房屋。在这种情况下，甲作为房屋的所有权人，有权直接起诉乙，要求其返还房屋。如果乙在使用过程中对房屋造成了损害，甲还可以要求乙承担侵权责任，包括赔偿损失等。

进一步思考：

在实际操作中，可能会遇到各种复杂情况，如借用人拒绝返还房屋、房屋被转借给第三人等。在这种情况下，所有权人或合法管理人应保持冷静，及时咨询律师并采取相应的法律措施来维护自己的合法权益。

总结与建议：

无偿将别人的房屋借给他人使用的情况下，谁来起诉要回房屋主要取决于房屋的所有权归属以及相关的法律关系。一般来说，房屋的所有权人或合法管理人有权起诉要回房屋。如果存在无权处分或侵权情况，实际权利人也有权起诉。在处理此类问题时，建议所有权人或合法管理人及时咨询律师并采取相应的法律措施来维护自己的合法权益。如果有任何法律问题，可以直接向我咨询。