针对您提出的问题，即一名男性工人在上午在厂里工作到12点后请假回祖屋，下午死亡，厂里是否需要赔钱，这并非一个简单的“是”或“否”的问题，而是需要根据具体情况进行详细分析。以下是从不同角度进行的法律分析：
一、工伤认定角度
工伤定义：
- 根据《工伤保险条例》，工伤通常指的是在工作时间和工作场所内，因工作原因受到的事故伤害。此外，还包括在上下班途中，受到非本人主要责任的交通事故或者城市轨道交通、客运轮渡、火车事故伤害的等情形。
本案情况分析：
- 在本案中，工人是在上午工作结束后请假回祖屋，下午死亡。这一情形并不直接符合工伤定义中的“工作时间”和“工作场所”要求，也不属于上下班途中的交通事故。
- 除非能证明工人的死亡与工作有直接关联（如因工作过度劳累导致突发疾病死亡，且该疾病与工作有直接因果关系），否则一般难以认定为工伤。
结论：
- 在大多数情况下，如果工人的死亡与工作无直接关联，那么厂里可能不需要承担工伤赔偿责任。
二、雇主责任角度
雇主责任定义：
- 雇主责任是指雇主对其雇员在从事雇佣活动中遭受的人身损害或财产损失所承担的赔偿责任。
本案情况分析：
- 雇主责任通常限于雇员在从事雇佣活动期间遭受的损害。在本案中，工人是在请假后回祖屋期间死亡，这一期间并不属于雇佣活动期间。
- 除非能证明厂里存在过错（如未提供必要的安全保障措施、未及时进行健康检查等），且该过错与工人的死亡有直接因果关系，否则厂里一般不需要承担雇主责任。
结论：
- 如果厂里不存在过错，或者过错与工人的死亡无直接因果关系，那么厂里可能不需要承担雇主责任。
三、特殊情况考虑
突发疾病：
- 如果工人在工作期间突发疾病，且该疾病与工作有直接关联（如因工作过度劳累导致），虽然死亡发生在请假后，但厂里可能仍需承担一定责任。这需要根据具体证据和法律规定进行判断。
其他特殊情况：
- 如存在其他特殊情况（如厂里未提供必要的医疗救助、未及时通知家属等），也可能影响厂里的责任承担。
四、建议与措施
收集证据：
- 如果家属认为厂里应承担责任，建议首先收集相关证据（如工作记录、医疗记录、证人证言等），以证明工人的死亡与工作有直接关联或厂里存在过错。
法律咨询：
- 在处理此类纠纷时，建议家属及时咨询专业律师，以了解具体法律责任和维权途径。
协商与诉讼：
- 家属可以与厂里进行协商，寻求和解；如果协商无果，可以考虑通过法律途径解决纠纷。
综上所述，厂里是否需要赔钱取决于工人的死亡是否与工作有直接关联以及厂里是否存在过错。如果无法证明这些要点，那么厂里可能不需要承担赔偿责任。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。