犯虐待罪并不一定都会进监狱，具体是否入狱服刑需根据犯罪情节、危害后果及犯罪人的悔罪表现等因素综合判定。以下是对此问题的详细分析：

1. 虐待罪的基本刑罚：

   • 根据《中华人民共和国刑法》第二百六十条的规定，虐待家庭成员，情节恶劣的，处二年以下有期徒刑、拘役或者管制。这里的“拘役”是短期剥夺犯罪分子人身自由，并就近实行强制劳动改造的刑罚方法；“有期徒刑”则意味着在监狱等场所服刑。但需注意，此情形属于告诉才处理，即被害人需亲自向人民法院提出控告，人民法院才处理。若被害人因受到强制、威吓无法告诉，或被害人没有能力告诉，则不在此限。

2. 加重刑罚的情形：

   • 若虐待行为致使被害人重伤、死亡，将处二年以上七年以下有期徒刑，并且不属于告诉才处理的范畴。在此情况下，犯罪人更有可能面临入狱服刑的后果。

3. 不一定坐牢的情况：

   • 定罪免刑：即使构成虐待罪，但如果犯罪情节轻微，不需要判处刑罚，法院可以依据《刑法》第三十七条的规定，免予刑事处罚。此时，法院可能会根据案件的具体情况，对犯罪人予以训诫、责令具结悔过、赔礼道歉、赔偿损失，或由主管部门给予行政处罚或行政处分。
   • 适用缓刑：对于被判处拘役、三年以下有期徒刑的虐待罪犯罪分子，如果其犯罪情节较轻、有悔罪表现、没有再犯罪的危险，且宣告缓刑对所居住社区没有重大不良影响，法院可以宣告缓刑。在缓刑考验期内，只要犯罪分子遵守相关规定，就无需在监狱服刑。

4. 特殊情形下的虐待罪：

   • 根据《中华人民共和国刑法》第二百六十条之一的规定，对于未成年人、老年人、患病的人、残疾人等负有监护、看护职责的人，如果实施了虐待被监护、看护人的行为，并且情节恶劣，将面临三年以下有期徒刑或者拘役的刑事处罚。在此情形下，犯罪人同样有可能面临入狱服刑的后果。

建议与结论：

虐待行为是严重违反法律与道德的行为，对受害者的身心健康造成极大伤害。因此，无论是否面临牢狱之灾，都应深刻反省并改正自己的行为。同时，建议受害者或其近亲属在遇到虐待行为时，及时寻求法律援助以保护自己的合法权益。如果你或你身边的人遇到了虐待相关的问题，可以直接向我咨询，我会根据具体情况为你提供专业的法律建议。