服刑期间不可以随便回家。服刑人员在服刑期间的人身自由受到严格限制，这是刑罚执行的基本原则之一，具体分析如下：
监狱服刑人员：根据我国《监狱法》及相关规定，监狱服刑人员必须严格遵守监狱的规章制度，未经批准不得擅自离开监狱。只有在特定情况下，如家庭发生重大变故（直系亲属病危、死亡等），服刑人员才可以提出离监探亲申请。但这一申请需要经过监狱管理部门的严格审批，包括服刑人员的改造表现、剩余刑期、危险性评估等多个方面。即使获得批准，离监探亲的时间、范围、活动方式等也会受到严格限制。
拘役或看守所服刑人员：对于被判处拘役或在看守所服刑的人员，虽然其刑期相对较短，但同样需要遵守相应的监管规定。拘役由公安机关就近执行，执行期间，服刑人员可以每月回家一至两天，参加劳动的，可以酌量发给报酬。但这一“回家”并非“随便”回家，而是有严格的时间限制和条件要求，且需要经过执行机关的批准。在看守所服刑的人员，则通常处于更为严格的监管之下，一般不允许擅自离开。
特殊情况下的临时离监：除了上述离监探亲外，服刑人员在服刑期间还可能因其他特殊原因需要临时离监，如就医、参加庭审等。这些情况同样需要经过严格的审批程序，并确保服刑人员在离监期间不会对社会造成危害。
总结来看，服刑期间的人身自由是受到严格限制的，服刑人员不能随便回家。如有特殊情况需要离监，必须经过相关部门的严格审批，并遵守相应的规定和限制。