结论是：儿子作为军人把爸爸撵走是否犯法，不能一概而论，需要分情况讨论。以下从不同角度进行分析：

一、家庭关系与居住权角度

在家庭关系中，居住权通常基于家庭成员之间的共同生活需要和相互扶助的义务而产生。如果爸爸一直居住在儿子家中，且双方没有就居住问题产生过争议或约定，那么儿子单方面将爸爸撵走，可能构成对爸爸居住权的侵犯。这种行为在道德上可能受到谴责，但并不一定直接构成法律上的违法行为，除非爸爸因此遭受了实际的损失（如财物被损坏、身体受到伤害等），且这些损失与儿子的撵走行为有直接的因果关系。

二、军人身份与法律责任角度

儿子作为军人，其身份并不改变其作为家庭成员的基本法律义务。军人同样需要遵守法律法规，尊重家庭成员的合法权益。如果儿子因为自己的军人身份而认为可以无视家庭成员的权益，这种观念是错误的。军人身份并不赋予其特殊的法律权利来侵犯他人的合法权益。

三、具体行为与法律后果角度

1. 如果儿子只是口头要求爸爸离开，并未采取暴力或其他非法手段：

   • 这种情况下，爸爸可以选择离开或寻求法律帮助来维护自己的居住权。如果爸爸选择离开，且没有因此遭受实际损失，那么儿子的行为可能不构成法律上的违法行为。
   • 但如果爸爸因此遭受了精神上的痛苦或困扰，且这种痛苦或困扰与儿子的撵走行为有直接的因果关系，爸爸可以考虑通过法律途径（如起诉儿子侵犯其人格权）来寻求救济。

2. 如果儿子采取了暴力或其他非法手段将爸爸撵走：

   • 这种情况下，儿子的行为可能构成违法甚至犯罪。根据《中华人民共和国刑法》的相关规定，如果儿子的行为构成了故意伤害罪、非法侵入住宅罪等犯罪行为，他将面临刑事责任的追究。
   • 同时，爸爸也可以根据《中华人民共和国民法典》的相关规定，要求儿子承担民事赔偿责任，包括赔偿因暴力行为导致的身体伤害、财物损失等。

四、建议与措施

• 沟通协商：建议双方首先通过沟通协商来解决争议。儿子可以表达自己的想法和需求，爸爸也可以说明自己的立场和权益。通过平等、理性的对话，双方可能能够找到一个双方都能接受的解决方案。
• 寻求法律帮助：如果沟通协商无果，或者儿子的行为已经构成了违法或犯罪，爸爸可以寻求法律帮助来维护自己的合法权益。他可以向当地公安机关报案，或者向人民法院提起诉讼来要求儿子承担相应的法律责任。

最后需要强调的是，家庭关系是复杂而敏感的，处理家庭争议时应该尽量保持冷静和理性。如果双方无法自行解决争议，寻求专业的法律帮助是一个明智的选择。如果你有进一步的法律问题或需要更具体的法律建议，可以直接向我咨询。