不可以直接将奶奶和子女赶出家门，这种行为可能构成违法，可以报警处理。下面我详细为您分析：
房产归属问题：
- 首先，需要明确房产的归属。如果房产是爷爷的个人财产，他有权决定房产的使用和处分，但并不意味着他可以随意剥夺其他家庭成员的居住权。如果房产是家庭共有财产，那么所有共有人都有权使用，任何一方都不能擅自排除其他共有人的权利。
居住权与家庭关系：
- 奶奶和子女作为家庭成员，通常享有在家庭住所中的居住权。这种居住权不仅基于房产的归属，还基于家庭关系的存在。因此，即使爷爷认为房子是他的，也不能单方面剥夺奶奶和子女的居住权。
报警处理的法律依据：
- 如果爷爷采取暴力或威胁等手段将奶奶和子女赶出家门，这可能构成侵犯他人住宅权、人身权等违法行为。在这种情况下，奶奶和子女有权报警，请求公安机关介入处理。
法律建议：
- 面对这种情况，建议奶奶和子女首先尝试与爷爷进行协商，寻求和平解决的方式。如果协商无果，可以考虑通过法律途径维护自己的合法权益。例如，可以向法院提起诉讼，请求确认居住权或要求恢复居住状态。
综上所述，爷爷不能单方面将奶奶和子女赶出家门。如果发生这种情况，奶奶和子女有权报警处理，并可以通过法律途径维护自己的合法权益。如果你需要进一步的法律帮助或咨询，请随时告诉我。