结论：政府人员到家里办公是否违法，不能一概而论，需要分情况讨论。
正常公务活动且符合程序
- 如果政府人员是因正常公务活动需要，比如进行调查取证、送达法律文书、进行社区服务或帮扶等，且这些活动是在法律允许的范围内，同时遵循了相关的程序和规定，那么他们到家里办公是合法的。例如，警察为了调查一起案件，依法到嫌疑人家中进行询问，这是完全合法的行为。
未经允许或超出职权范围
- 如果政府人员未经居民允许，擅自进入居民家中，或者他们的行为超出了其职权范围，比如进行非法的搜查、扣押等，那么这种行为就是违法的。居民有权拒绝非法的进入和搜查，并可以向相关部门投诉或寻求法律帮助。
特殊情况下的合法进入
- 在某些特殊情况下，如紧急避险、救助危难等，政府人员可能需要在未经居民明确同意的情况下进入家中。这种情况下，虽然可能缺乏居民的明确同意，但如果是为了更大的公共利益或保护居民的生命财产安全，那么这种行为通常是被视为合法的。不过，这种情况下政府人员也需要尽快向相关部门报告并说明情况。
法律背景与建议：
- 根据相关法律法规，政府人员在执行公务时，必须遵守法律程序，尊重居民的合法权益。如果居民认为政府人员的行为违法或侵犯了自己的权益，可以及时向相关部门投诉或寻求法律帮助。
- 对于政府人员而言，他们在执行公务时应当严格遵守法律法规，确保自己的行为合法合规。如果因工作需要进入居民家中，应当事先与居民沟通并取得同意，或者依法出示相关证件和法律文书。
可能后果：
- 如果政府人员的行为被认定为违法，他们可能会面临纪律处分、行政处罚甚至刑事责任。同时，居民也有权要求政府人员承担相应的民事赔偿责任。
如果您对政府人员到家里办公的具体情况有疑问，或者认为自己的权益受到了侵犯，可以直接向我咨询，我会根据您的具体情况提供详细的法律建议。