非法侵入住宅者最轻的处罚是五日以上十日以下拘留，并处二百元以上五百元以下罚款。以下是对此问题的详细分析：
一、行政处罚层面
根据《中华人民共和国治安管理处罚法》第四十条第（三）项的规定，非法侵入他人住宅的，将受到行政处罚。具体处罚措施根据情节的轻重有所不同：
一般情况：若非法侵入行为使用了暴力、威胁等手段，或者侵入时间较长，对他人生活造成了较大影响，将处十日以上十五日以下拘留，并处五百元以上一千元以下罚款。
情节较轻：若侵入行为未使用暴力、威胁等手段，侵入时间较短，对他人生活影响较小，或者经劝阻及时退出等，则可能被视为情节较轻，处五日以上十日以下拘留，并处二百元以上五百元以下罚款。这是非法侵入住宅行为可能面临的最轻处罚。
二、刑事处罚层面
虽然用户询问的是最轻处罚，但为了全面理解非法侵入住宅的法律后果，也有必要提及刑事处罚的可能性。根据《中华人民共和国刑法》第二百四十五条第一款的规定，非法侵入他人住宅的，构成非法侵入住宅罪，将处三年以下有期徒刑或者拘役。不过，这通常适用于情节较为严重的非法侵入行为。
三、特殊情况的考虑
未成年人：若行为人为未成年人，根据《中华人民共和国未成年人保护法》和相关法律法规的规定，将对其采取更为教育和保护为主的措施，处罚可能会相对较轻。但这并不意味着未成年人可以逃避法律责任，只是处罚方式可能有所不同。
与其他犯罪结合：若非法侵入他人住宅的行为与其他犯罪相结合，如杀人、伤害、强奸等，行为人将面临更为严重的法律后果，可能受到数罪并罚的处理。这种情况下，非法侵入住宅的行为可能只是更严重犯罪的一个环节。
四、建议与总结
非法侵入他人住宅是严重的违法行为，不仅侵犯了他人的住宅权和隐私权，也破坏了社会的公共秩序和安全。因此，我强烈建议公众尊重他人的住宅权和隐私权，不得擅自闯入他人住宅或干扰他人的正常生活。同时，对于发现的非法侵入行为，应及时向公安机关报案，以维护自身的合法权益和社会的安全稳定。
如果您或您身边的人遇到了非法侵入住宅的情况，或者有任何关于法律方面的问题，都可以直接向我咨询。我会根据您的具体情况，提供专业的法律建议和帮助。