针对土地所有权人与建筑物所有权人分离的情况下，违法建设行为的处罚对象问题，结论如下：
- 一般原则：处罚实际建设者或使用者
在土地所有权人与建筑物所有权人分离的情况下，若建筑物属于违法建设，通常处罚的是实际进行建设或使用该建筑物的人。这是因为违法建设行为直接违反了城乡规划、土地管理等相关法律法规，而实际建设者或使用者是这些违法行为的直接实施者。例如，如果某人在未取得建设许可的情况下，在他人土地上建造了房屋，那么该房屋即属于违法建设，处罚对象将是实际建造该房屋的人。
特殊情况：土地所有权人可能承担连带责任
- 明知或应知违法建设而未制止：如果土地所有权人明知或应当知道在其土地上进行了违法建设，但未采取有效措施予以制止，那么土地所有权人可能因未履行其管理职责而承担一定的连带责任。这种责任可能表现为罚款、责令拆除违法建筑等。
- 土地使用权转让时的责任：如果土地所有权人在转让土地使用权时，未明确告知受让人土地上存在违法建设或未就违法建设问题与受让人达成妥善处理协议，那么土地所有权人可能因转让行为而承担一定的法律责任。
法律后果与处罚措施
- 行政处罚：对于违法建设行为，城乡规划主管部门或其他相关部门有权依法对实际建设者或使用者进行行政处罚，包括罚款、责令停止建设、限期拆除等。
- 民事责任：如果违法建设行为给相邻方或其他第三方造成了损害，实际建设者或使用者还可能承担民事赔偿责任。
- 刑事责任：在极端情况下，如果违法建设行为严重违反了法律法规，且造成了严重后果，实际建设者或使用者还可能面临刑事责任的追究。
法律背景与建议：
- 法律背景：我国《城乡规划法》、《土地管理法》等法律法规对违法建设行为有明确的规定和处罚措施。这些法律法规旨在维护城乡规划的严肃性和土地管理的秩序，保护公共利益和他人合法权益。
- 建议：对于土地所有权人和建筑物所有权人而言，应严格遵守相关法律法规，确保土地和建筑物的合法使用。在土地使用权转让或建筑物买卖时，应明确告知对方土地和建筑物的现状，包括是否存在违法建设等问题，以避免不必要的法律纠纷。如果发现违法建设行为，应及时向相关部门报告并配合处理。
进一步思考：
在实际操作中，违法建设行为的处罚可能涉及多个部门和多种法律程序。因此，在处理此类问题时，建议咨询专业律师以获取更具体、更专业的法律意见。如果你有相关法律问题，可以直接向我咨询，我会根据你的具体情况提供详细的法律解答和建议。