在他人土地上进行违法建设，被处罚人通常是实际进行违法建设的行为人。以下从不同角度为你详细分析：

从行政处罚的角度

根据相关土地管理和城乡规划法律法规，对于在他人土地上进行违法建设的行为，行政机关在查处时，主要关注的是谁实施了违反土地管理和城乡规划规定的行为。一般来说，实际组织施工、进行建设活动的人，即违法建设的行为人，会被认定为被处罚对象。例如，张三未经批准，在李四的土地上擅自建造房屋，那么行政机关在调查核实后，会对张三作出责令停止建设、限期拆除、罚款等行政处罚决定。这是因为张三作为实际的建设者，直接违反了土地管理和城乡规划的相关规定，应当承担相应的行政责任。

特殊情况下的被处罚人认定

1. 建设单位与施工单位分离的情况：如果违法建设是由建设单位委托施工单位进行的，且施工单位是按照建设单位的要求和指示进行建设，那么在这种情况下，建设单位和施工单位可能会被认定为共同被处罚人。因为建设单位作为项目的发起者和组织者，对违法建设行为负有主要责任；而施工单位作为具体实施者，也应当对其违法行为承担相应的责任。例如，某房地产开发公司（建设单位）在未取得合法用地手续的情况下，委托某建筑公司（施工单位）在其非法占用的土地上进行房地产开发建设，那么行政机关在对该违法建设行为进行处罚时，可能会同时对房地产开发公司和建筑公司作出处罚决定。
2. 土地使用权人与实际建设人不一致的情况：如果土地使用权人明知他人在其土地上进行违法建设而不予制止，甚至提供一定的便利条件，那么土地使用权人也可能会被认定为被处罚人或者承担相应的连带责任。这是因为土地使用权人对土地享有合法的使用权和监督管理权，其有义务防止他人在其土地上进行违法建设活动。例如，王五将其土地出租给赵六使用，赵六在租赁土地上未经批准擅自建造厂房，王五明知赵六的违法行为却未加以制止，那么行政机关在对赵六进行处罚的同时，也可能会对王五作出相应的处罚或者要求其承担一定的连带责任。

法律后果

被处罚人可能会面临多种法律后果，具体取决于违法建设的性质、情节和造成的后果等因素。常见的法律后果包括：

1. 责令停止建设：行政机关有权责令违法建设的行为人立即停止建设活动，以防止违法建设行为的继续扩大和造成更严重的后果。
2. 限期拆除：对于已经建成的违法建筑物、构筑物，行政机关可以责令行为人在一定期限内自行拆除。如果行为人在规定期限内未自行拆除，行政机关可以依法强制拆除。
3. 罚款：行政机关可以根据违法建设的情节和造成的后果，对行为人处以一定数额的罚款。罚款的数额会根据具体情况而定，一般会考虑违法建设的面积、造价等因素。
4. 没收违法所得：如果违法建设行为人通过违法建设活动获得了经济利益，行政机关可以依法没收其违法所得。

如果你遇到了在他人土地上进行违法建设相关的法律问题，或者对被处罚人的认定、法律后果等方面有疑问，可以直接向我咨询，我会为你提供专业、详细的法律解答。