针对您提出的“违法建筑人去世后行政处罚对象怎么确定”这一问题，以下是我为您提供的详细解答：

首先，我们需要明确一个基本原则：当违法建筑人去世后，一般不再直接对其进行行政处罚。这是因为行政处罚的对象是实施了违反行政法律法规的单位或个人，而一旦违法人死亡，其作为法律主体的资格也随之消亡，无法再承担行政责任或接受相应的行政处罚。这一原则在《中华人民共和国行政处罚法》中虽未直接提及违法人死亡的情形，但从立法目的和法律精神来看，是得到广泛认可的。

接下来，我们分析违法人去世后可能涉及的法律责任和后续处理：

1. 民事赔偿责任：

   • 如果违法建筑人的违法行为造成了他人人身伤害或财产损失，其遗产继承人需要在继承遗产的范围内承担相应的民事赔偿责任。这意味着，虽然违法人去世了，但其违法行为带来的后果并不会因此消失，遗产继承人需要承担起相应的责任。

2. 行政机关的处理决定：

   • 对于违法建筑人生前存在的违法行为，如环境违法行为等，并在死后被发现的情况，相关部门可以依法作出处理决定。这些决定会明确违法事实和应受到的处罚，并公开相关信息以起到警示和教育作用。虽然这些处罚无法直接对违法人实施，但它们对于维护社会秩序和公共利益具有重要意义。

3. 刑事责任的追究：

   • 如果违法行为构成犯罪，即使犯罪嫌疑人（即违法建筑人）已经死亡，根据《中华人民共和国刑事诉讼法》的规定，也不追究其刑事责任。但是，如果已经追究的，应当撤销案件、不起诉、终止审理或宣告无罪。这一规定体现了法律对刑事责任追究的严格性和公正性。

在实际操作中，行政机关通常会停止对已故违法人实施行政处罚程序。然而，这并不意味着其生前的违法行为可以被忽视或逃避法律责任。相反，相关部门会依法进行调查和处理，确保违法行为的后果得到妥善处理，并维护社会秩序和公共利益。

综上所述，违法建筑人去世后，虽然一般不再对其进行行政处罚，但其生前的违法行为仍可能受到法律的调查和处理，且其遗产继承人需承担相应责任。这一原则既体现了法律的公正性，也兼顾了实际情况的可操作性。希望这一解答能够对您有所帮助。如果您还有其他问题或需要进一步的法律咨询，请随时告诉我。