行政处罚的违法责任主体主要是指违反行政管理秩序，依法应当承担行政处罚责任的公民、法人或者其他组织。以下是对这一结论的详细阐述：
公民（自然人）：
- 公民作为行政处罚的违法责任主体，包括我国公民以及境内的外国人、外国组织、无国籍人。当公民违反行政管理秩序时，如违反交通规则、环保规定等，将依法承担行政处罚责任。
法人：
- 法人是指依法成立，具有民事权利能力和民事行为能力，依法独立享有民事权利和承担民事义务的组织。在行政处罚中，法人作为违法责任主体，主要包括有限责任公司、股份有限公司、事业单位、社会团体等。当法人违反行政管理秩序时，如企业违法排污、虚假宣传等，将依法承担行政处罚责任。
其他组织：
- 其他组织是指合法成立、有一定的组织机构和财产，但又不具备法人资格的组织。这些组织在行政处罚中也可能成为违法责任主体，如个人独资企业、合伙企业、中外合作经营企业等。当这些组织违反行政管理秩序时，也将依法承担行政处罚责任。
此外，还有一些特殊情形的违法责任主体，如：
- 无证照主体：对于无证照经营的主体，虽然其本身不具有合法身份，但当其违反行政管理秩序时，仍应以其实际经营者作为违法责任主体进行处罚。
- 擅自设立的分支机构：对于擅自设立的分支机构，其违法行为应由设立该分支机构的法人承担行政处罚责任。
在行政处罚中，确定违法责任主体是案件办理的关键问题之一。行政机关在作出行政处罚决定时，必须准确认定违法责任主体，确保处罚的合法性和公正性。同时，对于不同类型的违法责任主体，行政机关也应根据其具体情况和违法行为的性质、情节等因素，依法作出相应的行政处罚决定。
如果你在这方面有任何具体问题或需要进一步的法律帮助，请直接向我咨询。