限制他人人身自由的行政处罚认定要点主要包括以下几个方面：
行为性质：
- 限制他人人身自由的行为必须是非法的，即没有法律依据或超出法律授权的范围。合法的限制，如司法机关依法对犯罪嫌疑人的拘留、逮捕等，不属于行政处罚的范畴。
- 行为必须具有强制性，即通过物理手段、威胁、恐吓等方式使他人无法自由行动。
行为主体：
- 实施限制他人人身自由行为的主体通常是行政机关或其工作人员，如公安机关、城管部门等。非行政机关或个人非法限制他人人身自由，可能构成犯罪，如非法拘禁罪。
行为对象：
- 行为对象必须是特定的自然人，即具有生命、健康、自由等基本权利的个体。限制法人或其他组织的人身自由在法律上是不成立的，因为它们不具备这些基本权利。
行为目的与后果：
- 行为的目的通常是为了达到某种行政管理的目的，如维护社会秩序、保障公共安全等。但无论目的如何，非法限制他人人身自由都是违法的。
- 行为的后果是限制了他人的人身自由，即剥夺了他人自由行动的权利。这种限制可以是暂时的，也可以是长期的，但无论时间长短，都是违法的。
法律依据与程序：
- 行政机关在限制他人人身自由时，必须严格依照法律规定的程序进行。例如，公安机关在拘留犯罪嫌疑人时，必须出示拘留证，并在规定时间内通知其家属。
- 如果行政机关没有法律依据或违反法定程序限制他人人身自由，那么这种行为就是违法的，应当受到行政处罚或承担其他法律责任。
在认定限制他人人身自由的行政处罚时，还需要注意以下几点：
- 区分行政处罚与刑事处罚：非法限制他人人身自由可能同时构成行政违法和刑事犯罪。如果行为情节严重，如持续时间较长、造成严重后果等，可能构成非法拘禁罪等刑事犯罪，需要依法追究刑事责任。
- 保障被限制人的合法权益：在限制他人人身自由的过程中，行政机关必须保障被限制人的合法权益，如提供必要的生活条件、允许其与外界联系等。如果行政机关违反这些规定，可能构成滥用职权或玩忽职守等违法行为。
- 及时审查与解除限制：行政机关在限制他人人身自由后，应当及时进行审查，如果发现限制行为没有法律依据或违反法定程序，应当立即解除限制，并依法追究相关责任人的法律责任。
举例说明：
假设某城管部门在执法过程中，未经合法程序将一名小贩拘留数小时，限制其人身自由。这种行为就构成了非法限制他人人身自由，因为城管部门没有法律依据或超出法律授权的范围进行拘留，且违反了法定程序。在这种情况下，小贩可以向相关部门投诉或提起行政诉讼，要求确认城管部门的行为违法，并寻求相应的赔偿。
如果您在限制他人人身自由的行政处罚认定方面遇到任何问题或需要进一步的法律帮助，请直接向我咨询。