结论：依法不应当或者不给予行政处罚时，是否不予立案并非一概而论，而是需要根据具体情况和法律法规来判断。以下是对此问题的详细分析：
一、一般情况：不予行政处罚通常无需立案
“不予行政处罚”的含义：
- “不予行政处罚”指的是当事人在特定情况下虽然有违法行为，但由于违法情节轻微、及时纠正等法定原因，行政机关决定不对其进行行政处罚。
无需立案的理由：
- 既然已经确定不对当事人进行行政处罚，那么通常就没有必要再进行立案这一程序。立案主要是为后续的调查取证、审查决定等工作奠定基础，而“不予行政处罚”已经是对案件处理结果的直接决定。
特殊情况下的记录或备案：
- 在某些情况下，即使决定不予行政处罚，行政机关也可能需要对当事人的行为进行一定的记录或备案，但这并不等同于正式的立案程序。
二、特殊情形：需要立案进行调查核实
规范执法程序的要求：
- 立案是行政处罚程序的起始环节，对于涉嫌违法行为的案件，无论最终是否给予行政处罚，都应当先予以立案，以确保执法工作的规范性和严肃性。通过立案程序，对案件进行登记、编号，明确案件的基本信息和调查方向。
全面调查核实的需要：
- 在案件初期，行政机关可能无法准确判断是否应当给予行政处罚。只有经过全面深入的调查，获取充分的证据，了解清楚案件的全部事实和相关情节后，才能作出准确的决定。因此，在某些情况下，即使初步判断可能存在不予处罚的情形，也需要立案并进一步调查核实。
具体案例说明：
- 例如，在市场监管领域，执法人员发现某商家涉嫌销售过期食品。即使初步判断过期食品数量极少且未造成实际危害后果，可能属于不予处罚的情形，但仍然需要按照规定进行立案，启动正式的调查程序，以确保执法的规范性和全面性。
三、不予行政处罚的具体情形
没有违法事实：
- 经初步调查核实，不存在违反行政管理秩序的客观行为或情形。
违法行为已过追究时效：
- 违法行为在一定期限内未被发现，超过了法律规定的二年（或特殊情况下五年）的追究时效。
违法主体不适格：
不属于本机关管辖：
- 该违法行为不属于本行政机关的职权范围或地域管辖范围。
违法行为显著轻微并及时改正，没有造成危害后果：
- 违法行为的性质、情节极其轻微，并且违法者在发现问题后及时主动进行了改正，未造成损害或不良影响。
证据不足：
- 在初步调查阶段，缺乏足够的证据来证明违法行为的存在或无法达到法定的证明标准。
涉及特定人群的特殊情况：
- 如不满十四周岁的人有违法行为的、精神病人在不能辨认或者不能控制自己行为时有违法行为的等，根据法律规定不予行政处罚。
四、法律建议
对于行政机关：
- 在决定是否立案时，应严格遵循法律法规的规定，确保执法的公正性和合理性。对于不予行政处罚的情形，应明确告知当事人并说明理由，以保障当事人的合法权益。
对于当事人：
- 如果认为自己的行为不应受到行政处罚，可以积极向行政机关说明情况，提供相关证据，争取不予立案或不予处罚的决定。同时，也有权对行政机关的立案或处罚决定提出异议或申请行政复议、提起行政诉讼等。
总结：依法不应当或者不给予行政处罚时，是否不予立案取决于具体情况和法律法规的规定。在一般情况下，由于已经确定不对当事人进行行政处罚，因此无需立案；但在某些特殊情形下，如为了规范执法程序或全面调查核实案件事实，仍然需要立案进行调查。如有任何疑问或需要进一步的法律帮助，请随时向我咨询。