针对您提出的“卡主行政处罚没有说退我钱怎么办”的问题，我首先明确结论：您有权要求相关部门在行政处罚后处理与您相关的财产问题，若未得到妥善处理，可以通过合法途径维权。以下是从不同角度为您进行的分析：
一、行政处罚与财产处理的关系
行政处罚是行政机关对违反行政管理秩序的行为所给予的惩戒，其目的在于维护社会秩序和公共利益。在行政处罚过程中，若涉及您的财产（如被扣押、冻结或没收的财物），行政机关应当依法进行处理，并在处罚决定中明确说明。若处罚决定中未提及财产处理，您有权要求行政机关进行说明或补充处理。
二、您应采取的维权步骤
查阅处罚决定书：
- 首先，您需要仔细查阅行政处罚决定书，确认其中是否提及了与您财产相关的处理内容。
- 若决定书中未提及，您应记录下这一情况，作为后续维权的依据。
与行政机关沟通：
- 您可以主动联系作出行政处罚的行政机关，询问为何未在处罚决定中提及财产处理，并要求其给出明确答复。
- 在沟通过程中，保持冷静和理性，明确表达您的诉求和依据。
申请行政复议或提起行政诉讼：
- 若与行政机关沟通无果，或您认为行政机关的处理存在不当之处，您可以依法申请行政复议或提起行政诉讼。
- 行政复议是向作出行政处罚的行政机关的上一级机关提出申请，要求其对原处罚决定进行审查并作出决定。
- 行政诉讼则是直接向人民法院提起诉讼，要求法院对行政处罚的合法性进行审查并作出判决。
三、可能面临的法律后果及应对
若行政机关存在过错：
- 若经审查确认行政机关在行政处罚过程中存在过错（如未依法处理您的财产），则行政机关可能需要承担相应的法律责任，包括撤销原处罚决定、返还您的财产或赔偿您的损失等。
若您未及时维权：
- 若您未在法定期限内申请行政复议或提起行政诉讼，则可能会丧失通过法律途径维权的机会。因此，建议您在发现行政机关未依法处理您的财产后，及时采取行动。
四、具体建议
- 保留证据：在维权过程中，务必保留好所有与行政处罚相关的证据材料，如处罚决定书、沟通记录、财产证明等。
- 咨询专业律师：虽然我作为梁俊景律师已经为您提供了一定的法律指导，但具体案件可能涉及更多细节和法律条款。因此，在必要时，您可以考虑咨询更专业的律师以获取更全面的法律帮助。不过，就目前您提出的问题而言，我已经给出了相应的法律分析和建议。
- 关注时效：注意行政复议和行政诉讼的时效限制，确保在法定期限内提出申请或提起诉讼。
最后，若您在行政处罚后遇到财产未退还的问题，且通过上述途径仍无法解决，请直接向我咨询，我会根据您的具体情况提供进一步的法律指导和帮助。