如果行政机关责令当事人退还某物或某款项，但对方不退还，您可以考虑以下几种途径来解决问题：

1. 申请行政机关进一步处理：

   • 行政机关在作出责令退还的决定后，如果当事人不履行，行政机关有权采取进一步的措施来确保决定的执行。这可能包括加处罚款、查封、扣押等强制措施，或者将案件移送至法院进行强制执行。
   • 建议：您可以向作出责令退还决定的行政机关咨询，了解他们是否会采取进一步的执行措施，并请求他们加快处理进程。

2. 提起行政诉讼：

   • 如果您认为行政机关的责令退还决定存在错误或不当，或者行政机关未依法履行其职责，您可以向法院提起行政诉讼，要求法院撤销或变更该决定，或者判决行政机关履行其职责。
   • 法律背景：根据《中华人民共和国行政诉讼法》的相关规定，公民、法人或者其他组织认为行政机关和行政机关工作人员的行政行为侵犯其合法权益，有权依照本法向人民法院提起诉讼。
   • 建议：在提起行政诉讼前，建议您先咨询专业律师，评估案件的胜诉可能性，并准备好相关的证据材料。

3. 申请法院强制执行：

   • 如果行政机关已经作出了责令退还的决定，并且该决定已经生效，但当事人仍然不履行，您可以向法院申请强制执行。
   • 法律流程：根据《中华人民共和国行政强制法》的相关规定，行政机关作出强制执行决定前，应当事先催告当事人履行义务。催告书送达十日后当事人仍未履行义务的，行政机关可以向所在地有管辖权的人民法院申请强制执行。如果您作为利害关系人，也可以直接向法院申请强制执行。
   • 建议：在申请法院强制执行前，确保您已经获得了行政机关作出的生效责令退还决定，并准备好相关的申请材料。

4. 考虑民事诉讼途径：

   • 如果责令退还的决定涉及的是民事权益的争议，例如因合同、侵权等行为导致的财产返还问题，您也可以考虑通过民事诉讼途径来解决。
   • 法律背景：根据《中华人民共和国民事诉讼法》的相关规定，因合同纠纷提起的诉讼，由被告住所地或者合同履行地人民法院管辖。因侵权行为提起的诉讼，由侵权行为地或者被告住所地人民法院管辖。
   • 建议：在决定提起民事诉讼前，建议您先评估案件的证据充分性、诉讼成本以及可能的诉讼结果，并咨询专业律师的意见。

在处理此类问题时，您需要注意以下几点：

• 保留证据：确保您保留了所有与责令退还决定相关的证据材料，包括行政机关的决定书、催告书、当事人的不履行证明等。
• 及时行动：不要拖延时间，及时采取行动来维护自己的合法权益。
• 咨询专业律师：在处理复杂的法律问题时，咨询专业律师的意见是非常重要的。他们可以提供专业的法律建议和帮助您制定合适的诉讼策略。

如果您在处理此类问题时遇到任何困难或疑问，可以直接向我咨询。我作为一名专业律师，将竭诚为您提供法律帮助。