结论：针对您描述的情况，能否起诉要求对方退还部分款项，主要取决于您与对方之间的法律关系性质以及款项的性质。以下分情况讨论：

1. 如果双方构成委托合同关系：

   • 法律分析：若您委托对方办理事务，并支付了相应费用，双方之间形成了委托合同关系。根据《中华人民共和国民法典》的相关规定，委托合同的双方可以约定报酬，但如果报酬明显高于市场合理水平或对方未按照约定完成委托事项，您有权要求调整报酬或退还多余部分。
   • 建议：您可以收集证据证明双方存在委托关系、约定报酬的金额以及对方完成事务的情况，然后向法院提起诉讼，要求对方退还多余报酬。

2. 如果双方构成不当得利关系：

   • 法律分析：如果对方收取的款项没有合法依据，或者虽然原本有合法依据但后来该依据丧失（如事务未办成或报酬过高），则对方的行为可能构成不当得利。根据《中华人民共和国民法典》的规定，因他人没有法律根据，取得不当利益，受损失的人有权请求其返还不当利益。
   • 建议：您可以收集证据证明对方收取的款项没有合法依据或依据已丧失，然后向法院提起诉讼，要求对方返还不当得利。

3. 如果涉及违法或犯罪行为：

   • 法律分析：如果对方以办事为名收取高额费用，实际上并未提供相应服务或存在欺诈行为，则可能涉嫌违法或犯罪。例如，如果对方以非法占有为目的，虚构事实或隐瞒真相，骗取您财物，则可能构成诈骗罪。
   • 建议：在这种情况下，您应立即向公安机关报案，由公安机关进行调查处理。如果对方的行为确实构成犯罪，您可以在刑事诉讼过程中提起附带民事诉讼，要求对方赔偿您的损失。

额外建议：

• 收集证据：无论选择哪种法律途径，收集证据都是关键。您应尽可能收集与对方之间的通信记录、转账记录、合同或协议等证据，以证明您的主张。
• 咨询专业律师：虽然我在这里为您提供了一些基本的法律分析，但每个案件的具体情况都有所不同。因此，在采取任何法律行动之前，我建议您咨询专业律师，以便获得更具体、更个性化的法律建议。不过，既然您已经向我咨询，我会尽我所能为您提供帮助。

可能面临的法律后果：

• 如果法院认定对方构成不当得利或违约，对方可能需要退还多余款项或赔偿您的损失。
• 如果对方的行为构成犯罪，除了退还非法所得外，还可能面临刑事处罚。

希望以上分析能对您有所帮助。如果您有任何进一步的问题或需要更具体的法律建议，请随时向我咨询。