是否构成诈骗，不能仅凭退还金额与未退还金额来判断，需要结合具体行为和主观意图进行综合分析。以下从不同角度进行详细阐述：
一、诈骗罪的构成要件
诈骗罪是指以非法占有为目的，用虚构事实或者隐瞒真相的方法，骗取数额较大的公私财物的行为。其构成要件包括：
- 主观方面：具有非法占有的目的。
- 客观方面：实施了虚构事实或隐瞒真相的行为，使对方产生错误认识，并基于错误认识处分了财产。
- 数额要求：骗取的财物数额较大。根据相关司法解释，诈骗公私财物价值三千元至一万元以上、三万元至十万元以上、五十万元以上的，应当分别认定为刑法第二百六十六条规定的“数额较大”、“数额巨大”、“数额特别巨大”。
二、具体行为分析
如果办工作过程中存在虚构事实或隐瞒真相：
- 例如，承诺能够通过不正当手段（如行贿、走后门等）为对方办理工作，但实际上并未实施或无法实施这些手段，而是将款项用于个人消费或其他用途。
- 在这种情况下，如果未退还的5万元达到了诈骗罪的数额要求，且行为人具有非法占有的目的，那么可能构成诈骗罪。
如果办工作过程中未虚构事实或隐瞒真相：
- 例如，双方明确约定了办理工作的费用、流程和时间，且行为人确实按照约定进行了操作，但由于某些原因（如对方条件不符合、政策变化等）未能成功办理。
- 在这种情况下，即使未退还部分款项，也不一定构成诈骗罪。因为行为人并未实施虚构事实或隐瞒真相的行为，且可能具有退还款项的意愿或正在进行退还操作。
三、法律建议
收集证据：
- 如果您认为对方的行为构成诈骗，建议尽快收集相关证据，如转账记录、聊天记录、合同协议等，以证明对方的行为和您的损失。
报警处理：
- 如果证据充分且您认为对方的行为已经构成犯罪，可以向公安机关报案，由公安机关进行调查取证并依法处理。
民事诉讼：
- 如果对方的行为不构成犯罪，但您认为对方应当退还未退还的款项，可以通过民事诉讼的方式要求对方退还。在诉讼过程中，您需要提供充分的证据证明您的主张。
四、可能的法律后果
如果构成诈骗罪：
- 行为人可能面临刑事处罚，包括有期徒刑、拘役或罚金等。同时，您作为被害人有权要求行为人退还骗取的财物。
如果不构成诈骗罪：
- 行为人可能不需要承担刑事责任，但您仍然有权通过民事诉讼的方式要求对方退还未退还的款项。如果对方拒绝退还，您可以申请法院强制执行。
如有进一步疑问或需要法律帮助，请直接向我咨询。我将根据您的具体情况提供专业的法律意见和帮助。