结论：仅根据您目前所描述的情况，无法直接判定剩余的一万元是否构成诈骗，这需要结合更多具体事实和证据来综合判断。不过，我可以从法律角度为您详细分析这个问题。

法律分析：

1. 诈骗罪的构成要件：

   • 诈骗罪要求行为人以非法占有为目的，通过虚构事实或隐瞒真相的方法，骗取数额较大的公私财物。
   • 在您的情况下，关键在于对方是否从一开始就具有非法占有您钱财的目的，以及是否通过虚构事实或隐瞒真相的手段来获取您的钱财。

2. 关于剩余一万元的性质：

   • 如果对方在收取您的三万元时，就明确表示或暗示能够为您办事，但实际上并无此能力或意图，且事后未退还全部款项，那么这部分未退还的款项（包括剩余的一万元）可能构成诈骗。
   • 如果对方在收取款项后，确实尝试为您办事，但由于某些原因（如不可抗力、对方能力不足等）未能办成，且事后退还了部分款项，那么剩余的一万元可能更倾向于被视为民事纠纷中的债务问题，而非诈骗。

3. 证据的重要性：

   • 在判断是否构成诈骗时，证据是至关重要的。您需要收集并保留所有与对方交往的记录，包括转账记录、聊天记录、通话录音等，这些证据将有助于证明对方的行为是否构成诈骗。
   • 如果对方有书面承诺或协议，那么这些文件也将是判断案件性质的重要依据。

4. 可能的法律后果：

   • 如果对方的行为被认定为诈骗，那么他将面临刑事责任的追究，包括可能的有期徒刑、罚金等。
   • 如果对方的行为被认定为民事纠纷，那么您可能需要通过民事诉讼来追讨剩余的款项，并可能要求对方承担违约责任或赔偿责任。

建议：

• 我建议您先尝试与对方沟通，了解剩余一万元未退还的具体原因，并要求对方给出明确的退还计划。
• 如果沟通无果，您可以考虑收集相关证据，并向当地公安机关报案，由公安机关进行调查取证，以确定对方的行为是否构成诈骗。
• 同时，您也可以咨询专业律师（比如我），获取更具体的法律建议和帮助，以便更好地维护自己的合法权益。

额外提醒：

• 在日常生活中，涉及金钱交易时，请务必保持谨慎，尽量签订书面协议或合同，以明确双方的权利和义务。
• 如果遇到可疑情况或对方行为异常，请及时报警并寻求法律帮助。

希望以上分析能对您有所帮助。如果您有任何其他问题或需要进一步的法律咨询，请随时向我提问。