结论：业务员是否违法以及您能否退回一万元，取决于该款项的性质、业务员的行为以及您与业务员或相关方之间的约定。以下分情况详细说明：
一、若一万元为定金
业务员行为合法性：
- 如果业务员在收取定金时，明确告知了您该款项的性质为定金，并且双方有书面或口头的约定（如购房意向书等），那么业务员收取定金的行为在法律上通常是合法的。
- 定金的作用在于担保合同的履行，如果因您的原因导致合同无法履行，定金可能不予退还；如果因业务员或卖方的原因导致合同无法履行，则应双倍返还定金。
能否退回：
- 如果业务员或卖方存在违约行为（如房源信息不实、无法提供房源等），您有权要求双倍返还定金。
- 如果您因个人原因不想继续购买房源，且没有合法理由（如业务员或卖方存在欺诈行为等），则定金可能不予退还。
二、若一万元为预付款或诚意金
业务员行为合法性：
- 预付款或诚意金通常不具有担保性质，而是作为购房意向的一种表示。业务员收取此类款项时，应明确告知您款项的性质和用途。
- 如果业务员未明确告知或存在误导行为，可能构成欺诈或不当得利。
能否退回：
- 如果双方没有明确的约定或业务员存在欺诈行为，您有权要求退回预付款或诚意金。
- 如果双方有约定且业务员未违约，退回款项可能需要根据约定来处理。例如，如果约定在特定条件下可以退回，则应按约定执行。
三、若业务员存在违法行为
业务员行为合法性：
- 如果业务员在收取款项时存在欺诈、挪用资金、非法集资等违法行为，那么其行为显然是违法的。
能否退回：
- 在这种情况下，您不仅有权要求退回款项，还可以向相关部门举报业务员的违法行为，并寻求法律救济。
- 您可能需要收集相关证据（如转账记录、聊天记录、合同等）来证明业务员的违法行为和您的损失。
四、建议与行动
与业务员或相关方沟通：
- 首先，尝试与业务员或相关方（如房产中介公司）沟通，了解款项的性质和用途，以及能否退回。
查看相关证据和约定：
- 仔细查看您与业务员或相关方之间的书面或口头约定，以及转账记录等证据，以确定您的权利和义务。
寻求法律帮助：
- 如果沟通无果或业务员存在违法行为，建议您及时咨询专业律师（即向我咨询），了解您的法律权益和可能的救济途径。
- 律师可以帮助您分析案情、收集证据、起草法律文书等，以维护您的合法权益。
总结：业务员是否违法以及您能否退回一万元，取决于多种因素。在处理此类问题时，建议您保持冷静、理性分析，并寻求专业法律帮助以维护自己的合法权益。如果您有任何疑问或需要进一步的法律咨询，请直接向我提问。