结论：收受礼金1万元后及时退回，一般情况下不算违纪，但具体是否构成违纪需结合实际情况判断。违纪款的处理方式也需根据具体情况来确定。
分析说明：
关于是否违纪：
- 一般情况：如果收受礼金后，在合理时间内及时退回，且没有利用职务上的便利为对方谋取利益，那么这种行为通常不会被视为违纪。因为违纪行为往往伴随着对职务行为的滥用或不当利用，而及时退回礼金表明行为人没有意图通过收受礼金来获取不正当利益。
- 特殊情况：然而，如果收受礼金的行为本身已经违反了相关规定（如某些单位或行业有明确的禁止收受礼金的规定），或者退回礼金的行为是在被调查或发现后才进行的，那么这种行为可能仍然会被视为违纪。此外，如果收受礼金的同时存在其他违纪行为（如利用职务之便为对方谋取利益），那么即使礼金被退回，也可能构成违纪。
关于违纪款的处理：
- 已退回的礼金：如果礼金已经被及时退回，且没有构成违纪，那么通常不需要对这部分礼金进行进一步的处理。因为退回行为已经表明了行为人的态度，且没有造成实际损失。
- 未退回或构成违纪的礼金：如果礼金未退回，或者虽然退回但已经构成违纪，那么根据相关规定，这部分礼金可能需要被没收、上缴国库或采取其他处理措施。同时，违纪行为人还可能面临纪律处分，如警告、记过、降级、撤职等。
特殊场景：
- 在某些特定行业或单位中，可能有更严格的禁止收受礼金的规定。在这些情况下，即使礼金被退回，也可能因为违反了相关规定而构成违纪。因此，在判断是否违纪时，需要参考具体行业或单位的规定。
行动建议：
- 如果您或您身边的人遇到了类似的情况，建议首先了解所在单位或行业的相关规定，以判断收受礼金的行为是否构成违纪。
- 如果礼金已经被退回，但仍然担心可能构成违纪，可以主动向相关部门或领导说明情况，以消除误解或疑虑。
- 如果确实构成了违纪，建议积极配合调查，主动上缴违纪所得，并接受相应的纪律处分。
法律背景：
- 违纪行为的认定通常依据的是单位或行业的内部规定，以及国家的相关法律法规。在判断是否违纪时，需要综合考虑行为人的主观意图、行为性质、后果等因素。
- 对于违纪款的处理，通常遵循“没收、上缴国库”的原则，以维护公共利益和社会秩序。
如果您有进一步的法律问题或需要更详细的法律建议，请直接向我咨询。