用人单位扣押劳动者的身份证是明确的违法行为。劳动者有权要求用人单位限期退还，并可能依法追究其法律责任。

首先，《中华人民共和国劳动合同法》第九条明确规定：“用人单位招用劳动者，不得扣押劳动者的居民身份证和其他证件，不得要求劳动者提供担保或者以其他名义向劳动者收取财物。”这一条款是保障劳动者个人权益的重要法律规定，明确指出了用人单位在招聘过程中不得采取的行为。

进一步地，《中华人民共和国劳动合同法》第八十四条对违反上述规定的行为进行了处罚规定：“用人单位违反本法规定，扣押劳动者居民身份证等证件的，由劳动行政部门责令限期退还劳动者本人，并依照有关法律规定给予处罚。”这表明，如果用人单位违反了不得扣押身份证的规定，将面临劳动行政部门的责令改正和可能的法律处罚。

同时，《中华人民共和国居民身份证法》第十五条第三款也强调了居民身份证的不可扣押性：“任何组织或者个人不得扣押居民身份证。但是，公安机关依照《中华人民共和国刑事诉讼法》执行监视居住强制措施的情形除外。”这一条款从更广泛的角度规定了居民身份证的保护，明确了除特定执法情形外，任何组织或个人都不得扣押身份证。

劳动者在遭遇用人单位扣押身份证的情况时，可以要求用人单位立即返还身份证。若用人单位拒绝返还，劳动者可以向当地劳动行政部门投诉，劳动行政部门将责令用人单位限期退还，并依据相关法律规定对其进行处罚。此外，劳动者也可以直接向公安机关报案，寻求公安机关的帮助，公安机关会责令扣押者立即返还身份证，并给予相应的处罚。

综上所述，用人单位无权扣押员工的身份证，劳动者在遇到此类情况时，应勇敢站出来维护自己的权益，通过合法途径寻求帮助和救济。如果你在这方面遇到了问题，可以直接向我咨询，我会为你提供专业的法律支持。