未签订劳动合同，用人单位确实需要承担行政责任。以下是对此问题的详细分析：
法律依据：
- 根据《中华人民共和国劳动合同法》第八十二条，用人单位自用工之日起超过一个月不满一年未与劳动者订立书面劳动合同的，应当向劳动者每月支付二倍的工资。这一条款虽然直接规定的是经济赔偿责任，但此赔偿义务具有强制性，可视为广义行政责任的一种体现。
- 同时，《劳动保障监察条例》等相关法规也赋予了劳动行政部门对用人单位遵守劳动合同制度情况进行监督检查的权力，并对违法行为规定了相应的行政处罚措施。
行政责任的具体表现：
- 责令改正：劳动行政部门发现用人单位未依法签订劳动合同的，有权责令其限期改正，要求用人单位依法与劳动者补签劳动合同。
- 行政处罚：若用人单位逾期未改正或拒不改正的，劳动行政部门可根据相关法律法规对其处以罚款等行政处罚。具体罚款数额和处罚方式由法律法规明确规定。在某些地区，对于持续违法且情节严重的用人单位，可能会面临高额罚款甚至更严厉的处罚。
其他关联影响：
- 用人单位不签劳动合同还可能导致在劳动争议中处于不利地位，因为缺乏书面合同明确双方权利义务，一旦发生纠纷，用人单位需承担更多举证责任。
- 此外，不签劳动合同还可能影响企业的信用评级、招投标资格以及政府扶持政策的享受等。
综上所述，用人单位应当严格遵守劳动法律法规，及时与劳动者签订书面劳动合同，以避免承担不必要的法律责任。如果用人单位存在未签订劳动合同的情况，劳动者可以向劳动行政部门投诉举报，维护自己的合法权益。