单位经济裁员时，作为无固定期限员工，您并不能直接拒绝不走，但具体是否需要离职取决于单位裁员的合法性。以下从不同角度为您详细分析：

1. 单位合法裁员的情况

• 法律依据：根据《劳动合同法》的相关规定，用人单位在符合破产重整、生产经营发生严重困难等法定情形下，可以进行经济性裁员，包括与无固定期限劳动合同的劳动者解除合同。但用人单位必须履行提前三十日向工会或者全体职工说明情况、听取工会或者职工的意见、并向劳动行政部门报告等程序。
• 员工权利：若单位按照法定程序进行经济性裁员，且您不存在职业病、工伤、孕期等法定不得解除劳动合同的情形，那么单位的裁员行为是合法的。此时，您应当按照规定办理离职手续，不能直接拒绝。
• 实例说明：如某公司因经营困难决定裁员，小朱与公司签订的是无固定期限劳动合同。公司按照法定程序，提前三十日向工会说明情况、听取意见，并向劳动行政部门报告后，通知小朱被列入裁员名单。由于小朱并不存在法定不得解除劳动合同的情形，因此他应当按规定办理离职。

2. 单位违法裁员的情况

• 法律依据：若单位裁员时未履行法定程序，如未提前三十日向工会或者全体职工说明情况、未听取意见等，则构成违法裁员。
• 员工权利：在单位违法裁员的情况下，您有权拒绝解除合同，并可以要求单位继续履行合同。若您不要求继续履行合同或者合同已经无法继续履行，单位应当按照经济补偿标准的二倍向您支付赔偿金。经济补偿按您在本单位工作的年限计算，每满一年支付一个月工资的标准。
• 实例说明：如小胡与某公司签订了无固定期限劳动合同。公司以经营困难为由进行裁员，但未提前三十日向工会或者全体职工说明情况、听取意见，便通知小胡解除劳动合同。由于公司裁员不合法，小胡有权拒绝解除合同，并可以要求公司继续履行合同或者支付赔偿金。

建议与提醒

• 核实裁员合法性：在接到裁员通知时，您应当首先核实单位裁员的合法性，包括是否履行了法定程序、是否存在违法裁员的情形等。
• 保留证据：为了维护自己的合法权益，您应当保留与裁员相关的所有证据，如裁员通知、工资单、劳动合同等。
• 及时咨询：若您对裁员的合法性存在疑问或者认为自己的权益受到了侵害，应当及时咨询专业律师（比如我），以便得到更具体的法律建议和帮助。

总结来说，作为无固定期限员工，在单位经济裁员时，您并不能直接拒绝不走。但具体是否需要离职，取决于单位裁员的合法性。若单位合法裁员，您应当按照规定办理离职；若单位违法裁员，您有权拒绝并要求单位继续履行合同或者支付赔偿金。