结论：是否需要赔钱，取决于您与快递公司、卖家之间的具体约定以及快递被拿走的具体情况。以下分情况详细说明：

一、若您已明确拒收且快递公司确认，快递被他人拿走，您通常无需赔钱

1. 拒收流程：当您决定拒收快递时，应明确告知快递员或快递公司您的拒收意愿，并确保快递公司记录这一信息。此时，快递的物流状态应更新为“拒收”或类似状态。

2. 快递公司责任：在您明确拒收后，快递公司有责任确保快递的安全，直至其被退回卖家或按照您的指示进行其他处理。如果快递在快递公司保管期间被他人拿走，这通常属于快递公司的过失，您无需承担赔偿责任。

3. 卖家责任：如果快递公司已确认拒收并将快递退回卖家，但卖家在收到退回的快递前或处理过程中出现问题（如快递在卖家处丢失），这通常属于卖家的责任，您同样无需赔钱。

二、若您未明确拒收或快递公司未确认，快递被他人拿走，您可能需要承担一定责任

1. 未明确拒收：如果您只是口头表示拒收，但未与快递公司或卖家进行明确确认，且快递公司未记录您的拒收意愿，那么快递在运输或派送过程中被他人拿走，您可能需要承担一定的责任。因为此时，从法律上讲，您并未完成拒收的法律行为，快递仍被视为在您的接收范围内。

2. 快递公司未确认：即使您明确表示了拒收，但如果快递公司未及时记录或确认这一信息，导致快递在运输或派送过程中出现问题，您也可能需要承担一定的责任。不过，这种情况下，您通常可以向快递公司主张其未履行合同义务，要求其承担相应的赔偿责任。

三、特殊情况下的责任划分

1. 快递被冒领：如果快递被他人冒领，且您能够证明自己并未收到快递（如通过快递公司的签收记录、物流信息等），那么您通常无需承担赔偿责任。此时，您应尽快与快递公司或卖家联系，说明情况并要求他们协助追回快递或进行赔偿。

2. 您存在过错：如果您在拒收过程中存在过错（如未及时告知快递公司拒收意愿、未提供准确的收货地址等），导致快递被他人拿走，那么您可能需要承担一定的责任。不过，这种情况下，您的责任通常会被限制在一定范围内，具体取决于您的过错程度以及快递被拿走所造成的损失。

建议：在遇到此类问题时，建议您首先与快递公司和卖家进行沟通，明确各自的责任和义务。如果无法达成一致意见，您可以考虑通过法律途径解决纠纷。同时，为了保障自己的权益，建议您在拒收快递时务必与快递公司或卖家进行明确确认，并保留好相关证据（如拒收记录、物流信息等）。如有任何疑问或需要进一步的法律帮助，请随时向我咨询。