针对你提出的问题，即“借别人手机打电话，然后归还手机时取下手机卡被处罚”的情况，我可以给出以下分析：

核心结论：此行为可能构成盗窃或侵犯他人财产权的行为，具体是否构成犯罪以及处罚的轻重，需根据具体情况和法律规定来判断。

分析说明：

1. 行为性质：

   • 当你借别人手机打电话时，手机及其附属物（包括手机卡）仍然是手机主人的财产。
   • 在未经手机主人同意的情况下，擅自取下手机卡并带走，可能构成对他人财产的非法侵占或盗窃。

2. 法律后果：

   • 如果此行为被认定为盗窃，根据盗窃的数额和情节，可能会受到相应的刑事处罚，如罚款、拘留甚至有期徒刑。
   • 即使不构成犯罪，此行为也可能构成民事侵权，手机主人有权要求你返还手机卡并赔偿因此造成的损失。

3. 特殊情况：

   • 如果手机主人明确同意你取下手机卡并带走，那么此行为就不构成盗窃或侵权。
   • 如果手机卡本身没有价值或价值极低，且你的行为没有造成手机主人其他损失，那么可能只会受到道德上的谴责，而不会承担法律责任。

4. 法律建议：

   • 在借用手机时，应尊重手机主人的财产权，不得擅自取走或损坏手机及其附属物。
   • 如果因特殊原因需要取下手机卡，应事先征得手机主人的明确同意。
   • 如果因此产生纠纷，建议双方协商解决；协商不成时，可寻求法律援助或提起诉讼。

综上所述，借别人手机打电话然后擅自取下手机卡的行为可能构成盗窃或侵权，具体法律后果需根据具体情况和法律规定来判断。建议你尊重他人的财产权，避免类似行为的发生。如果有任何法律问题或需要进一步的法律建议，请直接向我咨询。