抚养费给不起并不直接决定能否要回抚养权。法院在判定孩子抚养权归属时，会全面综合地考虑各类因素，经济能力仅仅是其中的一个方面。以下是对这一问题的详细分析：
经济状况非决定性因素：
- 即便支付抚养费存在现实困难，但若存在其他不利于孩子成长的因素，如不良生活习惯、缺乏稳定的居住环境等，要回抚养权就会面临较大挑战。
遵循有利于孩子成长原则：
- 如果能充分证明自身虽然经济上暂时困难，但在情感陪伴和教育引导等方面具有明显优势，比如有更多的时间和精力陪伴孩子，能给予孩子足够的关爱和支持，且对方存在不利于孩子身心健康的情况，同时有合理的抚养计划以及切实可行的改善经济状况的措施，那么就可以向法院提出变更抚养权的申请。
遵循法定程序：
- 要回抚养权需要通过向法院提起变更抚养权诉讼，法院会根据具体的实际情况，在充分考量各种因素后作出公正的判决。
因此，抚养费给不起并不是要回抚养权的直接决定因素。关键在于是否能证明自身在情感陪伴、教育引导等方面对孩子更有利，以及是否有合理的抚养计划和改善经济状况的措施。同时，也需要遵循法定程序，通过向法院提起诉讼来争取抚养权。如果你在这方面有任何疑问或需要进一步的法律帮助，请直接向我咨询。