结论：亲爹借给自己的钱是否需要归还，这主要取决于借款时双方是否明确约定了还款事宜，以及是否存在其他特殊情况。以下从不同角度进行分析：
一、存在明确借款约定的情况
法律义务：
- 如果亲爹在借款时明确表示这是借款，并且双方约定了还款期限、利息等条款，那么从法律上讲，你作为借款人就有义务按照约定归还借款。这不仅是道德上的要求，也是法律上的义务。
证据留存：
- 在这种情况下，最好有书面证据（如借条、借款合同等）来证明借款事实及还款约定。这样，在发生纠纷时，可以凭借这些证据来维护自己的权益。
二、未明确约定还款事宜的情况
家庭关系与道德考量：
- 如果亲爹在借款时并未明确约定还款事宜，或者只是以口头形式表示“不用还”，那么从法律上讲，你可能没有明确的还款义务。但是，从家庭关系和道德层面考虑，如果亲爹经济状况不佳或者需要资金支持，你作为子女，应当考虑归还借款或者给予一定的经济帮助。
潜在法律风险：
- 即使亲爹最初表示不用还款，但如果未来他改变主意或者家庭关系发生变化，他仍然有可能通过法律途径要求你归还借款。因此，即使没有明确的还款约定，也建议你在经济条件允许的情况下，考虑归还借款或者与亲爹达成书面协议，明确借款性质及还款事宜。
三、特殊情况下的处理
亲爹经济状况极差：
- 如果亲爹经济状况极差，甚至无法维持基本生活，那么从人道主义和家庭责任的角度出发，你应当考虑归还借款或者给予更多的经济支持。在这种情况下，法律义务可能退居次要地位，而家庭责任和道德考量则显得更为重要。
借款用于非法目的：
- 如果亲爹借款是用于非法目的（如赌博、吸毒等），那么从法律上讲，这种借款行为是无效的。你不仅没有还款义务，还可以向相关部门举报亲爹的违法行为。但是，在实际操作中，需要谨慎处理，避免因为家庭关系而引发不必要的纠纷。
建议与总结：
- 在处理亲爹借款问题时，建议首先明确借款性质及还款事宜，最好有书面证据来证明。
- 如果经济条件允许，且亲爹需要资金支持，建议归还借款或者给予一定的经济帮助。
- 如果遇到特殊情况（如亲爹经济状况极差、借款用于非法目的等），需要谨慎处理，并考虑咨询专业律师的意见。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询。