结论：是否需要给钱取决于你使用饭卡的行为性质以及饭卡所有者的意愿，具体分析如下：

1. 若饭卡所有者同意你使用：

   • 法律背景：在此情况下，你的使用行为是基于饭卡所有者的明确同意，构成了一种借用或赠与的法律关系。借用关系中，你负有按照约定使用并归还饭卡的义务（若约定归还）；赠与关系中，饭卡的所有权转移至你，你无需归还饭卡，但若饭卡内有余额，是否需支付对应金额则取决于双方的具体约定。
   • 法律建议：若饭卡所有者同意你无偿使用，且饭卡内余额充足，你无需额外支付费用，但应尊重饭卡所有者的意愿，不得擅自将饭卡转借他人或用于其他非约定用途。若饭卡所有者要求你支付饭卡内余额对应的费用，你应按照约定支付。

2. 若饭卡所有者不同意你使用，但你仍使用了：

   • 法律背景：在此情况下，你的使用行为可能构成不当得利或盗窃（视具体情节轻重而定）。不当得利是指无法律依据而获得利益，致使他人受损失的事实；盗窃则是指以非法占有为目的，秘密窃取数额较大的公私财物或者多次秘密窃取公私财物的行为。
   • 法律后果：
     • 不当得利：若饭卡所有者发现并要求你返还饭卡内余额或要求你支付对应费用，你应予以返还或支付，否则可能面临民事诉讼的风险。
     • 盗窃：若你的行为被认定为盗窃，且数额较大或情节严重，你可能面临刑事处罚，包括但不限于有期徒刑、拘役或罚金等。
   • 法律建议：若你未经饭卡所有者同意而使用了其饭卡，应立即停止使用，并主动与饭卡所有者沟通，协商解决此事。若饭卡所有者要求你支付费用或返还余额，你应积极配合，以避免不必要的法律纠纷。

进一步思考：

• 在日常生活中，我们应尊重他人的财产权，未经允许不得擅自使用他人的财物。若需使用他人的财物，应事先征得对方的同意，并明确双方的权利和义务。
• 若因使用他人财物而引发纠纷，应首先尝试通过协商解决；若协商无果，可寻求法律途径解决，但应做好充分的法律准备和证据收集工作。

如有任何疑问或需要进一步的法律帮助，请直接向我咨询。