结论：能否追回借款，取决于多种因素，包括借款事实的证据是否充分、借款人的还款能力以及诉讼时效等。仅凭对方使用您自己的卡取走借款这一事实，并不能直接决定能否追回，但可以作为证明借款事实的一个证据。
详细分析：
借款事实的证据：
- 您提到对方使用您自己的卡取走了借款，这可以作为证明借款事实的一个间接证据。但为了更充分地证明借款关系，您还需要提供其他证据，如借条、借款合同、转账记录（如果有的话，尽管这里是取款）、聊天记录或录音等，这些都能直接或间接证明借款的存在和具体金额。
- 如果只有取款记录而没有其他证据，可能会面临举证不足的风险，因为取款记录只能证明钱从您的账户中取出，但不能直接证明这笔钱是借给了对方。
借款人的还款能力：
- 即使借款事实得到证明，如果借款人没有还款能力，那么追回借款也会变得困难。在这种情况下，您可能需要考虑通过法律途径申请强制执行，但执行效果取决于借款人的财产状况。
诉讼时效：
- 根据《中华人民共和国民法典》的规定，民间借贷的诉讼时效期间为三年，自权利人知道或者应当知道权利受到损害以及义务人之日起计算。如果超过了诉讼时效期间，您可能会失去通过法律途径追回借款的权利。
- 因此，您需要确保在诉讼时效期间内提起诉讼或采取其他法律措施来维护自己的权益。
建议：
- 收集证据：尽快收集所有能证明借款事实的证据，包括取款记录、借条、借款合同、聊天记录等。
- 评估借款人还款能力：了解借款人的财产状况和还款能力，以便在必要时采取适当的法律措施。
- 考虑法律途径：如果借款事实清楚且借款人未履行还款义务，您可以考虑通过法律途径追回借款，如向法院提起诉讼或申请仲裁。
- 注意诉讼时效：确保在诉讼时效期间内采取法律措施，以免失去追回借款的权利。
后续行动：
- 如果您决定通过法律途径追回借款，建议咨询专业律师（即我本人，贾永庆律师，专注于经济纠纷、债权债务领域）以获取更具体的法律建议和帮助。
- 在采取任何法律行动之前，确保您已经充分了解了所有可能的法律后果和风险。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询。