结论：您不能直接扣回借款方在租赁公司租赁的车辆。以下从多个角度为您详细分析：
一、法律角度
物权归属：
- 车辆的所有权通常归属于租赁公司，而非借款方。借款方只是基于租赁合同获得了车辆的使用权，并未取得车辆的所有权。
- 根据《中华人民共和国民法典》的相关规定，所有权人对自己的不动产或者动产，依法享有占有、使用、收益和处分的权利。因此，只有租赁公司才有权对车辆进行处分，包括扣留、收回等。
债权与物权的区分：
- 您与借款方之间存在的是债权债务关系，即您有权要求借款方按照约定偿还借款。
- 债权与物权是两种不同的民事权利。债权是请求权，即请求他人为一定行为（如偿还借款）的权利；而物权是支配权，即直接支配特定物的权利。
- 您不能因为借款方未偿还借款，就直接对属于租赁公司的车辆行使物权上的处分权，如扣留、变卖等。
非法扣留的法律后果：
- 如果您擅自扣留车辆，可能构成对租赁公司物权的侵犯，需要承担相应的法律责任，如赔偿损失、恢复原状等。
- 同时，如果您的行为被认定为非法拘禁、抢劫等犯罪行为，还可能面临刑事处罚。
二、实际操作角度
协商解决：
- 您首先可以尝试与借款方进行协商，要求其按照约定偿还借款。
- 如果借款方确实无力偿还，您可以考虑与其协商分期还款、延期还款等方案。
法律途径：
- 如果协商无果，您可以向法院提起诉讼，要求借款方偿还借款及相应的利息、违约金等。
- 在诉讼过程中，您可以申请法院对借款方的财产进行保全，包括冻结其银行账户、查封其房产等，以确保判决能够得到有效执行。
- 但需要注意的是，即使您获得了法院的判决，也不能直接对属于租赁公司的车辆进行扣留或处分。您只能申请法院对借款方的其他财产进行执行。
三、建议与风险提示
建议：
- 在处理此类纠纷时，建议您保持冷静和理性，避免采取过激行为。
- 您可以咨询专业律师的意见，了解自己的权利和义务，以及可能的法律后果。
- 根据律师的建议，选择合适的解决方式，如协商、调解、诉讼等。
风险提示：
- 擅自扣留车辆可能引发法律纠纷和刑事责任，给您带来不必要的麻烦和损失。
- 在处理此类纠纷时，请务必遵守法律法规和道德规范，尊重他人的合法权益。
如果您有任何关于债务债权方面的法律问题或需要进一步的法律帮助，请直接向我咨询。