结论：仅知道对方的电话号码，警察一般不会直接据此采取行动抓人或追回钱款，但你可以向警方报案并提供该电话号码作为线索，警方会依法进行调查处理。
分析说明：
报警的必要性：
- 当你发现被骗钱后，首先应当向当地公安机关报案。报警是启动刑事侦查程序的重要步骤，也是维护自身权益的有效途径。
- 在报案时，你应尽可能提供详细的被骗经过、对方的联系方式（包括电话号码）、转账记录等证据材料，以便警方能够迅速展开调查。
电话号码的作用：
- 电话号码是联系对方的一种方式，但它本身并不足以证明对方实施了诈骗行为。警方需要进一步的证据来支持其侦查工作。
- 警方可能会通过电话号码进行技术侦查，如查询通话记录、定位等，以获取更多关于嫌疑人的信息。然而，这些侦查手段需要依法进行，并受到严格的法律监督。
警方的处理流程：
- 警方在接到报案后，会进行初步审查，认为有犯罪事实需要追究刑事责任的，会立案侦查。
- 在侦查过程中，警方会依法收集证据，包括询问证人、调取监控录像、查询银行记录等。如果电话号码成为关键线索，警方会围绕它展开深入调查。
- 如果警方能够锁定嫌疑人并收集到足够的证据，他们会依法对嫌疑人采取强制措施，如拘留、逮捕等，并进一步追究其刑事责任。
追回钱款的可能性：
- 追回钱款的可能性取决于多种因素，包括嫌疑人的经济状况、是否愿意退赔、警方的侦查效率等。
- 如果嫌疑人被抓获并愿意退赔，或者警方能够追缴到赃款赃物，那么你有可能追回部分或全部被骗的钱款。然而，这并不是绝对的，因为有些嫌疑人可能已经将钱款挥霍一空或转移至他人名下。
行动建议：
- 立即报警：不要犹豫，尽快向当地公安机关报案，并提供详细的被骗经过和证据材料。
- 配合调查：积极配合警方的调查工作，提供必要的协助和信息。
- 保留证据：妥善保管与诈骗案件相关的所有证据材料，如转账记录、聊天记录、通话录音等。
- 关注进展：及时与警方沟通，了解案件的进展情况，并根据警方的建议采取进一步的行动。
法律后果提示：
- 如果嫌疑人被依法追究刑事责任，他们可能面临有期徒刑、罚金等刑罚。同时，你作为被害人，有权依法提起附带民事诉讼，要求嫌疑人赔偿你的经济损失。
- 如果警方在调查过程中发现你存在过错或违法行为（如明知是诈骗而参与其中），你也可能面临相应的法律责任。因此，在报警和配合调查的过程中，务必如实陈述事实，不要隐瞒或歪曲真相。
如果你有任何进一步的疑问或需要更多的法律帮助，请直接向我咨询。