仅凭借条和房产证抵押的约定，不能直接通过“没还钱房子就归你”的方式实现房屋所有权转移，必须通过法律规定的程序来处理房产以实现债权。以下从不同角度为你详细分析：
从抵押的法律性质角度
- 抵押不转移所有权：根据法律规定，抵押是指债务人或者第三人不转移对特定财产的占有，将该财产作为债权的担保。在你描述的情况中，借款人将房产证交给你并约定以房产抵押，只是设立了抵押权，房屋的所有权仍然属于借款人。所以，不能因为借款人没还钱，你就直接取得房屋的所有权。
- 抵押权的实现方式：当借款人不履行到期债务或者发生当事人约定的实现抵押权的情形时，你有权就该财产优先受偿。但这并不意味着你可以直接占有房屋，而是需要通过与借款人协商折价、拍卖或者变卖该抵押财产等方式来受偿。如果协商不成，你可以向法院提起诉讼，请求法院拍卖、变卖抵押财产，并就所得价款优先受偿。
从借条和抵押约定的有效性角度
- 借条的有效性：借条是证明借贷关系存在的重要证据，只要借条内容真实、合法，双方具有相应的民事行为能力，意思表示真实，不违反法律、行政法规的强制性规定，不违背公序良俗，借条就是有效的。在借款人未按照借条约定还款时，你可以依据借条向借款人主张还款。
- 抵押约定的有效性：以房产抵押的，应当办理抵押登记，抵押权自登记时设立。如果你们只是写了借条并约定以房产抵押，但没有办理抵押登记，那么抵押权并未设立。在这种情况下，你对房屋不享有优先受偿权，但仍然可以依据借条要求借款人还款。如果已经办理了抵押登记，那么你对抵押的房屋享有优先受偿权。
实际操作建议
- 完善抵押手续：如果还没有办理房产抵押登记，建议你尽快与借款人一起到相关部门办理抵押登记手续，以确保你的抵押权能够有效设立。
- 协商解决：在借款到期后，你可以先与借款人协商还款事宜。如果借款人确实无力还款，你可以与借款人协商通过折价、拍卖或者变卖房屋等方式来实现债权。在协商过程中，要注意保留好相关的证据，如协商记录、书面协议等。
- 诉讼解决：如果协商不成，你可以向法院提起诉讼，要求借款人还款，并请求法院确认你对抵押房屋的优先受偿权。在诉讼过程中，要提供充分的证据证明借贷关系和抵押关系的存在，以及借款人未还款的事实。
如果你在处理这类问题时遇到任何疑问，可以直接向我咨询，我会为你提供详细的法律解答和建议。