结论前置：
你借钱给别人，他每年都还两三万，这通常不构成诈骗罪。但如果他有其他欺诈行为或恶意逃避债务，则可能涉及法律问题。你可以通过民事诉讼来追讨剩余的欠款。
详细分析：
一、诈骗罪的构成要件及与本案的对比
诈骗罪定义与构成要件：
- 诈骗罪要求行为人具有非法占有他人财物的故意，并在借款时就无还款意图，通过虚构事实或隐瞒真相的方法骗取财物。
与本案的对比：
- 在你的案例中，借款人每年都还在还款，这表明他有还款的意愿和行为，不符合诈骗罪中“非法占有”和“无还款意图”的构成要件。
- 即使他还款的金额较少，但只要他在持续还款，且没有采用欺骗手段获取借款，就不构成诈骗罪。
二、追讨欠款的建议
保留证据：
- 确保你保留了所有与借款相关的证据，如借条、转账记录、聊天记录等。
- 这些证据对于证明双方的借贷关系和借款金额至关重要，也是后续法律诉讼的基础。
继续协商：
- 鉴于借款人仍在还款，你可以继续与他协商，明确还款计划和期限。
- 了解他的还款能力和困难，看是否能达成更具体的还款协议。
提起民事诉讼：
- 如果协商不成，或者借款人停止还款，你可以向有管辖权的人民法院提起民事诉讼。
- 在诉讼中，你需要提供充分的证据来证明借款事实和借款金额。
- 法院会根据证据进行审理，并作出相应的判决。如果判决支持你的诉求，你可以申请强制执行来追讨欠款。
总结：
在你的情况下，借款人每年都还两三万，这通常不构成诈骗罪。但你可以通过保留证据、继续协商以及提起民事诉讼来追讨剩余的欠款。如果你有任何进一步的法律问题或需要具体的法律帮助，请直接向我咨询。