结论：与两万借款人约定如起诉则律师费4千，这一约定本身在法律上并不直接被禁止，但其合法性及具体效力需结合多种因素综合判断。以下从不同角度进行分析：
一、合同自由原则的角度
根据合同自由原则，当事人有权在合同中约定各种条款，包括律师费的承担。因此，从原则上讲，您与借款人之间可以约定在起诉时由借款人承担一定数额的律师费。这种约定通常被视为双方对诉讼成本分担的一种预先安排，只要不违反法律、行政法规的强制性规定，不违背公序良俗，就是有效的。
二、律师费约定合理性的角度
合理性审查：虽然合同自由原则允许约定律师费，但约定的数额应当合理。如果约定的律师费过高，超出了当地律师收费标准或行业惯例，可能会被视为显失公平，从而影响约定的效力。在您的情况下，4千元的律师费对于两万元的借款纠纷来说，是否合理需要结合当地律师收费标准、案件复杂程度、律师工作量等因素进行综合判断。
实际发生原则：即使合同中约定了律师费，也通常需要以实际发生为前提。也就是说，只有当您实际聘请了律师并支付了律师费后，才能要求借款人按照约定承担这部分费用。如果最终没有起诉或没有聘请律师，那么约定的律师费就不会实际发生，借款人也就无需承担。
三、法律效力的角度
对内效力：对于您和借款人之间而言，如果约定的律师费条款符合上述合理性审查和实际发生原则，那么该条款在双方之间是具有法律效力的。一旦发生纠纷并起诉至法院，您可以要求借款人按照约定承担律师费。
对外效力：然而，需要注意的是，这种约定通常只对双方当事人具有约束力。如果借款人未按照约定支付律师费，您只能通过法律途径向其追偿，而不能要求第三方（如法院、律师协会等）强制执行该约定。
四、实际操作建议
明确约定：在签订借款合同时，建议您明确约定律师费的承担方式和数额。这有助于在发生纠纷时减少争议和纠纷处理成本。
保留证据：在聘请律师并支付律师费后，请务必保留好相关证据（如律师费发票、委托代理合同等）。这些证据将作为您要求借款人承担律师费的依据。
咨询专业律师：虽然我已经为您提供了一些基本的法律分析，但每个案件的具体情况都有所不同。因此，在涉及具体法律问题时，建议您咨询专业律师以获取更详细和准确的法律意见。
如果您在债务债权（民间借贷）领域有任何疑问或需要进一步的法律帮助，请直接向我咨询。