在贷款关系中，贷款人和担保人的责任大小并不能一概而论，而是需要根据具体情况来分析。

首先，贷款人是债务的主要承担者，负有按时足额偿还借款的义务。如果贷款人未能履行还款义务，出借人有权向贷款人追讨欠款，并可能面临银行或金融机构的催款、信用记录受损，甚至被起诉和财产被强制执行等后果。

其次，担保人在贷款人不能履行还款责任时承担担保责任。担保责任的形式有多种，如一般保证和连带保证。在一般保证情况下，担保人仅在贷款人经过诉讼并强制执行仍不能履行债务时，才承担保证责任；在连带保证情况下，担保人需与贷款人共同对债务承担偿还责任，出借人可直接要求担保人履行还款义务。

因此，从责任的大小来比较：

1. 如果贷款人有足够的还款能力且按时还款，那么担保人可能无需承担责任，此时贷款人的责任更大。
2. 如果贷款人还款能力不足或无法履行还款义务，那么担保人将需要承担起还款的责任，此时担保人的责任就显得更为突出。

不过，具体的责任大小还需根据借贷合同以及担保合同中的具体约定来确定。如果你在这方面有具体的法律问题或需要进一步的帮助，请直接向我咨询，我会根据你的具体情况提供详细的法律建议。