结论前置：

1. 利息一般不属于增值税应税范围，对方无需就利息部分开具发票。但需注意，若利息被认定为价外费用且与货物销售直接相关，则可能涉及税务处理，不过实践中这种情况较少见。
2. 从财务和税务合规角度，建议双方就利息支付签订书面协议，并明确税务处理方式，以避免后续纠纷。

法律分析：

首先，我们需要明确的是，利息通常不被视为增值税的应税范围。在货物买卖合同中，货款是主要的交易对象，而利息则是因为货款未按时支付而产生的额外费用。根据一般的税务原则，利息并不直接构成货物的销售或服务提供，因此不属于增值税的征税范围。

然而，有一种特殊情况需要注意，即如果利息被认定为价外费用，并且与货物的销售直接相关，那么这部分利息可能会被纳入增值税的征税范围。但这种情况在实践中相对较少见，且需要具体的税务认定和解释。

从财务和税务合规的角度：

1. 书面协议：为了避免后续的税务和财务纠纷，建议双方就利息的支付签订书面协议。协议中应明确利息的计算方式、支付时间以及税务处理方式等关键条款。

2. 税务处理：在协议中，双方可以约定利息的税务处理方式。例如，可以约定利息由支付方自行承担税务责任，或者由收款方开具相应的税务凭证（尽管不是发票）以证明利息的收取。

3. 合规性审查：在签订协议和支付利息前，建议双方进行合规性审查，确保利息的支付和税务处理符合相关法律法规的要求。

可能的法律后果：

如果双方未就利息的支付和税务处理进行明确约定，或者约定不符合相关法律法规的要求，那么可能会面临以下法律后果：

1. 税务处罚：如果利息被错误地纳入增值税的征税范围而未进行正确的税务处理，那么可能会面临税务机关的处罚。

2. 财务纠纷：如果双方对利息的支付和税务处理存在争议，那么可能会引发财务纠纷，甚至导致法律诉讼。

建议：

为了确保双方的权益得到保障，并避免后续的税务和财务纠纷，我建议你们：

• 就利息的支付和税务处理签订书面协议；
• 在协议中明确利息的计算方式、支付时间以及税务处理方式等关键条款；
• 在签订协议和支付利息前进行合规性审查；
• 如有需要，可以寻求专业税务或法律人士的帮助。

最后，如果有任何关于合同纠纷或税务处理的具体问题，欢迎直接向我咨询。