案发多年前受贿人就把受贿的财物退还给了行贿人，这个财物法院一般无权再查没。下面我来详细解释一下这个问题：

首先，我们需要明确的是，受贿人退还财物的行为，如果发生在案发前，且是主动退还，那么这通常被视为受贿人的一种悔罪表现，也是减轻或免除处罚的一个情节。在这种情况下，如果受贿人已经退还了财物，那么法院在判决时，一般不会再将这部分财物作为违法所得进行查没。

其次，我们要考虑的是退还财物的时间点。如果退还发生在案发后，特别是在司法机关介入调查之后，那么这种退还就可能被视为掩饰、隐瞒犯罪所得的行为，不仅不能免除其法律责任，反而可能加重其处罚。但在你描述的情况中，退还发生在案发多年前，所以这一点并不适用。

最后，我们还需要注意的是，即使受贿人已经退还了财物，但如果其受贿行为已经构成了犯罪，那么他还是需要承担相应的刑事责任。退还财物只是量刑时的一个考虑因素，而不是决定因素。

综上所述，案发多年前受贿人就把受贿的财物退还给了行贿人，这个财物法院一般无权再查没。但受贿人仍然需要对其受贿行为承担相应的刑事责任。如果你还有其他问题或需要进一步的法律帮助，请随时向我咨询。