结论：在此情况下，村委会是否有权收回那一方的土地，需根据具体情况判断，若互换的土地合约中明确约定了整户消亡时土地的处理方式，则按照合约执行；若合约未明确约定，且土地互换已经得到相关部门批准或备案，那么村委会一般无权单方面收回土地；若合约未明确约定，且土地互换未得到相关部门批准或备案，村委会可能基于相关规定收回土地。以下是对此问题的详细分析：

一、合约约定情况

1. 合约有明确约定：

   • 如果两家在互换土地时签订的合约中明确规定了，在合约未到期但一方整户消亡的情况下，土地应如何处理（例如，归另一方所有、归村委会所有或按照其他方式处理），那么应当按照合约的约定执行。

2. 合约无明确约定：

   • 如果合约中没有明确约定这种情况下的土地处理方式，那么就需要考虑其他因素，如土地互换的合法性、相关法律法规的规定等。

二、土地互换的合法性

1. 已批准或备案的土地互换：

   • 如果两家之间的土地互换已经得到了相关部门的批准或备案，那么这种互换是合法的，受法律保护。在这种情况下，即使一方整户消亡，村委会也无权单方面收回土地，除非合约中有明确约定或存在其他法定事由。

2. 未批准或备案的土地互换：

   • 如果两家之间的土地互换没有得到相关部门的批准或备案，那么这种互换可能存在一定的法律风险。在这种情况下，村委会可能基于相关规定（如农村土地管理法规）收回土地，但这也需要具体分析当地的相关规定和实际情况。

三、相关法律法规的规定

• 根据《中华人民共和国农村土地承包法》等相关法律法规，农村土地承包经营权可以依法流转，包括互换等方式。但流转时应当遵循法定程序和条件，确保流转的合法性和有效性。
• 如果土地互换合法且合约无明确约定整户消亡时的处理方式，那么村委会一般无权单方面收回土地。村委会若欲收回土地，可能需要通过协商、调解或诉讼等法律途径解决。

四、建议与措施

1. 查阅合约：

   • 首先，建议查阅两家之间签订的土地互换合约，明确合约中是否有关于整户消亡时土地处理方式的约定。

2. 咨询相关部门：

   • 如果合约中没有明确约定或存在疑问，建议咨询当地农村土地管理部门或相关法律机构，了解当地的具体规定和操作流程。

3. 协商解决：

   • 在明确相关法律法规和合约约定后，建议两家之间或与村委会进行协商，寻求妥善解决土地问题的方案。

4. 法律途径：

   • 如果协商无果或存在争议，可以考虑通过法律途径解决，如提起民事诉讼等。

最后，农村土地问题涉及复杂的法律法规和当地政策，具体情况可能因地区而异。因此，在处理此类问题时，建议务必谨慎并寻求专业法律意见。如果你有任何进一步的疑问或需要具体的法律帮助，可以直接向我咨询。