结论：集体房屋买卖合同若为双方真实意图表示，且不存在其他违法情形，其效力不会因二十年后干部更换而受影响。

详细分析：

1. 合同效力的基本原则：

   • 根据《中华人民共和国民法典》的相关规定，依法成立的合同，自成立时生效，但是法律另有规定或者当事人另有约定的除外。这意味着，只要合同是双方真实意图的表示，且内容合法，不违反公序良俗，合同就具有法律效力。
   • 集体房屋买卖合同，如果是在双方自愿、平等、公平的基础上签订的，且符合相关法律法规的规定，那么该合同就是有效的。

2. 干部更换对合同效力的影响：

   • 合同的效力是独立于合同签订时的具体人员或职务的。也就是说，合同的效力不会因为合同签订后某一方的人员变动（如干部更换）而受到影响。
   • 干部更换是组织内部的人事变动，与合同本身的法律效力无关。除非新任干部能够证明原合同存在违法情形或双方存在欺诈、胁迫等情形，否则新任干部无权单方面宣布合同无效或要求返回房屋。

3. 可能存在的例外情况：

   • 如果集体房屋买卖合同本身存在违法情形，如未经相关部门批准、违反土地管理法规等，那么该合同可能自始无效。但这种情况与干部更换无关，而是合同本身的问题。
   • 如果双方在合同中约定了特定的条件或期限，如“若二十年后干部更换，则合同自动失效”等，那么该约定将作为合同的一部分，对双方具有约束力。但这种情况需要双方在合同中明确约定，且该约定不得违反法律法规的强制性规定。

4. 法律建议：

   • 对于集体房屋买卖合同，双方应确保合同内容合法、合规，且双方真实意图表示一致。
   • 在签订合同前，建议咨询专业律师，对合同条款进行审查，以确保合同的合法性和有效性。
   • 如果合同签订后发生争议，如新任干部要求返回房屋等，双方应首先通过协商解决；协商不成的，可以依法向人民法院提起诉讼，通过法律途径维护自己的合法权益。

总结：集体房屋买卖合同的效力不会因二十年后干部更换而受影响，除非合同本身存在违法情形或双方另有约定。因此，在签订集体房屋买卖合同时，双方应确保合同内容合法、合规，并咨询专业律师进行审查。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。