结论：房屋买卖委托书的签署人数需根据房屋产权归属及夫妻双方的共同意愿来确定。若房屋为夫妻共同财产，建议签署时写夫妻两个人的名字；若房屋为个人财产，则写一个人的名字即可。
分析说明：
房屋为夫妻共同财产的情况：
- 法律依据：根据《中华人民共和国民法典》的相关规定，夫妻在婚姻关系存续期间所得的财产，为夫妻的共同财产，归夫妻共同所有。因此，如果房屋是在婚姻关系存续期间购买或以其他方式取得的，通常视为夫妻共同财产。
- 操作建议：在房屋为夫妻共同财产的情况下，为了保障交易的合法性和有效性，以及避免后续可能出现的纠纷，建议在房屋买卖委托书上签署夫妻两个人的名字。这样既能体现夫妻双方对房屋交易的共同意愿，也能确保交易行为的合法性。
房屋为个人财产的情况：
- 法律依据：如果房屋是在婚前购买，或者虽然是在婚姻关系存续期间购买但明确约定为个人财产（如通过婚前财产协议或婚后财产约定），则该房屋属于个人财产。
- 操作建议：在房屋为个人财产的情况下，房屋买卖委托书可以只写一个人的名字，即房屋的所有权人。因为个人有权独立处分自己的财产，无需得到他人的同意或参与。
特殊情况下的考虑：
- 夫妻一方无法到场：如果夫妻一方因特殊原因无法到场签署委托书，可以通过公证的方式授权另一方代为签署。但这种情况下，应确保公证手续的合法性和有效性，以避免后续纠纷。
- 涉及第三方权益：如果房屋买卖涉及第三方权益（如抵押权人、共有人等），则需要在签署委托书时考虑这些权益的保护和协调。必要时，应咨询专业律师的意见以确保交易的合法性和安全性。
行动建议：
- 在签署房屋买卖委托书前，务必明确房屋的产权归属情况。
- 根据房屋的产权归属和夫妻双方的共同意愿来确定签署人数。
- 如果涉及复杂情况或不确定如何操作，建议咨询专业律师的意见以确保交易的合法性和安全性。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询，我会根据你的具体情况提供详细的法律建议。