工会人数少并不构成不选举经费审查委员会的合法理由。以下从法律角度进行详细分析：

一、法律对工会经费审查委员会的规定

根据《中华人民共和国工会法》的相关规定，工会应当设立经费审查委员会，其职责是审查工会经费的收支情况，确保工会经费的合理使用和透明管理。这一规定并未对工会的人数或规模作出限制，即无论工会人数多少，都应当设立经费审查委员会。

二、不选举经费审查委员会的可能后果

1. 违反法律规定：不选举经费审查委员会可能违反《中华人民共和国工会法》的相关规定，从而面临法律上的不利后果。
2. 影响工会经费管理：经费审查委员会的设立旨在保障工会经费的合理使用和透明管理。如果不选举该委员会，可能导致工会经费管理缺乏监督，出现滥用、挪用等问题。
3. 损害工会成员权益：工会经费是工会成员共同缴纳的，用于维护工会成员权益和开展工会活动。如果不选举经费审查委员会，可能损害工会成员的知情权、监督权等合法权益。

三、建议与措施

1. 遵守法律规定：无论工会人数多少，都应当按照法律规定设立经费审查委员会，确保工会经费的合理使用和透明管理。
2. 加强工会建设：对于人数较少的工会，可以通过加强工会建设、提高工会成员参与度等方式，增强工会的凝聚力和影响力，从而更好地维护工会成员的权益。
3. 寻求法律帮助：如果在设立经费审查委员会过程中遇到法律问题或困难，可以寻求专业律师的法律帮助，确保工会活动的合法性和有效性。

如有任何关于工会法律问题的疑问或需要进一步的法律帮助，请随时向我咨询。我将根据您的具体情况，提供专业、全面的法律建议。