结论：村集体土地流转并非只有村民代表会议合法，没有召开村民会议的情况下，土地流转的合法性需根据具体情况判断。
分析说明：
村民会议与村民代表会议的职责与权限：
- 根据《中华人民共和国村民委员会组织法》的相关规定，村民会议是村民自治的最高决策机构，负责讨论决定涉及村民利益的重大事项。
- 村民代表会议则是在村民会议不便召开或需要快速决策时，由村民选举产生的代表组成的会议，其决策权限通常限于村民会议授权范围内的事项。
村集体土地流转的决策程序：
- 村集体土地流转属于涉及村民利益的重大事项，原则上应由村民会议讨论决定。
- 若因特殊情况无法召开村民会议，且村民会议已授权村民代表会议讨论决定此类事项，则村民代表会议可以作出流转决定。但需注意，这种授权必须是明确且具体的，不能笼统地授权村民代表会议处理所有事务。
未召开村民会议的法律后果：
- 如果未召开村民会议，且村民会议也未授权村民代表会议讨论决定土地流转事宜，那么村民代表会议单独作出的流转决定可能因程序违法而无效。
- 村民有权对违法的流转决定提出异议，并可以通过法律途径维护自己的合法权益。
法律建议：
- 对于村集体：在进行土地流转前，应确保按照法定程序召开村民会议或村民代表会议，并获得必要的授权和批准。如果因特殊情况无法召开村民会议，应提前与村民沟通，明确授权村民代表会议讨论决定相关事宜。
- 对于村民：如果发现村集体土地流转未按照法定程序进行，可以向村委会提出异议，并要求召开村民会议重新讨论决定。如果村委会不予理会或处理不当，可以向乡镇政府或相关部门反映情况，寻求帮助和支持。
可能后果：
- 如果土地流转程序违法，可能导致流转合同无效或被撤销，给村集体和受让方带来经济损失和法律风险。
- 村民有权要求违法流转的决策者承担相应的法律责任，包括赔偿损失等。
进一步行动建议：
- 如果您是村集体成员，对土地流转程序有疑问或担忧，建议及时与村委会沟通，了解具体情况并表达自己的意见。
- 如果您认为土地流转程序违法且损害了您的合法权益，可以向专业律师咨询，了解具体的法律途径和维权策略。
如有其他疑问或需要进一步的法律帮助，请随时向我咨询。