旅行社约定出行人数不够取消出行且不承担违约责任是违法的。以下是对此问题的详细分析：

一. 旅行社不能约定因人数不够取消出行就不承担违约责任

1. 法律依据：根据《合同法》、《消费者权益保护法》以及《旅游法》的相关规定，免责条款的设定不得成为霸王条款，即不得借助地位优势给自己增加权利，给对方增加义务。旅行社在旅游合同中约定因人数不够取消出行就不承担违约责任，显然违反了这些法律规定。

2. 实际理解：此约定违背了公平原则，旅行社作为合同的一方，不能单方面免除自己的违约责任。如果因为人数不够而取消出行，旅行社应当承担相应的违约责任。

二. 旅行社取消出行的法律责任

1. 提前告知义务：根据《旅游法》的规定，境内旅游应当至少提前七日通知旅游者，出境旅游应当至少提前三十日通知旅游者。如果旅行社未能按照这一规定提前告知旅游者，那么即使因人数不够取消出行，旅行社也需要承担违约责任。

2. 违约责任的承担：如果旅行社因人数不够而取消出行，且未能按照法律规定提前告知旅游者，那么旅行社应当承担违约责任，包括赔偿旅游者的直接经济损失等。

三. 旅游者的权益保护

1. 要求赔偿：旅游者如果因为旅行社的取消出行行为而遭受了直接经济损失，可以要求旅行社进行赔偿。这些直接经济损失可能包括报名费、交通费、住宿费等。

2. 法律途径：如果旅行社拒绝承担赔偿责任，旅游者可以通过法律途径来维护自己的权益，比如向消费者协会投诉、向法院提起诉讼等。

综上所述，旅行社约定因人数不够取消出行且不承担违约责任是违法的。旅行社应当承担因取消出行而产生的违约责任，并赔偿旅游者的直接经济损失。如果旅行社拒绝承担责任，旅游者可以通过法律途径来维护自己的权益。如有进一步需要，您可以继续咨询我。