针对您提出的问题“领养孩子不合法发现婴儿有神经纤维瘤可以退回去吗”，首先我要明确的是，领养孩子的合法性以及发现孩子健康问题后的处理方式，都需要严格遵循法律规定。

结论前置：领养孩子不合法时，不能简单地因为孩子患有神经纤维瘤就“退回去”。而是应该根据具体情况，依法处理领养关系，并考虑孩子的权益和健康问题。

详细分析：

1. 领养合法性的判断：

   • 领养孩子必须遵守国家关于收养的相关法律法规，包括收养人的资格、被收养人的条件以及收养程序等。
   • 如果领养过程存在不合法情况，如未办理收养登记、收养人不符合收养条件等，那么领养关系可能被视为无效或可撤销。

2. 发现孩子患有神经纤维瘤的处理：

   • 首先，无论孩子是否患有疾病，其作为未成年人的权益都应得到保护。
   • 如果领养关系合法，且孩子是在领养后被发现患有神经纤维瘤，那么应该根据孩子的健康状况和医疗需求，及时寻求医疗帮助，并考虑如何最好地照顾孩子。
   • 如果领养关系不合法，那么应该首先解决领养关系的合法性问题。这可能包括与相关部门沟通、办理收养登记或解除不合法的收养关系等。
   • 在处理领养关系的同时，也要关注孩子的健康问题和医疗需求，确保孩子得到适当的照顾和治疗。

3. 法律建议：

   • 如果您发现自己处于不合法的领养关系中，建议尽快咨询专业律师或相关机构，了解如何依法处理这种情况。
   • 同时，也要关注孩子的权益和健康问题，与医疗机构和专业人士合作，为孩子提供必要的医疗和照顾。

综上所述，领养孩子不合法时，不能简单地因为孩子患有神经纤维瘤就“退回去”。而是应该根据具体情况，依法处理领养关系，并考虑孩子的权益和健康问题。如果您有任何疑问或需要进一步的法律帮助，请随时向我咨询。