结论：不抚养孩子并不构成对方不赡养你的合法理由，这两者之间不存在法律上的因果关系。

详细分析：

1. 抚养与赡养的法律义务：

   • 抚养义务：在婚姻家庭关系中，父母对未成年子女有抚养教育的义务。这是基于亲子关系的法定责任，旨在保障未成年子女的健康成长。
   • 赡养义务：子女对父母有赡养扶助的义务。这是基于亲子关系的反向责任，旨在保障老年父母的基本生活需求。

2. 抚养与赡养的独立性：

   • 抚养义务和赡养义务在法律上是独立的。父母不履行抚养义务，并不免除子女未来应履行的赡养义务。同样，子女不履行赡养义务，也不能成为父母不履行抚养义务的合法理由。
   • 法律并未规定，如果父母不抚养孩子，孩子就有权不赡养父母。赡养义务是法定的，不因父母是否履行抚养义务而改变。

3. 法律后果：

   • 如果父母不履行抚养义务，子女可以通过法律途径要求父母履行抚养责任，如提起抚养费诉讼等。
   • 如果子女不履行赡养义务，父母同样可以通过法律途径要求子女履行赡养责任，如提起赡养费诉讼等。法院会根据具体情况判决子女支付相应的赡养费。

4. 道德与社会层面：

   • 除了法律义务外，抚养和赡养还涉及道德和社会责任。父母抚养子女是出于亲情和责任，子女赡养父母也是出于同样的原因。
   • 在社会层面，赡养老人是中华民族的传统美德，也是社会文明进步的体现。因此，即使父母在抚养过程中存在不足，子女也应尽量履行赡养义务，以维护家庭和谐和社会稳定。

建议：

• 如果你作为父母没有履行抚养义务，建议尽快与子女沟通，寻求和解或协商解决方案，以避免未来可能出现的法律纠纷和家庭矛盾。
• 如果你作为子女面临父母不抚养的情况，可以通过法律途径维护自己的权益，但不应以此作为不赡养父母的理由。
• 在任何情况下，都应尽量通过沟通、协商等方式解决家庭矛盾，以维护家庭和谐和亲情关系。

如有任何婚姻家庭方面的法律问题，都可以直接向我咨询。