结论：小孩不上学本身并不直接构成起诉要回抚养权的充分理由，但若能证明对方存在严重失职或不利于孩子成长的行为，则可能通过法律途径变更抚养权。以下从不同角度详细分析：

一、抚养权变更的法律依据

根据《中华人民共和国民法典》的相关规定，父母对子女的抚养、教育和保护的权利和义务，不因离婚而消除。离婚后，子女由一方直接抚养的，另一方应当负担部分或者全部抚养费。关于抚养权的变更，法律并未明确规定“小孩不上学”作为直接变更抚养权的理由，但强调了“有利于子女身心健康，保障子女的合法权益”的原则。

二、小孩不上学与抚养权变更的关系

1. 直接关联性有限：小孩不上学可能反映出直接抚养方在子女教育方面的疏忽或不足，但这并不直接等同于不利于子女身心健康或侵害子女合法权益。因此，仅凭小孩不上学这一点，难以直接构成变更抚养权的充分条件。

2. 间接证据作用：然而，如果小孩不上学的情况严重到影响了其身心健康或未来发展，且能够证明这与直接抚养方的失职或不当行为有直接关联，那么这一情况可能作为间接证据，支持变更抚养权的请求。例如，如果直接抚养方长期忽视孩子的教育需求，导致孩子辍学或学业严重落后，且这种状况持续存在且未得到改善，那么这可能被视为不利于子女成长的行为。

三、变更抚养权的实际考量因素

在决定是否变更抚养权时，法院会综合考虑多种因素，包括但不限于：

1. 直接抚养方的抚养能力：包括经济能力、教育能力、生活环境等。
2. 子女的意愿和感受：如果子女已具备一定年龄和认知能力，法院会考虑其意愿和感受。
3. 直接抚养方的行为表现：如是否存在虐待、遗弃、忽视等不利于子女成长的行为。
4. 变更抚养权对子女的影响：包括生活环境的改变、心理适应等。

四、建议与措施

1. 收集证据：如果您认为对方存在严重失职或不利于孩子成长的行为，应积极收集相关证据，如学校证明、医疗记录、证人证言等。
2. 协商沟通：在提起诉讼前，可以尝试与对方进行协商沟通，寻求达成共识或解决方案。
3. 寻求法律援助：如果协商无果，可以寻求专业律师的帮助，了解具体的法律程序和策略，准备提起诉讼。
4. 关注孩子需求：在整个过程中，应始终关注孩子的需求和感受，确保其权益得到充分保障。

最后，抚养权变更是一个复杂而敏感的法律问题，需要综合考虑多种因素。如果您面临此类问题或有任何疑问，请直接向我咨询，我会根据您的具体情况提供专业的法律建议和帮助。