结论：孩子4岁离异后跟着妈妈，上大学时是否可以起诉父亲要学费，需根据具体情况判断，一般情况下，若父母未就大学费用有特别约定，且父亲无法定义务继续支付，则起诉要求支付学费可能难以得到法院支持；但若父母有约定或存在特殊情况，则可能支持。以下从不同角度进行分析：
一、父母对子女的抚养义务范围
根据《中华人民共和国民法典》的相关规定，父母对子女的抚养义务通常涵盖子女未成年或不能独立生活期间。这里的“不能独立生活”一般指的是子女尚在校接受高中及以下教育，或者因丧失、部分丧失劳动能力等非主观原因而无法维持正常生活的情况。对于已经成年且能够独立生活的子女，如正在接受大学教育的学生，父母通常不再承担抚养义务，除非双方有特别约定。
二、大学费用的支付责任
无特别约定的情况：
- 若父母在离婚时或离婚后，未就子女大学期间的费用支付达成特别约定，那么父亲在法律上通常没有义务继续支付子女的大学学费。此时，子女起诉父亲要求支付学费，可能难以得到法院的支持。
有特别约定的情况：
- 如果父母在离婚协议或后续协议中明确约定了子女大学期间的费用支付责任，比如约定由父亲承担部分或全部学费，那么这一约定具有法律效力。在这种情况下，子女可以依据协议起诉父亲要求支付学费，法院可能会根据协议内容作出相应判决。
特殊情况：
- 尽管一般情况下父母对成年子女的大学费用不承担抚养义务，但如果存在特殊情况，如子女因残疾、疾病等原因无法独立生活，且需要接受高等教育以改善生活状况，那么父母可能仍需承担一定的抚养责任。然而，这种情况下的责任承担需要具体分析，且通常需要法院根据实际情况进行裁决。
三、法律建议
协商解决：
- 在考虑起诉之前，建议子女与父亲进行协商，尝试达成一致意见。通过沟通，双方可以明确各自的责任和义务，避免不必要的法律纠纷。
寻求法律援助：
- 如果协商无果，且子女认为父亲有义务支付大学学费（如有特别约定或存在特殊情况），可以寻求法律援助或咨询专业律师，了解具体的法律途径和诉讼策略。
准备证据：
- 如果决定起诉，子女需要准备充分的证据来支持自己的主张。这可能包括离婚协议、后续协议、子女的学习情况、经济状况等证据材料。
最后，每个家庭的情况都是独特的，法律问题的解决也需要根据具体情况进行具体分析。如果你或你身边的人遇到类似问题，可以直接向我咨询，我会根据你的具体情况提供更详细的法律建议。