结论：老师收取学生小时候学校发的牛奶是否违法，需根据具体情况判断，一般而言，若老师无正当理由擅自收取，可能涉及违法行为；但若存在合理原因或事先约定，则可能不构成违法。以下从不同角度进行分析：
从物权法角度分析：
- 学校发放的牛奶，在发放给学生后，其所有权即转移至学生或其监护人。老师作为教育工作者，并非牛奶的所有权人，也无权擅自处置。
- 若老师无正当理由擅自收取学生的牛奶，可能构成对学生财产权的侵犯，违反了物权法的相关规定。学生或其监护人有权要求老师返还牛奶或赔偿相应损失。
从教育法及教师职业道德角度分析：
- 教育法规定，教师应当尊重学生的人格尊严，不得对学生实施体罚、变相体罚或者其他侮辱人格尊严的行为。虽然收取牛奶不直接等同于体罚，但若此行为被视为对学生的一种不当对待或惩罚，则可能违反教育法的精神。
- 教师职业道德也要求教师关爱学生，尊重学生的权益。擅自收取学生的牛奶，可能损害学生对教师的信任，影响师生关系，不符合教师职业道德的要求。
从特殊情况角度分析：
- 若老师收取牛奶是出于合理原因，如学生因特殊原因无法保管牛奶，老师代为保管并在适当时候归还，且事先与学生或其监护人进行了沟通并取得了同意，则此行为可能不构成违法。
- 若学校有相关规定或事先与学生或其监护人约定，老师可以在特定情况下收取学生的牛奶（如作为奖励或惩罚的替代措施，但需确保这种约定不违反法律法规和公序良俗），则此行为也可能不构成违法。但这种情况较为特殊，且需要严格的程序和条件限制。
法律建议：
- 若学生或其监护人认为老师擅自收取牛奶的行为违法，可以先与老师或学校进行沟通，了解收取牛奶的原因和目的，并尝试通过协商解决问题。
- 若沟通无果，学生或其监护人可以向学校的教育主管部门或相关监管机构投诉，寻求帮助和支持。
- 在必要时，学生或其监护人也可以考虑通过法律途径维护自己的合法权益，如向法院提起诉讼等。
可能法律后果：
- 若老师擅自收取牛奶的行为被认定为违法，可能面临行政处罚（如警告、记过等）或民事赔偿（如返还牛奶、赔偿损失等）的法律后果。
- 若此行为情节严重，构成犯罪的，还可能面临刑事处罚。但这种情况较为罕见，需要具体分析行为的性质和后果。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询。