结论：临时工老板不让回家是否违法，需根据具体情况判断，主要看是否存在非法拘禁、限制人身自由或违反劳动合同约定等情形。以下从不同角度详细分析：
一、非法拘禁或限制人身自由的角度
法律背景：
- 根据《中华人民共和国刑法》第二百三十八条，非法拘禁他人或者以其他方法非法剥夺他人人身自由的，构成非法拘禁罪。
- 同时，《中华人民共和国治安管理处罚法》第四十条也规定，非法限制他人人身自由的，处十日以上十五日以下拘留，并处五百元以上一千元以下罚款；情节较轻的，处五日以上十日以下拘留，并处二百元以上五百元以下罚款。
分析：
- 如果老板不让临时工回家，是通过暴力、威胁、欺骗或其他非法手段实现的，且临时工无法自由离开，那么这种行为可能构成非法拘禁或限制人身自由，是违法的。
- 如果老板只是口头要求临时工留下，但临时工可以自由离开，且没有受到任何威胁或限制，那么这种行为通常不构成违法。
二、劳动合同约定的角度
法律背景：
- 根据《中华人民共和国劳动合同法》的相关规定，劳动合同应当明确约定工作内容、工作地点、工作时间、休息休假等条款。
- 如果劳动合同中明确规定了临时工的工作时间和休息休假安排，老板应当遵守这些约定。
分析：
- 如果老板不让临时工回家，违反了劳动合同中关于工作时间或休息休假的约定，那么临时工有权要求老板按照合同约定执行，或者通过法律途径维护自己的权益。
- 如果劳动合同中没有明确约定工作时间或休息休假，或者约定不明确，那么需要根据实际情况和行业惯例来判断老板的行为是否合理。
三、特殊情况下的考虑
紧急情况或特殊任务：
- 如果临时工正在执行紧急任务或特殊任务，且任务需要连续进行，老板可能要求临时工暂时留下以完成任务。这种情况下，如果老板提供了合理的补偿或安排了后续的休息时间，且临时工同意，那么这种行为通常不构成违法。
临时工自愿留下：
- 如果临时工自愿留下加班或完成额外工作，且没有受到任何威胁或强迫，那么老板不让临时工“回家”（这里“回家”可能指离开工作场所）的行为通常不构成违法。但老板应当支付相应的加班费或提供其他补偿。
四、建议与行动
与老板沟通：
- 如果临时工认为老板的行为不合理或违法，首先应当与老板进行沟通，明确表达自己的诉求和理由。
收集证据：
- 如果沟通无果，临时工可以收集相关证据（如工作记录、聊天记录、证人证言等），以证明老板的行为确实存在违法或不合理之处。
寻求法律帮助：
- 如果临时工认为自己的权益受到了侵害，可以向当地的劳动监察部门投诉或寻求法律帮助。作为专业律师，我可以为你提供进一步的法律咨询和协助。
总结：临时工老板不让回家是否违法，需根据具体情况判断。如果存在非法拘禁、限制人身自由或违反劳动合同约定等情形，那么老板的行为可能是违法的。临时工应当根据自己的实际情况和权益受损情况，采取合适的措施来维护自己的权益。如果你有任何疑问或需要进一步的法律帮助，请随时向我咨询。