小作坊服装加工不给工人上保险是违法的。以下从不同角度进行分析：

1. 从社会保险法的角度 根据《中华人民共和国社会保险法》的规定，用人单位应当自用工之日起三十日内为其职工向社会保险经办机构申请办理社会保险登记，包括养老保险、医疗保险、失业保险、工伤保险和生育保险。这里的“用人单位”并没有对规模大小作出限制，小作坊作为用人单位的一种形式，同样需要遵守这一规定。如果小作坊不为工人缴纳社会保险，就违反了社会保险法的强制性规定，属于违法行为。
2. 从劳动法的角度 《中华人民共和国劳动法》也明确规定，用人单位和劳动者必须依法参加社会保险，缴纳社会保险费。这是用人单位和劳动者的一项法定义务，不因用人单位的规模、性质等因素而免除。小作坊不给工人上保险，不仅损害了工人的合法权益，也违反了劳动法的规定，可能会面临劳动行政部门的处罚。
3. 从实际后果的角度 如果小作坊不给工人上保险，工人在发生工伤、疾病等情况下，将无法享受相应的社会保险待遇，这会给工人带来巨大的经济负担。同时，小作坊也可能因为未依法缴纳社会保险费而面临劳动争议、行政处罚等法律风险，影响其正常经营和发展。