结论：对方以您不是产权人为借口私自进入您的杂物房，这一行为是否违法，需结合具体情况判断，但在多数情况下，这种行为可能构成侵权或违反治安管理规定。以下从不同角度为您详细分析：
一、从物权法角度分析
使用权与占有权：
- 即使您不是杂物房的产权人，但如果您基于租赁、借用等合法关系取得了杂物房的使用权或占有权，那么您就有权在合法期限内独占使用该杂物房，并排除他人的非法干涉。
- 对方未经您同意私自进入，侵犯了您的使用权或占有权，可能构成侵权。
产权人的权利限制：
- 产权人虽然对房屋拥有所有权，但这并不意味着产权人可以随意侵犯他人的合法权益。如果产权人未经您同意私自进入您占有的杂物房，同样可能构成侵权。
二、从治安管理角度分析
非法侵入住宅：
- 根据《中华人民共和国治安管理处罚法》的相关规定，非法侵入他人住宅的，处十日以上十五日以下拘留，并处五百元以上一千元以下罚款；情节较轻的，处五日以上十日以下拘留，并处二百元以上五百元以下罚款。
- 虽然“住宅”通常指的是居住用的房屋，但杂物房如果与住宅相连或属于住宅的一部分，且您对其有合法的占有权，那么对方私自进入也可能被视为非法侵入住宅。
侵犯隐私与安宁权：
- 即使杂物房不被视为住宅，对方未经您同意私自进入也可能侵犯您的隐私权和安宁权。您有权要求对方停止侵害、排除妨碍，并可能要求赔偿损失。
三、从实际案例与司法实践角度分析
- 在司法实践中，法院通常会根据具体情况判断对方的行为是否构成侵权或违反治安管理规定。例如，如果杂物房是您租赁房屋的一部分，且您已经合法占有并使用该杂物房，那么对方未经您同意私自进入很可能被认定为侵权行为。
- 另外，如果对方的行为给您造成了实际损失（如物品损坏、精神损害等），您还有权要求对方承担赔偿责任。
四、建议与措施
收集证据：
- 如果对方再次私自进入您的杂物房，您应尽快收集相关证据（如监控录像、证人证言、现场照片等），以便在后续维权过程中使用。
与对方沟通：
- 在收集证据的同时，您可以尝试与对方沟通，明确告知对方其行为已经侵犯了您的合法权益，并要求对方停止侵害。
报警或起诉：
- 如果对方拒绝停止侵害或给您造成了实际损失，您可以向公安机关报案或向人民法院提起诉讼，要求对方承担相应的法律责任。
最后，对方以您不是产权人为借口私自进入您的杂物房，这一行为在多数情况下可能构成侵权或违反治安管理规定。如果您遇到此类问题，可以直接向我咨询，我会根据您的具体情况为您提供更详细的法律建议。