结论是：别人来拆您家正在建造的房子是否违法，取决于拆房行为的合法性及依据，若没有合法依据，则拆房行为很可能违法。 接下来，我将从不同角度为您详细分析这个问题。
一、拆房行为是否合法的判断依据
是否有合法手续：
- 如果拆房行为是由政府相关部门依据法定程序进行的，比如因规划调整、公共安全等原因需要拆除您的房屋，并且已经给您送达了合法的拆迁通知，同时提供了合理的补偿方案，那么这种拆房行为是合法的。
- 反之，如果没有任何合法手续，比如没有拆迁通知、没有补偿方案，或者拆迁通知和补偿方案不符合法律规定，那么别人来拆您的房子就是违法的。
是否侵犯了您的财产权：
- 您的房屋是您的合法财产，受法律保护。任何未经您同意，擅自拆除您房屋的行为，都可能构成对您财产权的侵犯。
- 如果拆房行为导致了您的财产损失，您有权要求拆房者承担赔偿责任。
二、拆房行为可能涉及的法律责任
民事责任：
- 如果拆房行为侵犯了您的财产权，您有权要求拆房者停止侵害、恢复原状或者赔偿损失。
- 您可以向法院提起民事诉讼，要求拆房者承担相应的民事责任。
行政责任：
- 如果拆房行为是由政府相关部门进行的，但存在违法情形，比如未按照法定程序进行拆迁、未提供合理的补偿方案等，那么相关部门可能面临行政责任。
- 您可以向相关部门提出行政复议或者向法院提起行政诉讼，要求撤销违法的拆迁行为或者确认其违法。
刑事责任：
- 在极少数情况下，如果拆房行为构成了故意毁坏财物罪等犯罪行为，那么拆房者可能面临刑事责任。
- 您可以向公安机关报案，要求追究拆房者的刑事责任。
三、您的应对措施
保留证据：
- 在拆房行为发生时，您应尽可能保留相关证据，比如拍照、录像、保存拆迁通知等文件。
- 这些证据将有助于您后续维权。
及时咨询律师：
- 面对拆房行为，您应及时咨询专业律师，了解您的权利和义务。
- 律师将为您提供法律建议，帮助您制定维权策略。
依法维权：
- 根据律师的建议，您可以依法向相关部门提出行政复议、向法院提起民事诉讼或者行政诉讼等。
- 通过法律途径维护您的合法权益。
最后，我想强调的是，面对拆房行为，您应保持冷静，不要采取过激行为。 依法维权是保护您自身权益的最佳方式。如果您有任何法律问题或者需要进一步的法律帮助，请直接向我咨询。