结论：楼对面有人看你，这一行为本身并不违法，但具体是否构成侵权或违法，需结合行为的具体方式、频率、目的以及是否对你造成了实质性损害等因素来综合判断。

分析说明：

1. 一般情况下的观察行为：

   • 在日常生活中，人们之间互相观察是常见的现象，只要这种观察行为没有超出合理的限度，没有侵犯到他人的隐私权、肖像权等合法权益，就不构成违法。
   • 例如，楼对面的居民偶尔抬头看到你，或者在你外出时无意间看到你，这些行为通常被认为是正常的，不构成违法。

2. 可能构成违法的情形：

   • 侵犯隐私权：如果楼对面的人通过望远镜、摄像头等设备长时间、持续地观察你，甚至记录你的生活细节，这可能构成对你隐私权的侵犯。根据《中华人民共和国民法典》的相关规定，自然人享有隐私权，任何组织或者个人不得以刺探、侵扰、泄露、公开等方式侵害他人的隐私权。
   • 骚扰行为：如果楼对面的人不仅观察你，还通过言语、行为等方式对你进行骚扰，如大声喧哗、恶意嘲笑等，这可能构成对你生活安宁的侵犯，甚至可能触犯《中华人民共和国治安管理处罚法》中关于骚扰他人的规定。
   • 其他违法行为：如果楼对面的人观察你的目的是为了实施其他违法行为，如盗窃、抢劫等，那么这种观察行为就可能成为这些违法行为的预备行为，从而构成违法。

法律建议：

• 如果你认为楼对面的人的观察行为已经超出了合理的限度，对你造成了实质性的损害或困扰，你可以先尝试与对方沟通，表达你的不满和诉求。
• 如果沟通无果，你可以考虑向物业管理处或社区居委会等机构反映情况，寻求他们的帮助和调解。
• 如果情况严重，涉及侵犯隐私权、骚扰等违法行为，你可以及时报警，并保留好相关证据，如照片、视频、录音等，以便后续维权。

后续行动指导：

• 在处理此类问题时，保持冷静和理性至关重要。不要因为一时的气愤而采取过激的行为，以免引发更大的纠纷或冲突。
• 同时，也要注意保护自己的隐私和安全，避免在公开场合透露过多个人信息，减少被他人观察或骚扰的风险。

如有其他疑问或需要进一步的法律帮助，请随时向我咨询。