结论：楼下上来骂人，一般情况下不能直接以侵犯相邻权起诉，但可能涉及侵犯人格权，具体需结合骂人的具体情节和后果来判断。

分析说明：

1. 相邻权与人格权的区别：

   • 相邻权：主要指的是不动产的相邻各方在行使所有权或使用权时，因相互间依法应当给予方便或接受限制而发生的权利义务关系。比如，关于通风、采光、排水等方面的权利。
   • 人格权：是民事主体享的生命权、身体权、健康权、姓名权、名称权、肖像权、名誉权、荣誉权、隐私权等权利。它关注的是个人尊严和价值的保护。

2. 楼下骂人行为的分析：

   • 如果楼下上来骂人，主要是针对个人进行辱骂、诽谤等，这更多涉及的是对个人名誉、尊严的侵犯，即人格权的侵犯。
   • 除非骂人行为严重到影响了你的正常生活，比如持续不断的辱骂、骚扰，导致你无法正常居住或使用房屋，这种情况下可能间接涉及到相邻权的某些方面，但核心还是人格权的侵犯。

3. 法律后果与救济途径：

   • 如果楼下骂人行为构成了对人格权的侵犯，你可以依据《中华人民共和国民法典》中关于人格权保护的规定，向法院提起民事诉讼，要求对方停止侵害、赔礼道歉、赔偿损失等。
   • 在提起诉讼前，建议先收集相关证据，如录音、录像、证人证言等，以证明对方确实存在骂人行为，并且该行为对你造成了损害。

特殊场景：

• 如果骂人行为伴随着其他更严重的侵权行为，如殴打、破坏财物等，那么除了可能涉及人格权侵犯外，还可能涉及其他法律责任，如治安管理处罚或刑事责任。

行动建议：

• 首先，尝试与楼下进行沟通，看是否能够通过协商解决问题。
• 如果沟通无果，且骂人行为持续存在，建议收集证据并咨询专业律师（即向我咨询），以便更好地维护自己的合法权益。
• 在提起诉讼前，也可以考虑向社区、物业或相关部门反映情况，寻求他们的帮助和调解。