结论：从法律角度来看，“别人说你没脑子”是否构成人身攻击，需结合具体情境、言辞的严重性以及是否对您的名誉权造成了实际损害来综合判断。

1. 法律定义与构成要件：

   • 人身攻击，在法律上通常与名誉权侵权相关联。名誉权是指公民或法人保持并维护自己名誉的权利，它要求社会对特定主体给予客观、公正的评价。当他人的言辞或行为导致您的社会评价降低，即可能构成对名誉权的侵害。
   • 要构成名誉权侵权，一般需要满足几个要件：存在侮辱、诽谤等侵权行为；这些行为指向特定的个体；侵权行为为第三人所知悉；以及造成了您社会评价的降低或精神损害。

2. 具体情境分析：

   • 言辞的严重性：如果“说你没脑子”是在私下场合，且语气较为轻松，可能并不构成严重的人身攻击。然而，如果这一言辞是在公开场合，尤其是当众侮辱，且语气严厉，那么它很可能构成对名誉权的侵害。
   • 是否造成实际损害：除了言辞的严重性外，还需要考虑这一言辞是否实际上降低了您的社会评价或造成了精神损害。如果因为这一言辞，您在同事、朋友或公众中的形象受到了负面影响，或者您因此感到精神痛苦，那么这可能构成名誉权侵权。
   • 特定指向性：如果言辞明确指向您个人，且没有合理的误解空间，那么它更可能构成对您名誉权的侵害。如果言辞模糊，或者可能指向多人，那么其侵害性可能相对较弱。

3. 法律建议：

   • 收集证据：如果您认为这一言辞构成了对您名誉权的侵害，首先应当收集相关证据，如言辞的录音、录像、证人证言等。
   • 协商与调解：在可能的情况下，您可以尝试与对方进行协商或调解，以寻求和解或道歉。
   • 法律途径：如果协商或调解无果，您可以考虑通过法律途径来维护自己的权益，如向法院提起名誉权侵权诉讼。

4. 可能的法律后果：

   • 如果法院认定对方的行为构成了名誉权侵权，那么对方可能需要承担停止侵害、恢复名誉、消除影响、赔礼道歉以及赔偿损失等民事责任。

进一步思考：在处理此类问题时，除了法律途径外，还可以考虑通过沟通、教育等方式来化解矛盾。毕竟，法律是最后的救济手段，而和谐的人际关系对于个人的生活和工作都至关重要。如果您有任何进一步的疑问或需要法律帮助，请随时向我咨询。