结论前置：是的，如果他人在你到访时对你进行辱骂，这可能构成侵犯你的人格权，特别是名誉权，是犯法的。

分析说明：

1. 名誉权侵犯：根据《民法典》的相关规定，名誉是对民事主体的品德、声望、才能、信用等的社会评价。任何组织或者个人不得以侮辱、诽谤等方式侵害他人的名誉权。辱骂他人，尤其是当众或在他人能听见的范围内进行，很可能降低受害人的社会评价，从而构成名誉权侵犯。

2. 法律责任：若构成名誉权侵犯，侵权人需承担相应的法律责任，包括但不限于停止侵害、排除妨碍、消除危险、消除影响、恢复名誉、赔礼道歉等。在严重情况下，还可能涉及赔偿损失。

3. 证据收集：若你遭遇此类情况，建议首先保持冷静，并尽可能收集证据，如录音、录像或目击者证言等。这些证据在后续维权过程中将发挥重要作用。

4. 维权途径：你可以通过与侵权人协商、向相关机构投诉或向法院提起诉讼等方式来维护自己的权益。在维权过程中，建议咨询专业律师以获取更具体的法律建议和支持。

综上所述，如果他人在你到访时对你进行辱骂，这很可能构成侵犯你的人格权。你有权要求侵权人停止侵害并承担相应的法律责任。若需要进一步的法律帮助或咨询，请随时向我提问。