在县级文物点旁边建房是否违法，需具体看是否符合相关保护规定和是否获得批准。以下是详细分析：

一. 文物点保护范围与建房规定

1. 保护范围规定：根据《中华人民共和国文物保护法》相关规定，文物点周围会划定一定的保护范围，称为文物保护单位的建设控制地带。在这一地带内进行建设活动，需要严格遵守相关法律法规，不得破坏文物保护单位的历史风貌、安全及其环境。
2. 建房限制：在文物保护单位的建设控制地带内建房，通常需要经过文物行政部门的审批，并确保新建建筑不会与文物保护单位产生冲突，不会影响其安全及历史风貌。

二. 建房审批流程

1. 提交申请：若计划在文物点旁边建房，首先需要向当地文物行政部门提交建房申请，并附上相关设计方案、施工图纸等材料。
2. 审批流程：文物行政部门会对申请进行审查，考虑新建建筑对文物保护单位的影响，包括但不限于建筑高度、风格、材料等方面。若审查通过，会颁发相应的批准文件。

三. 违法建房的法律后果

1. 法律责任：若未经批准在文物点旁边建房，或建房活动违反了相关法律法规，将可能面临法律责任，包括但不限于罚款、拆除违法建筑等。
2. 文物保护重要性：文物是国家的宝贵财富，保护文物是每个公民的责任。在文物点旁边建房时，应充分考虑文物保护的重要性，遵守相关法律法规，确保建房活动不会对文物造成损害。

综上所述，在县级文物点旁边建房并不必然违法，但前提是必须符合相关保护规定并获得批准。因此，在计划建房前，建议咨询当地文物行政部门，了解具体的保护要求和审批流程，以避免不必要的法律风险。如有进一步需要，您可以继续咨询我。