结论：离高速路近并不直接构成阻止施工的合法理由，是否可以不让施工需根据具体情况判断，包括施工是否合法、是否侵犯了您的合法权益等。
分析说明：
施工合法性：
- 如果施工是依法进行的，且已经获得了所有必要的许可和批准，那么即使施工地点离高速路近，您也不能单纯因为距离问题而阻止施工。施工合法性是判断能否阻止施工的首要因素。
侵权情况：
- 如果施工行为侵犯了您的合法权益，比如造成了噪音污染、环境污染、影响了您的正常生活或经营等，那么您有权要求施工方停止侵权行为，并可能通过法律途径寻求赔偿。但这种情况下，阻止施工的理由是侵权，而非单纯因为离高速路近。
相邻权保护：
- 根据《民法典》中关于相邻权的规定，不动产的相邻权利人应当按照有利生产、方便生活、团结互助、公平合理的原则，正确处理相邻关系。如果施工行为违反了这一原则，对您的生活或经营造成了不合理的影响，您可以依法主张自己的相邻权，要求施工方采取措施减少影响或停止施工。但同样，这并非单纯因为离高速路近，而是因为施工行为对您的相邻权造成了侵犯。
规划与审批：
- 如果施工项目在规划和审批阶段就存在违法违规行为，比如未按照规定的距离进行规划、未获得必要的环境评估报告等，那么您可以向相关部门举报，要求停止施工。但这种情况下，阻止施工的理由是施工项目的违法违规性，而非单纯因为离高速路近。
行动建议：
- 了解施工合法性：首先，您需要了解施工项目是否已经获得了所有必要的许可和批准，以及施工是否符合相关规划和环保要求。
- 评估侵权情况：如果施工行为对您的生活或经营造成了影响，您需要评估这种影响是否构成了侵权，并收集相关证据。
- 协商与调解：在了解情况后，您可以尝试与施工方进行协商，寻求双方都能接受的解决方案。如果协商不成，您可以考虑向相关部门投诉或寻求法律援助。
- 法律途径：如果施工行为确实侵犯了您的合法权益，且协商和调解无果，您可以通过法律途径维护自己的权益，比如提起民事诉讼或申请行政复议等。
后续思考：在处理此类问题时，建议您保持冷静和理性，通过合法途径维护自己的权益。同时，也建议您在未来的生活中多了解一些相关法律法规，以便在遇到类似问题时能够更好地应对。如果您有任何具体的法律问题或需要进一步的法律建议，请随时向我咨询。