面对小区旁边工地晚上施工带来的困扰，您可以采取以下措施来维护自己的合法权益和生活环境的安宁：

一、了解相关法律规定

首先，您需要了解《中华人民共和国噪声污染防治法》及《中华人民共和国环境噪声污染防治法》的相关规定。这些法律规定，在噪声敏感建筑物集中区域内，禁止夜间（一般指晚22点至次日早6点）进行产生噪声的建筑施工作业，除非因特殊需要（如抢修、抢险或生产工艺要求）并取得县级以上人民政府或其有关主管部门的证明，且必须公告附近居民。

二、与施工方协商

1. 方式：您可以尝试与施工方进行协商，推荐由受影响的居民推选代表，亲自前往工地或通过电话、电子邮件等方式与施工方取得联系。
2. 内容：礼貌、理性地说明夜间施工对居民生活的严重影响，请求调整施工时间，避免在夜间休息时段进行高噪音作业。
3. 注意事项：在协商过程中，应保留沟通记录，包括时间、地点、参与人员及对话内容，作为后续可能的证据使用。

三、向相关部门投诉

如果协商无果，您可以向以下部门投诉：

1. 环保部门：拨打12369环保热线进行举报，环保部门将依法检查并处理违规施工行为。
2. 城市管理部门：城管部门也对建筑工地的施工行为有管理职责，可向其投诉施工扰民问题。
3. 其他渠道：还可拨打12345市民服务热线或向当地住房和城乡建设、生态环境主管部门进行投诉。
4. 投诉信息：投诉时需提供工地的具体位置、施工单位名称（如知悉）、噪音污染的具体情况（施工时间、噪音强度、持续时长等）以及对居民生活的影响。同时，留下真实姓名和有效联系方式以便反馈处理结果。

四、寻求法律救济

如果投诉后问题仍未得到解决，且工地夜间施工给您造成了实际的损害（如身体健康受损、财产损失等），您可以考虑通过民事诉讼来维权。在此之前，请准备好相关证据材料，并咨询专业律师以获取法律建议。

五、采取个人防护措施

在等待问题解决的过程中，您可以采取一些个人防护措施以减少施工噪音的影响，如安装隔音窗户、使用耳塞等。这些措施可以在一定程度上减轻噪音对您的干扰。

综上所述，面对工地半夜施工的问题，您应首先了解相关法律规定，尝试与施工方协商解决；若协商无果，则及时向相关部门投诉并寻求法律救济；同时，可采取个人防护措施以减轻噪音对您生活的影响。在整个过程中，保留好相关证据是维权成功的关键。