结论：村书记半夜来你楼下骂你这一行为，本身并不直接导致其被撤职，但可能构成违纪或违法行为，你可以通过相应途径进行投诉或举报，由相关部门根据具体情况决定是否对其撤职。

分析说明：

1. 撤职的法定条件：

   • 撤职通常是对公职人员严重违反纪律或法律的一种处分措施。它需要满足一定的法定条件，如公职人员存在贪污受贿、滥用职权、玩忽职守等严重违法行为，或者违反工作纪律、生活纪律等造成恶劣影响的行为。
   • 村书记半夜来你楼下骂你，这一行为虽然不当，但单独来看并不直接构成撤职的法定条件。它可能更多地涉及到个人道德品质、工作作风或违反社会公德等方面的问题。

2. 行为的性质与后果：

   • 村书记的行为可能构成对他人人格权的侵犯，如名誉权、隐私权等。如果他的辱骂行为造成了你的名誉损害或精神痛苦，你可以依法要求其承担民事责任，如赔礼道歉、赔偿损失等。
   • 同时，村书记的行为也可能违反了村干部的行为规范或工作纪律。你可以向相关部门（如乡镇政府、纪委等）进行投诉或举报，要求对其行为进行调查处理。

3. 撤职的决定程序：

   • 如果村书记的行为确实严重违反了纪律或法律，且造成了恶劣影响，相关部门可能会启动撤职程序。但这需要经过严格的调查、取证和审议程序，确保决定的合法性和公正性。
   • 撤职决定通常由有权机关（如乡镇人大、上级政府等）作出，并需要遵循一定的法律程序和规定。

行动建议：

• 收集证据：如果可能的话，尽量收集村书记辱骂你的证据，如录音、录像、证人证言等。这些证据将有助于你后续维权或投诉。
• 投诉举报：向相关部门（如乡镇政府、纪委等）进行投诉或举报，说明村书记的行为情况，并要求对其行为进行调查处理。
• 法律维权：如果村书记的行为造成了你的名誉损害或精神痛苦，你可以考虑通过法律途径维护自己的权益，如提起民事诉讼要求赔偿损失等。

后续思考：

• 在处理此类问题时，除了关注村书记的行为本身外，还应关注其背后的原因和动机。这有助于你更全面地了解问题，并采取更有效的应对措施。
• 同时，你也应了解自己的权利和义务，以及相关的法律程序和规定。这将有助于你更好地维护自己的权益，并避免不必要的法律风险。

如有其他疑问或需要进一步的法律帮助，请直接向我咨询。