若村书记无正当理由拒绝调解，您可采取以下措施维护自身权益：

1. 明确村书记调解职责的法律依据
   根据《中华人民共和国人民调解法》第8条，村民委员会、居民委员会设立人民调解委员会，负责调解民间纠纷。村书记作为村委会负责人，虽非必须亲自调解，但有义务组织调解或指定调解员。若其无正当理由拒绝，可能构成行政不作为。

2. 分情况处理村书记拒绝调解的情形

   • 情况一：村书记以“非职责范围”为由拒绝
     若纠纷属于民事范畴（如相邻权、噪音扰民等），村书记无权以“非职责”推脱。您可向其说明调解的法定性，并要求其出具书面拒绝理由。若仍拒绝，可向乡镇政府或司法所投诉，要求督促履行职责。
     
   • 情况二：村书记以“无调解能力”为由拒绝
     若村书记称缺乏调解经验或资源，您可要求其联系上级调解组织（如乡镇人民调解委员会）介入。根据《人民调解法》第17条，跨区域纠纷可由共同上级调解组织协调处理。
     
   • 情况三：村书记存在偏袒或消极态度
     若村书记与对方存在利害关系（如亲属关系），可能影响调解公正性。此时您可直接向乡镇司法所申请指定其他调解员，或依据《人民调解法》第20条，要求回避并更换调解人员。

3. 替代性纠纷解决途径

   • 申请乡镇或县级调解组织介入：向乡镇司法所、综治办或县级人民调解中心提交书面调解申请，附上纠纷事实证据（如录音、照片、证人联系方式等）。
     
   • 提起民事诉讼：若调解无果，可直接向法院起诉。根据《民法典》第288条（相邻关系处理原则），法院将依据事实和法律判决，如要求对方停止侵害、赔偿损失等。
     
   • 报警处理：若纠纷涉及治安管理（如故意毁坏财物、威胁人身安全），可拨打110报警，由公安机关依据《治安管理处罚法》处理。

4. 证据固定与程序合规建议

   • 书面记录：每次沟通（包括电话、当面）尽量以书面形式留存（如短信、邮件），注明时间、对方身份及拒绝理由。
     
   • 证人证言：邀请无利害关系的邻居或亲友见证纠纷过程，并出具书面证言。
     
   • 现场取证：对纠纷现场（如被破坏的财物、噪音超标等）拍照、录像，必要时申请公证或委托第三方机构鉴定。

行动建议：

1. 优先通过书面形式（如挂号信、电子邮件）向村书记提出调解申请，明确纠纷事实、调解请求及法律依据，并留存送达凭证；
   
2. 若村书记仍拒绝，7日内向乡镇司法所提交《调解申请书》及证据材料，要求启动调解程序；
   
3. 若调解未果，30日内向法院起诉，并同步申请诉前财产保全（如涉及赔偿）以保障执行。
   

如需进一步指导具体操作流程或文书撰写，可直接向我咨询。