结论：是否可以不让对方施工，不能仅依据人民调解协议书上的“不给对方施工问题没谈好”这一表述来决定，而需综合考量人民调解协议书的法律效力、具体内容以及实际情况等多方面因素。

分析如下：

1. 人民调解协议书的法律效力：

   • 人民调解协议书是双方当事人在人民调解委员会主持下，通过平等协商达成的具有民事权利义务内容的协议。根据《中华人民共和国人民调解法》的相关规定，经人民调解委员会调解达成的调解协议，具有法律约束力，当事人应当按照约定履行。
   • 如果调解协议书已经双方签字确认，并且内容合法、不违反公序良俗，那么该协议书对双方均具有法律约束力。

2. 调解协议书的具体内容：

   • 调解协议书上的“不给对方施工问题没谈好”这一表述，较为模糊且不具有明确的操作性。它并未明确说明在何种条件下、以何种方式阻止对方施工，也未规定违反此条款的法律后果。
   • 因此，仅凭这一表述，无法直接得出可以阻止对方施工的结论。需要进一步审查调解协议书的其他条款，以及双方是否有其他补充协议或口头约定。

3. 实际情况的考量：

   • 即使调解协议书中有关于阻止对方施工的条款，也需要考虑实际情况的合理性。例如，如果阻止对方施工将导致工程无法继续进行，造成更大的经济损失或社会影响，那么这种阻止行为可能并不合理。
   • 此外，还需要考虑对方是否已经履行了调解协议书中的其他义务，以及是否存在其他导致无法施工的客观原因。

4. 可能的法律后果：

   • 如果一方未经合法依据擅自阻止对方施工，可能构成违约或侵权行为，需要承担相应的法律责任。例如，可能需要赔偿对方因此遭受的经济损失、支付违约金等。
   • 如果双方对调解协议书的履行存在争议，可以通过协商、调解、仲裁或诉讼等方式解决。在解决争议的过程中，法院或仲裁机构将根据调解协议书的具体内容、实际情况以及相关法律法规进行裁决。

建议：

• 首先，仔细审查人民调解协议书的具体内容，特别是关于施工问题的条款，明确双方的权利和义务。
• 其次，如果认为对方的行为违反了调解协议书或相关法律法规，可以尝试与对方进行协商，寻求和解或达成新的协议。
• 如果协商无果，可以考虑通过法律途径解决争议，如向法院提起诉讼或申请仲裁。在诉讼或仲裁过程中，需要提供充分的证据证明自己的主张。

如有进一步疑问或需要更具体的法律建议，请直接向我咨询。