不按探视权协议行事是违法的。以下从多个角度对此问题进行详细分析：
一、法律基础与规定
根据《中华人民共和国民法典》第一千零八十六条，离婚后，不直接抚养子女的父或者母，有探望子女的权利，另一方有协助的义务。行使探望权利的方式、时间由当事人协议；协议不成的，由人民法院判决。这一条款明确了探视权的法律基础，以及双方应遵守的协议或判决内容。
二、不按协议行事的法律后果
民事责任：如果直接抚养子女的一方不按探视权协议行事，无故拒绝对方探视，这种行为违反了法律规定，侵害了对方的合法权益。对此，有探望权的一方可以通过向人民法院起诉来实现自己的探望权。法院会根据具体情况作出判决，强制要求抚养方履行协助探视的义务。若对方仍拒不履行，法院可采取罚款、拘留等强制措施。
对子女权益的影响：长期阻止另一方探视，会破坏子女与未直接抚养方的感情交流，影响子女身心健康成长。这可能导致子女对父母关系产生扭曲认知，不利于其形成健全人格和良好家庭观念。
三、特殊情况下的处理
虽然不按探视权协议行事通常被视为违法，但在某些特殊情况下，如探望行为被认定不利于子女身心健康，人民法院有权依法中止探望。然而，一旦中止事由消失，如孩子健康状况改善或探望方行为改变等，探视权应当得到恢复。此时，双方应重新协商探视方式和时间，或诉诸法院进行裁决。
四、建议与措施
沟通协商：首先尝试与对方进行沟通协商，要求对方依法协助自己行使探视权。通过友好协商，双方可以达成一致，避免法律纠纷。
提起诉讼：若协商无果，可以向人民法院提起诉讼，要求对方协助自己行使探视权，并提供充分的证据证明自己有探视权且对方的阻挠行为违反了法律规定。
申请强制执行：如果法院支持了自己的诉讼请求，但对方仍然拒不执行判决，可以申请法院强制执行，包括拘留、罚款等强制措施。
总结来看，不按探视权协议行事是违法的，可能面临民事责任和对子女权益的不良影响。双方应遵守法律规定，确保不直接抚养子女的一方依法享有探视权。在面对探视权纠纷时，应依法维护自己的权益，通过法律途径解决争议。如果您在探视权问题上遇到难题，可以直接向我咨询，我会根据您的具体情况提供专业的法律建议。