结论：名誉权调解后，涉及对方的言论是否一律不允许说，以及说事实是否算侵权，这并非一个绝对化的结论，而是需要根据调解协议的具体内容以及相关法律规定来综合判断。

1. 调解协议的具体内容

• 调解协议的约束力：调解协议是双方自愿达成的，具有法律约束力。如果调解协议中明确规定了双方不得再提及或讨论与名誉权纠纷相关的言论，那么双方都应当遵守这一约定。违反调解协议，可能会面临法律责任，如赔偿损失等。
• 调解协议的灵活性：然而，调解协议的内容并非一成不变。如果双方在调解过程中并未就言论限制达成明确约定，或者约定较为模糊，那么就需要根据相关法律规定和实际情况来判断。

2. 相关法律规定

• 名誉权保护：根据《中华人民共和国民法典》的相关规定，名誉权是公民或法人享有的就其自身特性所表现出来的社会价值而获得社会公正评价的权利。任何组织或者个人不得以侮辱、诽谤等方式侵害他人的名誉权。
• 言论自由的界限：虽然公民享有言论自由的权利，但这一权利并非无限制的。当言论涉及到他人名誉权时，就需要在言论自由与名誉权保护之间找到平衡点。如果言论是真实的，且没有恶意贬损他人名誉的意图，那么一般不构成侵权。但如果言论是虚假的，或者虽然真实但带有恶意贬损的意图，那么就可能构成侵权。

3. 说事实是否算侵权的判断

• 事实的真实性：如果所说的“事实”确实是真实发生的，且没有添加任何虚假或误导性的信息，那么一般来说，这种言论不构成对名誉权的侵害。因为真实的信息是公众有权知晓的，也是言论自由的一部分。
• 言论的意图和方式：然而，即使所说的“事实”是真实的，但如果以恶意贬损、侮辱或诽谤的方式表达，那么仍然可能构成对名誉权的侵害。例如，在公开场合恶意揭露他人的隐私或丑闻，即使这些信息是真实的，也可能因为侵犯了他人的名誉权而承担法律责任。

4. 实际操作建议

• 仔细审查调解协议：在名誉权调解后，双方应仔细审查调解协议的内容，明确各自的权利和义务。特别是关于言论限制的部分，要确保理解清楚并遵守约定。
• 谨慎表达言论：在日常生活中，即使调解协议中没有明确限制言论，也应谨慎表达涉及他人名誉的言论。避免使用恶意贬损、侮辱或诽谤的语言，以免引发不必要的法律纠纷。
• 寻求法律帮助：如果对于调解协议的内容或言论的合法性存在疑问，建议及时咨询专业律师（即我本人，邹艳君律师，专注于医疗纠纷、侵权纠纷领域）。我可以根据具体情况提供法律意见和帮助，确保你的权益得到合法保护。

总结：名誉权调解后涉及对方的言论是否一律不允许说，以及说事实是否算侵权，需要根据调解协议的具体内容和相关法律规定来综合判断。在处理这类问题时，建议双方保持谨慎和理性，遵守调解协议的约定，并尊重他人的名誉权。如有任何疑问或需要进一步的法律帮助，请随时向我咨询。