关于撤销行政协议是否可以不复议直接起诉的问题，结论是：这取决于具体的法律情境和事实情况，一般情况下可以，但特殊情况下可能受到限制。以下是对此问题的详细分析：
一、一般情况
在大多数情况下，如果法律、法规并未明确规定必须先经过行政复议才能提起行政诉讼（即不属于复议前置的情形），当事人在认为行政协议存在问题并希望撤销时，是享有直接向人民法院提起行政诉讼的权利的。这是因为行政复议和行政诉讼都是解决行政争议、维护合法权益的途径，当事人有权自主选择救济方式。因此，在这种情况下，你可以直接起诉，而无需先进行行政复议。
二、特殊情况
然而，也存在一些特殊情况，其中撤销行政协议后直接起诉可能会受到限制：
复议前置的特定情形：
- 如果法律、法规明确规定了行政复议是提起行政诉讼的前置程序（如某些特定的税收争议、自然资源确权争议等），那么在这种情况下，你必须先完成行政复议程序，才能进入行政诉讼阶段。如果你撤回了行政复议申请，通常就不能直接向人民法院提起行政诉讼了。
复议机关已改变原行政协议：
- 如果你在撤回行政复议申请之前，复议机关已经对原行政协议进行了改变（如撤销、变更或确认违法等），并且你对这一改变表示满意并撤回了复议申请，那么后续通常不能再就该协议提起行政诉讼。因为此时原行政协议已经被新的行政行为所替代，诉讼的对象已经不存在。
自愿撤回并明确放弃诉权：
- 如果你在撤回行政复议申请时，明确表示放弃向人民法院提起行政诉讼的权利，那么法院可能会基于你的意思自治原则，认定你放弃了诉权，从而不受理你的起诉。但法院在审查时也会综合考虑各种因素，确保你的放弃是真实、自愿且不存在受胁迫等情形。
规避法律监督或其他不正当理由：
- 如果你撤回行政复议申请是出于规避法律监督的目的，或者存在其他不正当的理由，即使你提起了行政诉讼，法院也可能会对你的起诉进行限制或不予受理。这是为了维护行政复议和行政诉讼制度的严肃性和有效性，防止你滥用权利。
三、法律建议
仔细审查相关法律法规：
- 在决定是否直接起诉之前，你应仔细审查与行政协议相关的法律法规，确定是否存在复议前置的规定或其他特殊限制。
咨询专业意见：
- 如果你对相关法律法规的理解存在疑问，或者不确定自己的情况是否属于特殊情形，建议你向我咨询，我会根据你的具体情况提供专业的法律意见。
准备充分的证据材料：
- 如果你决定直接起诉，你应准备充分的证据材料来支持你的诉讼请求，包括行政协议文本、相关法律法规、行政机关的答复或决定等。
注意起诉时效：
- 你还应注意起诉的时效问题，确保在法定的起诉期限内提起诉讼，以免丧失诉讼权利。
如果你有任何关于行政协议撤销或行政诉讼的疑问，都可以直接向我咨询，我会为你提供详细的法律解答和专业的法律建议。