结论：若您不小心被诱导向寺庙捐款，想要退回捐款，能否成功及退回的理由需视具体情况而定，主要可从是否存在欺诈、胁迫或重大误解等情形来主张权利。以下为您详细分析：

一、可主张退回捐款的情形及法律依据

1. 欺诈情形：

   • 法律依据：根据《中华人民共和国民法典》第一百四十八条，一方以欺诈手段，使对方在违背真实意思的情况下实施的民事法律行为，受欺诈方有权请求人民法院或者仲裁机构予以撤销。
   • 分析：若寺庙或相关人员通过虚构事实、隐瞒真相等方式，诱使您进行捐款，且您因此陷入了错误认识并作出了捐款行为，那么您有权主张撤销该捐款行为，并要求退回捐款。

2. 胁迫情形：

   • 法律依据：根据《中华人民共和国民法典》第一百五十条，一方或者第三人以胁迫手段，使对方在违背真实意思的情况下实施的民事法律行为，受胁迫方有权请求人民法院或者仲裁机构予以撤销。
   • 分析：若寺庙或相关人员通过威胁、恐吓等手段，迫使您进行捐款，那么您同样有权主张撤销该捐款行为，并要求退回捐款。

3. 重大误解情形：

   • 法律依据：根据《中华人民共和国民法典》第一百四十七条，基于重大误解实施的民事法律行为，行为人有权请求人民法院或者仲裁机构予以撤销。
   • 分析：若您对捐款的对象、用途、金额等存在重大误解，且该误解直接影响了您的捐款决定，那么您也可以主张撤销该捐款行为，并要求退回捐款。但需要注意的是，重大误解的认定需满足一定的条件，如误解需达到重大程度、误解需与行为后果有直接因果关系等。

二、实际操作建议

1. 收集证据：

   • 在主张退回捐款前，您需要收集相关证据，如捐款凭证、与寺庙或相关人员的沟通记录、现场照片或视频等，以证明您是在被欺诈、胁迫或存在重大误解的情况下进行的捐款。

2. 与寺庙协商：

   • 在收集到足够证据后，您可以先尝试与寺庙进行协商，说明情况并要求退回捐款。若寺庙同意退回，则问题得到解决；若寺庙拒绝退回，则您可以考虑通过法律途径解决。

3. 寻求法律帮助：

   • 若协商无果，您可以向当地的人民法院或仲裁机构提起诉讼或仲裁申请，要求撤销捐款行为并退回捐款。在此过程中，您可能需要聘请律师来协助您处理相关法律事务。

三、注意事项

• 时效性：根据《中华人民共和国民法典》的相关规定，撤销权的行使有一定的期限限制。因此，在发现被欺诈、胁迫或存在重大误解后，您应尽快行使撤销权，以免超过期限而丧失权利。
• 理性处理：在处理此类问题时，建议您保持理性态度，避免采取过激行为或言语攻击等不当方式。通过合法途径维护自己的权益是更为明智的选择。

若您有进一步的法律问题或需要更详细的法律建议，请直接向我咨询。