结论：在您描述的情况下，是否需要担责取决于多个因素，包括您是否尽到了合理的注意义务、是否知道或应当知道拆除行为的违法性、以及您与雇主之间的约定等。以下从不同角度进行分析：

1. 注意义务与知情情况：

   • 作为承揽人，您在接受雇主雇佣时，有义务对工作的性质、目的和合法性进行一定的了解和判断。如果您在承揽工作时，未对拆除行为的合法性进行任何询问或调查，且从常理上判断应当能够意识到该拆除行为可能存在问题（如没有合法的拆除手续、拆除对象存在争议等），那么您可能因未尽到合理的注意义务而承担一定的责任。
   • 相反，如果您在承揽工作时，已经尽到了合理的注意义务，比如询问了雇主关于拆除的合法手续、拆除对象的情况等，且雇主明确表示一切合法，您基于对雇主的信任而进行了拆除工作，同时您确实不知道且没有理由知道该拆除行为是违法的，那么您可能不需要承担责任或承担较少的责任。

2. 与雇主之间的约定：

   • 您与雇主之间的承揽合同或口头约定也是判断您是否需要担责的重要因素。如果合同中明确约定了您只负责按照雇主的指示进行拆除工作，且雇主保证拆除行为的合法性，那么在雇主违约导致拆除行为违法的情况下，您可能不需要承担责任或可以依据合同向雇主追偿。
   • 如果合同中没有明确约定或约定不明确，那么您可能需要根据实际情况和法律规定来判断自己的责任。

3. 法律后果与责任承担：

   • 如果拆除行为被认定为违法强拆，且您被认定需要承担责任，那么您可能面临的法律后果包括民事赔偿、行政处罚甚至刑事责任（如果拆除行为构成犯罪的话）。但具体责任的大小和性质需要根据您的过错程度、拆除行为的后果以及相关法律法规的规定来确定。

建议：

• 在未来承揽类似工作时，务必对工作的性质、目的和合法性进行充分的了解和判断，必要时可以要求雇主提供相关的合法手续或证明。
• 如果发现拆除行为可能存在问题或违法，应立即停止工作并向相关部门报告或咨询专业律师的意见。
• 如果已经因类似情况被卷入法律纠纷，建议尽快咨询专业律师，以便根据具体情况制定合适的应对策略。

进一步思考：

• 在实际操作中，如何界定“知道或应当知道”拆除行为的违法性是一个复杂的问题，需要根据具体情况和证据来判断。
• 如果您与雇主之间的约定存在争议或不明确，那么合同解释和证据收集将成为关键。因此，在签订合同时，务必明确双方的权利和义务，并保留好相关证据。