工厂侵权导致的残疾赔偿金，在计算时通常不需要减去伤残津贴。以下是对这一问题的详细分析：

一、残疾赔偿金与伤残津贴的性质

1. 残疾赔偿金：这是根据《中华人民共和国民法典》等相关法律规定，因侵权行为导致受害人残疾时，侵权人应向受害人支付的一定数额的金钱赔偿。其目的在于弥补受害人因残疾而遭受的损失，包括但不限于生活费用、医疗费用、护理费用等。

2. 伤残津贴：这通常是在工伤保险制度下，对于因工作遭受事故伤害或者患职业病需要暂停工作接受工伤医疗的职工，在停工留薪期内，原工资福利待遇不变，由所在单位按月支付。如果职工因工致残被鉴定为一级至四级伤残，还会从工伤保险基金按月支付伤残津贴。伤残津贴是工伤保险待遇的一部分，旨在保障工伤职工的基本生活。

二、残疾赔偿金与伤残津贴的关系

1. 不同法律体系：残疾赔偿金主要依据的是侵权责任法（现已被民法典侵权责任编替代），而伤残津贴则主要依据的是工伤保险条例。两者属于不同的法律体系，具有不同的法律性质和目的。

2. 不重复计算：在计算残疾赔偿金时，通常不会考虑受害人是否已经获得了伤残津贴。因为残疾赔偿金是为了弥补受害人因残疾而遭受的额外损失，而伤残津贴则是为了保障工伤职工的基本生活。两者并不冲突，也不存在重复计算的问题。

三、特殊情况下的处理

1. 工伤保险与侵权责任竞合：在某些情况下，受害人可能同时符合工伤保险和侵权责任的赔偿条件。例如，职工在上下班途中遭受非本人主要责任的交通事故伤害，既可能构成工伤，也可能构成侵权责任。在这种情况下，受害人可以同时获得工伤保险待遇和侵权赔偿。但是，对于已经由工伤保险基金支付的费用（如医疗费用、伤残津贴等），在计算侵权赔偿时可能会进行相应的扣除或调整，以避免重复赔偿。然而，这种扣除或调整通常并不涉及残疾赔偿金的计算。

2. 具体案件具体分析：每个案件的具体情况都有所不同，包括受害人的伤残程度、侵权人的过错程度、双方的经济状况等。因此，在计算残疾赔偿金时，需要综合考虑各种因素，并根据具体情况进行判断。如果受害人已经获得了伤残津贴，但这并不影响其向侵权人主张残疾赔偿金的权利。

四、建议

1. 咨询专业律师：虽然上述分析提供了一般性的指导，但每个案件的具体情况都有所不同。因此，在处理具体案件时，建议咨询专业律师以获取更准确的法律意见。
2. 保留相关证据：无论是在申请工伤保险待遇还是主张侵权赔偿时，都需要提供充分的证据来支持自己的主张。因此，建议受害人保留好与事故相关的所有证据，如医疗记录、事故认定书、证人证言等。

如果您有进一步的疑问或需要更具体的法律建议，请直接向我咨询。