结论：双方都有家庭的情况下一方收取另一方520元，不能直接认定为出轨，但可能作为出轨的间接证据之一，具体需结合其他证据和实际情况综合判断。以下从不同角度为你详细分析：

一、法律层面：出轨的认定标准

在法律上，出轨（即婚外情）通常指的是夫妻一方或双方在婚姻关系存续期间，与婚外异性发生性关系或保持不正当男女关系的行为。出轨的认定往往需要确凿的证据，如亲密照片、视频、聊天记录、证人证言等，且这些证据需要形成完整的证据链，以证明出轨行为的存在。

仅凭一方收取另一方520元这一行为，并不足以直接证明出轨。因为520元可能只是朋友间的赠与、借款或其他正常经济往来，不能单独作为出轨的证据。

二、道德层面：社会舆论与道德评判

虽然法律上不能仅凭520元就认定出轨，但在道德层面，这种行为可能会引发社会舆论的质疑和道德评判。双方都有家庭的情况下，一方收取另一方的财物，尤其是具有特殊含义的金额（如520元，常被视为表达爱意的数字），很容易让人联想到不正当关系。

如果这种行为被公开或传播，可能会对双方的家庭关系、社会声誉等造成负面影响。因此，即使从法律角度不能认定出轨，从道德角度也应谨慎处理此类行为。

三、实际建议：如何避免误解与纠纷

1. 保持透明沟通：如果双方只是普通朋友或同事关系，建议保持经济往来的透明度，避免使用具有特殊含义的金额进行赠与或借款。

2. 尊重家庭关系：双方都有家庭的情况下，应更加尊重彼此的家庭关系，避免做出可能引发误解或纠纷的行为。

3. 妥善处理证据：如果确实存在正常的经济往来，建议保留好相关证据（如转账记录、聊天记录等），以备不时之需。

4. 寻求法律帮助：如果因此类行为引发了家庭纠纷或法律纠纷，建议及时寻求专业律师的帮助，以维护自己的合法权益。

最后，我想强调的是，婚姻是建立在信任和忠诚基础上的，双方都有家庭的情况下更应珍惜彼此的家庭关系，避免做出可能破坏家庭和谐的行为。如果你有任何关于婚姻家庭方面的法律问题或困惑，都可以直接向我咨询，我会尽我所能为你提供专业的法律帮助。