这种观点是错误的，别人家的工资发到你这里，并不意味着他们家就不用交税了。针对这个问题，我们从以下几个方面进行分析：

一. 工资发放与纳税义务的关系

1. 工资发放的对象：工资应当发放给实际提供劳动服务的个人，即劳动者。如果工资错误地发放给了非劳动者（如你所述的情况），这并不改变原劳动者应享有的工资权益，也不改变原雇主应履行的纳税义务。
2. 纳税义务的产生：根据《中华人民共和国个人所得税法》，个人所得包括工资、薪金所得等，应依法缴纳个人所得税。雇主在支付工资时，有义务代扣代缴个人所得税。因此，无论工资发放给谁，只要该工资属于劳动者的劳动所得，且达到了纳税标准，就应当缴纳个人所得税。

二. 税务处理的正确性

1. 错误的工资发放：如果工资错误地发放给了你，你应当及时与发放方沟通，说明情况并退回错误发放的工资。
2. 税务处理的必要性：即使工资错误发放，原雇主仍然需要根据实际支付的工资情况，依法进行税务申报和缴纳。如果因为错误发放而导致税务处理不当，可能会面临税务部门的处罚。

三. 法律责任的明确

1. 发放方的责任：工资发放方有责任确保工资的正确发放，并依法履行代扣代缴个人所得税的义务。如果因为发放错误而导致税务问题，发放方可能需要承担相应的法律责任。
2. 你的责任：作为非劳动者，你收到错误发放的工资后，有义务及时退回，并配合发放方进行正确的税务处理。

综上所述，别人家的工资发到你这里，并不意味着他们家就不用交税了。正确的做法是，你应当及时与发放方沟通并退回错误发放的工资，同时发放方也应当依法进行税务处理。如有进一步需要，您可以继续咨询我。