家人一般不可以追求出借人的责任。下面我来详细解释一下：

在法律上，当你从家里拿出钱借给别人时，这通常被视为你个人的借贷行为，与你的家人没有直接的法律关系。家人并没有直接参与借贷行为，因此他们通常没有权利去追求借款人的责任，除非他们自身也是借贷关系的当事人。

换句话说，如果借条或借贷协议上只有你的名字作为出借人，那么只有你有权去追求借款人的还款责任。家人如果想要维护自己的权益，应该通过与你进行内部协商或采取其他家庭内部的解决方式，而不是直接介入你与借款人之间的借贷关系。

当然，如果家人能够证明他们对你出借的资金有某种特定的权益或贡献，并且这种权益或贡献在借贷行为中得到了明确体现，那么他们可能会根据具体情况有一定的法律地位。但这种情况比较特殊，需要具体案件具体分析。

总之，在一般情况下，家人不可以直接追求出借人的责任。如果你在这方面有任何疑问或需要进一步的法律帮助，请随时向我咨询。