结论：借款人不还钱时，是否可以起诉夫妻双方，需根据具体情况判断，主要看借款是否属于夫妻共同债务。以下分情况详细说明：
一、借款属于夫妻共同债务的情况
共同签字或事后追认：
- 如果借款合同上有夫妻双方的共同签字，或者借款后另一方以书面形式、口头形式或其他方式对借款表示追认，那么该借款应认定为夫妻共同债务。
- 法律依据：根据《中华人民共和国民法典》第一千零六十四条第一款，夫妻双方共同签名或者夫妻一方事后追认等共同意思表示所负的债务，以及夫妻一方在婚姻关系存续期间以个人名义为家庭日常生活需要所负的债务，属于夫妻共同债务。
借款用于家庭日常生活需要：
- 如果借款是用于夫妻共同生活、共同生产经营或者基于夫妻双方共同意思表示，即使只有一方签字，也可能被认定为夫妻共同债务。
- 判断标准：这通常需要根据借款的金额、用途、夫妻双方的收入状况、家庭开支情况等因素进行综合判断。
法律后果：
- 在借款属于夫妻共同债务的情况下，债权人有权向夫妻双方主张债权，要求双方共同偿还借款。
- 如果夫妻双方离婚，该债务仍应由双方共同承担，除非双方有特别约定且债权人同意。
二、借款不属于夫妻共同债务的情况
个人名义借款且未用于家庭共同生活：
- 如果借款是以一方个人名义所借，且未用于家庭共同生活、共同生产经营，那么该借款应认定为个人债务。
- 法律依据：根据《中华人民共和国民法典》第一千零六十四条第二款，夫妻一方在婚姻关系存续期间以个人名义超出家庭日常生活需要所负的债务，不属于夫妻共同债务；但是，债权人能够证明该债务用于夫妻共同生活、共同生产经营或者基于夫妻双方共同意思表示的除外。
虚假债务或非法债务：
- 如果借款是虚构的，或者用于非法活动（如赌博、吸毒等），那么该借款不仅不属于夫妻共同债务，还可能涉及法律责任。
法律后果：
- 在借款不属于夫妻共同债务的情况下，债权人只能向借款方个人主张债权，要求其个人偿还借款。
- 如果借款方无力偿还，债权人不能向其配偶主张债权。
三、实际操作建议
收集证据：
- 在起诉前，债权人应尽可能收集能够证明借款属于夫妻共同债务的证据，如借款合同、转账记录、聊天记录、证人证言等。
咨询专业律师：
- 由于夫妻共同债务的认定涉及复杂的法律问题和事实判断，建议债权人在起诉前咨询专业律师，以便更准确地判断借款是否属于夫妻共同债务，并制定合适的诉讼策略。
注意诉讼时效：
- 债权人应在借款到期后及时起诉，以免超过诉讼时效而丧失胜诉权。
如有具体法律问题或需要进一步的法律帮助，请直接向我咨询。我将根据你的具体情况，提供更详细、更专业的法律建议。