结论：关于“有老婆的男人亲属卡怎么说不会背起诉要回去”这一问题，关键在于明确亲属卡的性质、赠与的意图以及是否存在可撤销赠与的法定情形。若亲属卡被视为一般赠与且不存在法定撤销情形，则通常不会被起诉要回；但若存在特定情形，如欺诈、胁迫或赠与财产为夫妻共同财产且未经另一方同意等，则可能面临被起诉要回的风险。
分析：
亲属卡的性质：
- 亲属卡若被视为一般赠与，即无偿给予对方某种财产或权益，且赠与行为已经完成，那么根据《中华人民共和国民法典》中关于赠与合同的规定，赠与人在赠与财产的权利转移之前可以撤销赠与，但已经转移的，除法定情形外，不得撤销。
赠与的意图：
- 若赠与亲属卡是出于自愿、真实的意思表示，且没有受到欺诈、胁迫等不正当手段的影响，那么该赠与行为是有效的。
- 若赠与行为存在欺诈、胁迫等情形，受赠人可能面临赠与被撤销的风险，此时赠与人有权通过法律途径要求返还。
夫妻共同财产的问题：
- 若赠与的亲属卡所涉及的财产属于夫妻共同财产，且赠与行为未经另一方同意，那么该赠与行为可能因侵犯另一方的财产权益而被视为无效。
- 在这种情况下，另一方有权通过法律途径要求返还赠与的财产，包括亲属卡所代表的权益。
可撤销赠与的法定情形：
- 根据《中华人民共和国民法典》的相关规定，赠与人在以下情形下可以撤销赠与：严重侵害赠与人或者赠与人近亲属的合法权益；对赠与人有扶养义务而不履行；不履行赠与合同约定的义务。
- 若存在上述情形之一，赠与人有权通过法律途径要求撤销赠与并返还财产。
建议：
- 明确赠与意图：在赠与亲属卡时，应明确赠与的意图和条件，确保赠与行为是自愿、真实且合法的。
- 尊重夫妻共同财产：若赠与的财产属于夫妻共同财产，应事先征得另一方的同意，以避免侵犯其财产权益。
- 了解法律后果：在赠与亲属卡前，应了解相关法律法规和可能面临的法律后果，以便在必要时采取相应的法律措施。
- 保留证据：在赠与过程中，应保留好相关证据，如赠与协议、转账记录等，以便在发生纠纷时能够证明自己的权益。
后续行动：
- 若您已经赠与了亲属卡且担心被起诉要回，建议您先与对方进行沟通协商，了解对方的意图和诉求。
- 若沟通无果或对方提出不合理要求，您可以咨询专业律师（即我，谭芳律师，专注于离婚、离婚财产纠纷、婚姻家庭等领域），了解您的法律权益和可能的法律途径。
- 根据律师的建议和您的实际情况，采取相应的法律措施来维护自己的权益。