继承人可以主张被继承人生前赠予给情人的房屋的赠与行为无效，但具体能否成功需视情况而定。以下是从不同角度进行的分析：
一、从赠与行为本身的有效性来看
赠与合同的成立与生效：
- 赠与合同是赠与人与受赠人之间就赠与财产达成的协议。根据《中华人民共和国民法典》的相关规定，赠与合同自赠与人表示赠与、受赠人表示接受时成立。若赠与的房屋已经完成了过户登记等权利转移手续，则赠与合同在形式上已经生效。
赠与行为的合法性：
- 赠与行为必须合法，不得违反法律、行政法规的强制性规定，也不得违背公序良俗。如果赠与行为是基于不正当关系（如情人关系）且损害了其他继承人的合法权益，那么该赠与行为可能因违反公序良俗而被认定为无效。
二、从继承人的角度主张赠与行为无效
继承人的权益保护：
- 继承人作为被继承人的法定财产权益承受者，有权对被继承人生前的财产处分行为提出异议。如果赠与行为损害了继承人的合法权益，继承人可以主张该赠与行为无效。
主张无效的法律依据：
- 继承人可以依据《中华人民共和国民法典》中关于民事法律行为无效的规定来主张赠与行为无效。特别是当赠与行为违反法律、行政法规的强制性规定或违背公序良俗时，继承人可以请求法院确认该赠与行为无效。
- 具体来说，如果赠与行为是基于不正当关系且损害了家庭伦理和社会道德，那么该行为可能因违背公序良俗而被认定为无效。此外，如果赠与行为存在欺诈、胁迫等情形，继承人也可以主张无效。
实践中的考量因素：
- 在实践中，法院会综合考虑多种因素来判断赠与行为是否无效。这些因素包括赠与行为的动机、目的、方式、后果以及是否损害了其他继承人的合法权益等。
- 如果继承人能够提供充分的证据证明赠与行为是基于不正当关系且损害了其合法权益，那么法院可能会支持继承人的主张，确认赠与行为无效。
三、可能面临的法律后果与建议
法律后果：
- 如果赠与行为被确认无效，那么房屋应当返还给被继承人的遗产范围，由继承人按照法定继承或遗嘱继承的方式继承。
建议：
- 对于继承人来说，如果发现被继承人生前有赠予给情人的房屋等财产处分行为，且怀疑该行为损害了其合法权益，建议及时收集相关证据（如赠与合同、过户记录、证人证言等）并咨询专业律师。
- 律师会根据具体情况为继承人提供法律建议，并协助继承人通过法律途径主张权利。
总结来说，继承人可以主张被继承人生前赠予给情人的房屋的赠与行为无效，但具体能否成功需视赠与行为是否违反法律、行政法规的强制性规定或违背公序良俗等因素而定。如果有任何疑问或需要进一步的法律帮助，请直接向我咨询。