结论：您可以报警，但报警后警方如何处理取决于具体情况。以下从不同角度为您详细分析：
一、从治安管理角度分析
麻将馆如果存在噪音扰民的情况，这违反了《中华人民共和国治安管理处罚法》中关于制造噪声干扰他人正常生活的规定。根据该法第五十八条：“违反关于社会生活噪声污染防治的法律规定，制造噪声干扰他人正常生活的，处警告；警告后不改正的，处二百元以上五百元以下罚款。”
- 情况分析：如果您老公在小区麻将馆打麻将到很晚，产生的噪音已经严重影响到您和其他邻居的正常休息和生活，那么您可以向警方报案。警方在接到报案后，会前往现场进行调查，如果确认存在噪音扰民的情况，会先给予警告，要求麻将馆停止制造噪音。如果麻将馆在警告后仍不改正，警方可以对其处以罚款。
二、从家庭关系及社区调解角度分析
虽然报警是一种解决方式，但考虑到这可能涉及到家庭关系以及社区和谐，在报警之前，您也可以尝试一些更温和的解决途径。
- 家庭内部沟通：首先，您可以和您老公进行深入的沟通，表达您对他晚归以及麻将馆噪音的不满和担忧，尝试通过家庭内部的方式解决问题。
- 社区调解：如果家庭内部沟通无果，您可以向小区的物业或者社区居委会反映情况，请求他们协助调解。社区调解往往能够更直接地接触到问题双方，更容易找到双方都能接受的解决方案。
三、报警后的可能处理结果
- 如果构成噪音扰民：如前文所述，警方会依据《中华人民共和国治安管理处罚法》的相关规定进行处理，可能包括警告、罚款等。
- 如果不构成噪音扰民：如果警方调查后认为麻将馆的噪音并未达到扰民的程度，或者您无法提供充分的证据证明噪音扰民，那么警方可能不会对麻将馆进行处罚。但您可以要求警方协助您与麻将馆进行沟通，寻求一个双方都能接受的解决方案。
四、建议
- 收集证据：在报警之前，您可以尝试收集一些证据，比如录音、录像或者邻居的证言，以证明麻将馆的噪音确实影响到了您的正常生活。
- 保持冷静：在处理这个问题时，保持冷静和理性是非常重要的。避免因为情绪激动而做出一些过激的行为，这可能会让问题变得更加复杂。
- 寻求法律帮助：如果您在处理这个问题过程中遇到任何法律难题或者需要进一步的法律建议，都可以直接向我咨询。
希望以上分析能够对您有所帮助。如果您还有其他问题或者需要进一步的法律建议，请随时告诉我。