不可以直接起诉媒人给女方诈骗你，但可以根据具体情况采取不同的法律措施。以下是对此问题的详细分析：
一、关于媒人不出庭作证的影响
在彩礼官司中，媒人作为证人，其证言可能对案件事实的认定产生一定影响。然而，媒人不出庭作证，并不直接构成女方诈骗的证据。法院在审理案件时，会综合考虑所有证据，包括双方当事人的陈述、书证、物证等，而不会仅凭媒人是否出庭作证来判定案件。
二、关于起诉媒人诈骗的可行性
诈骗罪的构成要件：
- 诈骗罪是指以非法占有为目的，用虚构事实或者隐瞒真相的方法，骗取数额较大的公私财物的行为。
- 在彩礼纠纷中，要构成诈骗罪，需要证明女方以非法占有为目的，通过虚构事实或隐瞒真相的方式骗取男方的彩礼。
媒人的角色与责任：
- 媒人通常只是介绍双方认识，并不直接参与彩礼的给付或接收。
- 除非媒人明知女方有诈骗意图，并积极参与其中，否则媒人一般不构成诈骗罪的共犯。
起诉媒人的法律风险：
- 如果没有充分证据证明媒人参与诈骗，起诉媒人可能面临败诉的风险。
- 错误的起诉可能导致媒人提起反诉，要求赔偿因错误起诉造成的损失。
三、建议采取的法律措施
收集证据：
- 尽可能收集与彩礼给付相关的证据，如转账记录、聊天记录、证人证言等。
- 如果怀疑女方有诈骗行为，可以尝试收集女方虚构事实或隐瞒真相的证据。
与女方协商：
- 在诉讼前，可以尝试与女方协商解决彩礼纠纷。
- 协商过程中，可以明确表达自己的诉求和理由，争取达成和解。
提起民事诉讼：
- 如果协商无果，可以向法院提起民事诉讼，要求女方返还彩礼。
- 在诉讼过程中，可以申请法院调查取证，包括要求媒人出庭作证（但媒人是否出庭作证由其自行决定）。
报警处理（如涉嫌诈骗）：
- 如果确实有证据表明女方涉嫌诈骗，可以向公安机关报案。
- 公安机关会依法进行调查，并根据调查结果决定是否立案侦查。
四、注意事项
- 在处理彩礼纠纷时，应保持冷静和理性，避免采取过激行为。
- 尽可能通过合法途径解决纠纷，如协商、调解、诉讼等。
- 如果有任何疑问或需要进一步的法律帮助，可以直接向我咨询。