结论：被别人说是诈骗，是否可以起诉他，这取决于具体情况。如果对方的行为构成诽谤，你可以考虑通过法律途径维护自己的名誉权；如果对方只是口头指责，并未造成实际损害，则可能不构成起诉的条件。以下是对此问题的详细分析：

一、对方行为构成诽谤的情况

1. 诽谤的定义：诽谤是指故意散布虚构的言论，损害他人名誉的行为。如果对方无端指责你诈骗，且这种指责是虚构的，没有事实依据，那么对方的行为可能构成诽谤。

2. 起诉条件：要起诉对方诽谤，你需要证明对方的行为确实损害了你的名誉，且这种损害是实质性的。这通常需要提供证据，如证人证言、录音录像、书面材料等，来证明对方散布了虚构的言论，并且这些言论对你的名誉造成了负面影响。

3. 法律后果：如果法院认定对方构成诽谤，对方可能需要承担民事责任，包括赔偿你的名誉损失、精神损害抚慰金等。在严重的情况下，如果诽谤行为情节严重，还可能构成刑事犯罪，对方可能面临刑事处罚。

二、对方行为不构成诽谤的情况

1. 口头指责：如果对方只是口头指责你诈骗，但并未散布给其他人，或者这种指责并未对你的名誉造成实质性损害，那么可能不构成诽谤。在这种情况下，起诉对方可能缺乏法律依据。

2. 证据不足：即使对方散布了指责你诈骗的言论，但如果你无法提供足够的证据来证明这些言论是虚构的，或者无法证明这些言论对你的名誉造成了实质性损害，那么起诉对方也可能面临困难。

三、建议与措施

1. 收集证据：如果你认为对方的行为构成诽谤，首先应该收集相关证据，包括对方散布言论的录音录像、书面材料、证人证言等。这些证据将有助于你证明对方的行为确实损害了你的名誉。

2. 咨询律师：在决定是否起诉对方之前，建议你咨询专业律师的意见。律师可以根据你的具体情况，评估起诉的可行性和可能的结果，并为你提供法律建议。

3. 考虑其他途径：除了起诉之外，你还可以考虑通过其他途径来维护自己的名誉权，如向对方发出律师函要求停止侵权行为、通过媒体或社交平台澄清事实等。

四、注意事项

在处理此类问题时，请务必保持冷静和理性。不要因为对方的指责而情绪失控或采取过激行为。同时，也要尊重法律程序和规定，不要试图通过非法手段来解决问题。

如果你有任何进一步的法律问题或需要更详细的法律建议，请直接向我咨询。