结论：是否可以告他遗弃罪，需根据具体情况判断，若符合遗弃罪的构成要件，则可以告；若不符合，则可能无法以遗弃罪论处，但可通过其他途径维护权益。以下为详细分析：

一、遗弃罪的构成要件

根据《中华人民共和国刑法》的相关规定，遗弃罪是指对于年老、年幼、患病或者其他没有独立生活能力的人，负有扶养义务而拒绝扶养，情节恶劣的行为。要构成遗弃罪，需同时满足以下几个要件：

1. 主体要件：行为人必须是负有扶养义务的人，如父母对未成年子女、成年子女对年老父母等。在您所描述的情况下，若该男子与小孩之间存在法律上的父子（女）关系，则他负有扶养义务。

2. 客观要件：行为人必须实施了拒绝扶养的行为，即不履行扶养义务。这包括不提供生活必需品、不给予必要的照顾等。

3. 主观要件：行为人必须出于故意，即明知自己有扶养义务而拒绝履行。

4. 情节恶劣：这是遗弃罪的加重情节，通常包括因遗弃导致被害人重伤、死亡，或者遗弃手段恶劣等。

二、您的情况分析

1. 若符合遗弃罪构成要件：

   • 如果该男子明知小孩是其亲生，且小孩没有独立生活能力，却拒绝扶养，且情节恶劣（如长期不闻不问、不提供生活费用等），则可能构成遗弃罪。
   • 在此情况下，您可以向公安机关报案，由公安机关立案侦查，并最终由检察院提起公诉。

2. 若不符合遗弃罪构成要件：

   • 如果该男子不承认小孩是其亲生，或者虽然承认但认为小孩有独立生活能力（如已成年或具备独立生活能力），则可能不构成遗弃罪。
   • 在此情况下，您虽然无法以遗弃罪论处，但可以通过民事诉讼途径要求该男子承担抚养责任，如支付抚养费等。

三、建议与注意事项

1. 收集证据：无论选择哪种途径维护权益，都需要收集充分的证据来证明该男子与小孩之间的父子（女）关系以及他拒绝扶养的事实。这包括出生证明、亲子鉴定报告、聊天记录、证人证言等。

2. 咨询专业律师：在处理此类复杂法律问题时，建议咨询专业律师以获取更具体的法律建议和指导。虽然我不能直接提供联系方式，但您可以直接向我咨询相关法律问题。

3. 考虑小孩利益：在处理此类纠纷时，应始终将小孩的利益放在首位。确保小孩得到妥善的照顾和抚养是首要任务。

4. 心理支持：此类纠纷可能对小孩和您都造成心理上的伤害。在处理法律问题的同时，也应关注心理健康，必要时寻求心理支持或辅导。