结论：是否可以告对方诽谤罪，需根据具体情况判断，若对方故意捏造并散布虚构的事实，损害你老公名誉且情节严重，则可能构成诽谤罪；若只是表达个人看法或存在误解，则一般不构成。

分析如下：

1. 诽谤罪的构成要件：

   • 捏造事实：对方必须故意捏造并散布虚构的事实，即无中生有地编造虚假信息。如果对方只是基于某种误解或猜测而说出这样的话，但并非故意捏造，则不构成诽谤。
   • 散布虚构事实：对方不仅捏造了事实，还将其散布出去，导致你老公的名誉受到损害。散布的方式可以是口头的，也可以是书面的，如通过社交媒体、短信等。
   • 情节严重：诽谤行为必须达到情节严重的程度，才能构成犯罪。这通常意味着诽谤行为对你老公的社会评价造成了显著降低，或者导致了其他严重的后果，如精神损害、经济损失等。

2. 可能不构成诽谤罪的情况：

   • 对方只是表达个人看法：如果对方只是基于自己的观察或了解，表达了对孩子身份的某种看法，但并没有故意捏造事实或散布虚构信息，那么这种行为一般不构成诽谤。
   • 存在误解或信息不准确：有时候，人们可能会因为误解或信息不准确而说出一些不恰当的话。如果对方是因为这种情况而说出“孩子不是你老公的”这样的话，且没有故意损害你老公名誉的意图，那么也不构成诽谤。

3. 建议措施：

   • 收集证据：如果你认为对方的行为构成了诽谤，首先应该收集相关证据，如对方的言论记录、证人证言等，以证明对方确实捏造并散布了虚构的事实。
   • 咨询律师：在收集到足够证据后，建议咨询专业律师（即我，徐建华律师，专注于刑事辩护领域），以评估案件的可行性和可能的结果。律师可以根据具体情况，为你提供更详细的法律建议和指导。
   • 考虑其他法律途径：如果诽谤行为不构成犯罪，但确实对你老公的名誉造成了损害，你还可以考虑通过民事诉讼的方式，要求对方承担侵权责任，如赔偿精神损失等。

后续行动建议：

• 在采取任何法律行动之前，请确保你已经充分了解了相关法律规定和程序，并咨询了专业律师的意见。
• 如果对方的行为确实构成了诽谤，且情节严重，那么及时采取法律行动是保护你老公名誉和权益的重要途径。
• 在处理此类问题时，请保持冷静和理性，避免采取过激或违法的行为来回应对方的诽谤。

如有任何进一步的问题或需要进一步的法律帮助，请随时向我咨询。