男方不正面回答问题本身不算证据。下面我将对此进行详细分析：

一. 证据的定义与要求

1. 定义：根据《刑事诉讼法》第四十八条，可以用于证明案件事实的材料，都是证据。证据必须经过查证属实，才能作为定案的根据。
2. 要求：证据需要具有客观性、关联性和合法性，即证据必须是真实存在的，与案件事实有关联，且来源合法。

二. 男方不正面回答问题的性质

1. 非直接证据：男方不正面回答问题，只是表现出一种态度或行为，并没有直接提供任何关于案件事实的信息。
2. 缺乏证明力：这种行为本身无法直接证明或反驳案件中的任何关键事实，因此不具有证据的证明力。

三. 可能的相关情况

1. 如果男方在法庭上拒绝回答：在法庭上，如果一方当事人拒绝回答与案件相关的问题，这可能被视为一种态度或行为表现，但并不能直接作为证据使用。法官会根据其他证据和情况来综合判断。
2. 如果男方在日常交流中不正面回答：这种情况更可能只是沟通中的障碍或误解，与案件事实无直接关联，更不能作为证据。

综上所述，男方不正面回答问题本身并不构成证据。证据的收集需要遵循法律程序，且必须能够直接或间接地证明案件事实。如果你有其他与案件相关的问题或需要进一步的法律帮助，请随时告诉我。