在民事诉讼中，如果儿子想要替父亲出庭作为代理人，确实需要提供一些关系证明材料。根据公民代理的相关规定，我们可以明确以下几点：

首先，儿子作为当事人的近亲属，是有资格被委托为公民代理人的。近亲属的范围包括配偶、父母、子女等，因此儿子替父亲出庭是符合规定的。

其次，为了证明儿子与父亲之间的近亲属关系，需要向人民法院提交相应的关系证明材料。这些材料可以包括婚姻关系证明（如果适用的话，虽然在此情况下主要证明父子关系，但婚姻关系证明在家庭关系中常作为辅助材料）、户口簿，或者公安机关、有关社区等出具的可以证明代理人与当事人之间系近亲属关系的书面材料。这些材料的作用是确认儿子与父亲之间的法律关系，确保代理的合法性和有效性。

最后，除了关系证明材料外，儿子作为代理人还需要提交《授权委托书》和居民身份证或其他有效身份证明。这些材料是代理过程中必不可少的，用于确认代理人的身份和代理权限。

综上所述，儿子替父亲出庭作为民事诉讼的代理人时，确实需要提供关系证明材料，如户口簿或公安机关、有关社区等出具的书面材料，以证明其与父亲之间的近亲属关系。同时，还需要提交《授权委托书》和身份证明等材料。希望这些信息能对您有所帮助。