被告确实可以要求有利害关系的人回避。这是基于诉讼程序公正性的基本要求，旨在确保案件能够得到公正、客观的审理。以下是对此问题的详细分析：

一、回避制度的法律依据与目的

回避制度是我国诉讼程序中的一项重要制度，其法律依据主要来源于《中华人民共和国民事诉讼法》、《中华人民共和国刑事诉讼法》以及《中华人民共和国行政诉讼法》等相关法律规定。该制度的核心目的在于防止因审判人员或其他诉讼参与人与案件存在利害关系或其他不当关联，而影响审判结果的公正性。通过回避制度，可以保障当事人的合法权益，维护司法的公信力和权威性。

二、被告可以要求回避的人员范围

在诉讼过程中，被告有权要求以下人员回避：

1. 审判人员：包括参与本案审理的各级人民法院院长、副院长、审判委员会委员、庭长、副庭长、审判员、人民陪审员、执行员等。
2. 书记员、翻译人员、鉴定人、勘验人：这些人员虽然不直接参与审判，但他们的行为可能影响案件的公正审理。

三、被告可以要求回避的具体情形

被告可以要求有利害关系的人回避的情形主要包括但不限于以下几种：

1. 亲属关系：如审判人员或其他诉讼参与人与案件当事人存在夫妻关系、直系血亲关系、三代以内旁系血亲关系或近姻亲关系等。
2. 利益关系：如审判人员或其他诉讼参与人自身或其近亲属与案件的处理结果存在直接的利害关系，例如案件涉及财产利益与他们有牵连，或他们的裁决将直接影响其经济利益等。
3. 职务关系：如审判人员曾参与过本案的侦查、审查起诉等工作，不得再担任本案的审判人员。
4. 其他关系：如审判人员或其他诉讼参与人与本案当事人、诉讼代理人存在其他可能影响公正审理的关系，例如经济往来、重大恩怨、同学朋友关系等。

四、回避的程序与决定主体

1. 自行回避：审判人员或其他诉讼参与人认为自己与案件存在利害关系或其他可能影响公正裁判的情形时，应主动提出回避申请。
2. 申请回避：被告及其法定代理人认为审判人员或其他诉讼参与人有应当回避的情形，可以向法院提出申请，并说明理由。法院会依法审查申请，并在一定期限内作出是否回避的决定。
3. 指令回避：法院院长发现审判人员或其他诉讼参与人有应当回避的情形时，有权直接指令其回避。

关于回避的决定主体，根据回避对象的不同，决定审批手续也不完全相同。例如，院长担任审判长时的回避问题，由审判委员会负责决定；审判人员的回避，由法院院长决定；其他相关人员的回避，则由审判长决定。

五、被告行使回避权利的注意事项

1. 及时提出：被告应当在案件开始审理时或发现回避事由后及时提出回避申请，以免影响案件的审理进度。
2. 提供证据：被告在提出回避申请时，应当尽可能提供相关证据材料，以支持其申请。
3. 遵守程序：被告应当遵守法院关于回避申请的程序规定，不得滥用回避权利干扰诉讼秩序。

举例说明：假设在一起民事纠纷案件中，被告发现审判人员与原告存在近亲属关系，可能影响案件的公正审理。此时，被告有权向法院提出回避申请，要求该审判人员回避。法院会依法审查申请，并在一定期限内作出是否回避的决定。

综上所述，被告在诉讼过程中确实可以要求有利害关系的人回避。这是保障诉讼程序公正性的重要举措。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。