在签署赡养协议时，通常需要以下人员到场以确保协议的合法性和有效性：
被赡养人（老年人）：
- 赡养协议直接关系到老年人的切身权益，因此，未经老年人同意的赡养协议对其不具有法律约束力。老年人必须亲自到场，明确表达自己的意愿，并在协议上签字确认。这是确保协议合法有效的关键步骤。
赡养人（成年子女等）：
- 赡养人，包括老年人的婚生子女、非婚生子女、养子女、有抚养关系的继子女，以及在特定情形下有负担能力的孙子女、外孙子女，都需要到场参与协议的签署。他们作为协议的另一方，需要明确自己的赡养义务，并在协议上签字确认。
见证人（可选但推荐）：
- 虽然法律没有明确规定赡养协议必须要有见证人，但为了增加协议的可信度和法律效力，建议邀请无利害关系的第三方作为见证人到场。见证人可以是村（居）委会的工作人员、律师或其他受尊重的社会人士。他们的存在可以确保协议的签署过程公开、公正，并在必要时为协议提供证明。
法律专业人士（可选但推荐）：
- 如果赡养协议的内容较为复杂，或者涉及较多的法律条款，建议咨询或邀请法律专业人士（如律师）到场。他们可以提供专业的法律意见，确保协议的内容合法、合规，并避免未来可能出现的法律纠纷。
签署赡养协议时的注意事项：
- 确保老年人同意：赡养协议必须得到老年人的明确同意，未经老年人同意的协议无效。
- 明确赡养义务：协议中应详细列明赡养人的具体义务，包括赡养方式、费用承担、后事处理等。
- 避免损害老年人权益：协议内容不得损害老年人的合法权益，如以放弃继承为条件免除赡养义务等约定无效。
- 书面确认变更：如需对赡养协议内容进行变更，应再次以书面方式确认变更，并由所有相关方签字确认。
示例情况：
以您提供的参考信息中的案例为例，在村调解委员会的主持下，小飞与小丹及两人的父亲共同签署了一份《赡养协议书》。在这个案例中，被赡养人（父亲）、赡养人（小飞和小丹）都到场参与了协议的签署，并且协议在村委会备案了一份，这增加了协议的可信度和法律效力。
综上所述，签署赡养协议时，被赡养人和赡养人必须到场，并建议邀请见证人和法律专业人士参与，以确保协议的合法性和有效性。