结论：当责任认定书下来后，约对方处理但对方不来，您可以采取以下措施来维护自己的权益：首先尝试再次沟通协商；若协商无果，可以考虑申请调解；如果调解也未能解决问题，那么您可以依法向人民法院提起诉讼。
详细分析与建议：
再次沟通协商：
- 在对方未按时赴约的情况下，您可以再次尝试与对方进行沟通，了解对方未到场的原因，并尝试协商一个双方都能接受的处理时间和方式。
- 沟通时，保持冷静和理性，明确表达您的诉求和期望，同时倾听对方的意见和困难，寻求共识。
申请调解：
- 如果再次沟通协商无果，您可以考虑向当地的调解委员会或相关机构申请调解。调解是一种非诉讼的纠纷解决方式，具有灵活性和高效性。
- 在申请调解时，您需要提交相关的证据材料，如责任认定书、沟通记录等，以便调解员了解纠纷的全貌。
- 调解过程中，调解员会协助双方进行沟通协商，提出解决方案，并促使双方达成调解协议。
提起诉讼：
- 如果调解也未能解决问题，或者对方拒绝参与调解，那么您可以依法向人民法院提起诉讼。
- 在提起诉讼前，您需要准备好相关的证据材料，如责任认定书、合同文本、沟通记录、损失证明等，以支持您的诉讼请求。
- 诉讼过程中，法院会依法审理案件，并根据事实和法律规定作出判决。如果判决支持您的诉讼请求，对方需要履行判决义务，否则您可以申请强制执行。
法律背景与依据：
- 根据《中华人民共和国民法典》的相关规定，当事人应当按照约定履行自己的义务。如果一方不履行义务或者履行义务不符合约定，给对方造成损失的，应当承担赔偿责任。
- 在货物买卖合同纠纷中，责任认定书是确定双方责任的重要依据。如果对方不履行责任认定书所确定的责任，您有权通过法律途径维护自己的权益。
后续行动建议：
- 在采取上述措施的同时，建议您保持与对方的沟通渠道畅通，以便及时了解对方的动态和意见。
- 如果对方提出合理的解决方案或赔偿请求，您可以考虑接受并协商达成和解协议，以节省时间和成本。
- 如果对方持续拒绝履行责任或采取不合作态度，您需要坚定维护自己的权益，并依法采取进一步的法律行动。
可能遇到的法律后果：
- 如果对方在诉讼过程中败诉，法院会判决其履行相应的责任或赔偿损失。如果对方不履行判决义务，您可以申请强制执行，法院会采取相应的强制措施来执行判决。
- 如果对方在诉讼过程中提出反诉或抗辩，您需要积极应对并提交相关证据来支持自己的主张。法院会根据双方提交的证据和法律规定来作出判决。
希望以上分析和建议能对您有所帮助。如果您在处理过程中遇到任何问题或需要进一步的法律帮助，请随时向我咨询。