结论：是否违法取决于视频内容、删除要求的原因及背景情况。以下分情况详细说明：
一、若视频内容合法，且对方无合法理由要求删除
法律背景：
- 根据《中华人民共和国民法典》中关于人格权和隐私权的规定，公民享有肖像权、隐私权等人格权利。若视频内容并未侵犯他人合法权益（如肖像权、隐私权、名誉权等），且拍摄和发布行为本身合法（如未在私人场所未经允许拍摄），则视频的合法性通常不受质疑。
- 对方要求删除视频，若无合法理由（如视频内容不实、侵犯其权益等），则该要求不具有法律强制力。
法律建议：
- 若您认为视频内容合法，且对方的要求无合法依据，您可以拒绝删除视频。
- 若对方因此采取不当行为（如骚扰、威胁等），您可以保留相关证据，并考虑通过法律途径维护自身权益。
二、若视频内容侵犯他人合法权益，或对方有合法理由要求删除
法律背景：
- 若视频内容侵犯了他人的肖像权、隐私权、名誉权等合法权益，根据《中华人民共和国民法典》的相关规定，被侵权人有权要求停止侵害、排除妨碍、消除危险、恢复名誉、赔礼道歉等，并可能要求赔偿损失。
- 在某些情况下，如视频内容涉及违法信息、虚假信息或违反公序良俗，相关平台或监管部门也可能要求删除视频。
法律建议：
- 若您收到合法的要求删除视频的通知（如来自被侵权人、平台或监管部门），且确认视频内容确实存在问题，建议您及时删除视频，以避免进一步的法律纠纷。
- 若您对删除要求有异议，可以与对方沟通协商，或寻求法律帮助以明确自身权益和责任。
三、特殊情况：若视频作为证据使用
法律背景：
- 若视频内容作为证据在诉讼或仲裁中使用，其保存和删除可能受到法律程序的约束。
- 在此情况下，即使对方要求删除视频，您也可能需要根据法律程序的要求保留视频作为证据。
法律建议：
- 若视频作为证据使用，建议您咨询专业律师以了解具体的法律程序和要求。
- 在法律程序结束前，不要擅自删除可能作为证据的视频内容。
进一步思考：在处理此类问题时，建议您首先评估视频内容的合法性以及对方要求删除的合理性。若视频内容合法且对方要求无合法依据，您可以拒绝删除；若视频内容存在问题或对方有合法要求，则建议您及时删除视频以避免法律纠纷。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。