结论：在您描述的情形下，即使您在调解书上签了字，若认为调解存在重大误解、显失公平或对方存在欺诈、胁迫等情形，理论上仍有可能通过法律途径寻求救济，但直接起诉对方“坐牢”（即追究对方刑事责任）的可能性较低，更多可能是涉及民事赔偿的重新调整或调解协议的撤销。以下从不同角度详细分析：
一、调解书的法律效力
调解书是双方当事人在调解过程中，就争议事项达成一致意见后，由调解组织或法院制作的具有法律效力的文书。一旦双方签字确认，调解书即具有约束力，双方应当履行。若您已在调解书上签字，原则上应视为您对调解内容的认可，调解书具有法律效力。
二、起诉对方刑事责任的可能性
故意伤害罪的构成：若您希望追究对方刑事责任，需证明对方的行为构成故意伤害罪。这通常要求对方有伤害您的故意，且您的伤情达到一定的严重程度（如轻伤以上）。然而，在您描述的情形中，是您先动手，对方可能构成正当防卫或防卫过当，而非故意伤害。
正当防卫与防卫过当：根据《中华人民共和国刑法》的相关规定，正当防卫不负刑事责任。若对方在您先动手的情况下，为了保护自己的人身安全而采取的防卫行为，且未明显超过必要限度，则可能构成正当防卫。若防卫行为明显超过必要限度造成重大损害，则可能构成防卫过当，但防卫过当也应当减轻或免除处罚。
刑事自诉与公诉：故意伤害罪一般属于公诉案件，由公安机关立案侦查，检察院提起公诉。但在某些情况下，如伤情较轻或双方已达成和解，您也可以选择刑事自诉。然而，在您已签字确认调解书的情况下，再提起刑事自诉的难度较大。
三、民事赔偿与调解协议的撤销
民事赔偿的重新调整：若您认为调解书中的赔偿数额过低或存在其他不公平情形，您可以尝试与对方协商重新调整赔偿数额。若协商不成，您可以向法院提起民事诉讼，要求重新确定赔偿数额。但需注意，您需提供充分的证据证明调解书存在重大误解、显失公平等情形。
调解协议的撤销：根据《中华人民共和国民法典》的相关规定，若调解协议存在欺诈、胁迫等情形，受损害方有权请求人民法院或仲裁机构予以撤销。若您能证明在签订调解书时受到对方的欺诈或胁迫，您可以向法院申请撤销调解书。但需注意，撤销调解书的申请需在法定期限内提出，并需提供充分的证据。
四、建议与风险提示
收集证据：若您希望寻求法律救济，建议您尽快收集相关证据，如现场照片、视频、证人证言、医疗记录等，以证明您的伤情、对方的行为以及调解书签订时的情形。
咨询专业律师：由于法律程序复杂且涉及专业法律知识，建议您在采取任何行动前咨询专业律师。律师可以根据您的具体情况提供针对性的法律建议，并帮助您制定合适的法律策略。
理性对待：在处理此类纠纷时，建议您保持理性态度，避免情绪化决策。通过法律途径解决问题需要时间和耐心，且结果可能不如您所愿。因此，在采取行动前请充分考虑各种可能性和后果。