您完全可以依据处罚书去法院起诉要求辱骂人赔偿您的损失。以下是从不同角度为您详细分析：
一、法律依据
根据《中华人民共和国民法典》的相关规定，人格权受到侵害的，受害人有权依照本法和其他法律的规定请求行为人承担民事责任。具体来说，如果辱骂行为侵犯了您的人格权，如名誉权、荣誉权等，您有权要求辱骂人停止侵害、恢复名誉、消除影响、赔礼道歉，并可以要求赔偿损失。
二、处罚书的作用
处罚书是公安机关或相关执法机构对辱骂人作出的行政处罚决定，它证明了辱骂行为的存在以及辱骂人因此受到了行政处罚。这份处罚书在民事诉讼中可以作为证据使用，证明辱骂人的违法行为以及该行为与您所受损害之间的因果关系。
三、起诉流程与赔偿范围
起诉流程：
- 您需要准备起诉状，明确被告（辱骂人）、诉讼请求（如要求赔偿损失的具体金额）、事实和理由（包括辱骂行为的发生、处罚书的内容等）。
- 将起诉状提交至有管辖权的人民法院，并缴纳诉讼费。
- 法院受理案件后，会安排开庭审理，您需要出庭陈述事实、提供证据。
- 法院根据审理情况作出判决，如果判决支持您的诉讼请求，辱骂人需要履行赔偿义务。
赔偿范围：
- 赔偿范围通常包括您因辱骂行为所遭受的实际损失，如精神损害抚慰金、因名誉受损导致的经济损失等。
- 精神损害抚慰金的数额会根据辱骂行为的严重程度、对您造成的精神损害程度以及当地的经济水平等因素综合确定。
- 如果您因名誉受损导致了其他经济损失，如工作机会丧失、商业信誉下降等，也可以要求赔偿，但需要提供相应的证据证明这些损失与辱骂行为之间的因果关系。
四、注意事项
- 在起诉前，建议您先收集并整理好相关证据，除了处罚书外，还可以包括辱骂行为的录音、录像、证人证言等。
- 如果您对起诉流程或赔偿范围等法律问题不确定，可以寻求专业律师的帮助，以确保您的权益得到充分保障。
- 在诉讼过程中，保持冷静和理性，遵循法庭程序，尊重法官和对方当事人，以维护良好的诉讼秩序。
如果您有任何进一步的法律问题或需要进一步的法律帮助，请随时向我咨询。