针对您描述的情况，核心结论是：您可能需要承担一定的民事赔偿责任，若对方行为存在过错可相应减轻您的责任；若伤势严重，还可能涉及行政或刑事责任问题，需根据实际情况判断。以下为具体分析：
民事赔偿责任方面
- 您的行为性质：您拿走施工方的东西，这一行为从法律性质上可能构成侵占他人财物。施工方上门讨要是合法合理的维权行为，而您在被对方故意拉倒受伤的过程中，虽然您没有主动肢体接触对方，但您的先行不当行为（拿走他人东西）是引发后续事件的起因。
- 责任承担原则：根据民法典中关于侵权责任的规定，行为人因过错侵害他人民事权益造成损害的，应当承担侵权责任。在这种情况下，您和施工方可能都需要根据各自的过错程度承担相应的责任。施工方故意拉倒您导致您受伤，存在明显过错；而您拿走他人东西的行为也存在过错，所以您可能需要承担一部分因自身过错导致的损失，同时施工方要对其拉倒您给您造成的伤害承担主要赔偿责任。
- 赔偿范围：如果施工方需要承担赔偿责任，赔偿范围通常包括您因受伤产生的医疗费、误工费、护理费、交通费、营养费等合理费用。如果造成残疾，还包括残疾赔偿金、残疾辅助器具费等；造成死亡的，还包括丧葬费、死亡赔偿金等。
行政或刑事责任方面（视伤势情况而定）
- 伤势较轻时：如果您的伤势经鉴定不构成轻伤及以上级别，施工方故意拉倒您的行为可能违反《中华人民共和国治安管理处罚法》，会面临警告、罚款或者行政拘留等行政处罚。
- 伤势较重时：如果您的伤势经鉴定构成轻伤及以上级别，施工方的行为可能涉嫌故意伤害罪。根据刑法规定，故意伤害他人身体的，处三年以下有期徒刑、拘役或者管制；致人重伤的，处三年以上十年以下有期徒刑；致人死亡或者以特别残忍手段致人重伤造成严重残疾的，处十年以上有期徒刑、无期徒刑或者死刑。不过，在量刑时会综合考虑双方的过错情况等因素。
建议：
- 首先，及时就医并保留好所有相关的医疗票据、诊断证明等证据，这些是后续主张赔偿的重要依据。
- 其次，可以与施工方协商解决赔偿事宜，如果协商不成，您可以向法院提起民事诉讼，要求施工方承担相应的赔偿责任。
- 如果您认为施工方的行为涉嫌违法犯罪，您可以向公安机关报案，由公安机关进行调查处理。
如果您还有其他疑问或需要进一步的帮助，请随时向我咨询。