结论：离婚时约定小孩抚养费由被告承担，几年后他起诉要求你给抚养费，这种情况是否成立，需根据具体情况来判断，主要包括原协议或判决的内容、双方经济状况的变化以及孩子的实际需求等因素。
详细分析：
原协议或判决的内容：
- 如果在离婚时，双方已经通过协议或法院判决明确约定了抚养费的承担方式，即由被告承担全部或部分抚养费，那么这一约定或判决在一般情况下是具有法律效力的。
- 然而，法律也允许在一定条件下对原协议或判决进行变更。如果被告能够证明原协议或判决存在不公平、不合理或因情况变化而无法继续履行的情况，他可能会向法院提起诉讼，要求变更抚养费的承担方式。
双方经济状况的变化：
- 如果被告的经济状况在离婚后发生了显著变化，例如失业、生病或遭遇其他重大经济困难，导致他无法继续承担原定的抚养费，他可能会向法院申请减少或免除抚养费。
- 同时，如果你的经济状况有所改善，而被告的经济状况恶化，法院在综合考虑双方情况后，也可能会判决你承担部分或全部抚养费。
孩子的实际需求：
- 孩子的实际需求是判决抚养费承担方式的重要因素。如果孩子的成长需要更多的经济支持，例如教育、医疗等方面的费用增加，而被告无法独自承担这些费用，法院可能会判决你共同承担。
- 另外，如果孩子的生活环境发生了变化，例如随你生活或需要更多的照顾，这也可能成为法院判决你承担抚养费的理由。
法律建议：
- 审查原协议或判决：首先，你需要仔细审查离婚时的协议或法院判决，了解原定的抚养费承担方式以及是否有关于变更抚养费的条款。
- 收集证据：如果被告提起诉讼要求你承担抚养费，你需要收集相关证据来证明你的经济状况、孩子的实际需求以及原协议或判决的合理性。
- 寻求法律帮助：由于抚养费纠纷涉及法律程序和专业知识，建议你寻求专业律师的帮助，以便更好地维护自己的权益。
可能后果：
- 如果法院判决你承担部分或全部抚养费，你需要按照判决履行义务，否则可能会面临法律制裁。
- 如果法院维持原协议或判决，被告需要继续承担原定的抚养费，但如果他的经济状况确实无法承担，他可能会向法院申请减免或分期支付。
特殊情况：
- 如果离婚时双方约定的是“抚养费由被告承担，但原告在特定条件下需承担部分费用”，那么在满足这些特定条件时，你可能需要承担部分抚养费。
- 如果离婚后双方通过协商达成了新的抚养费承担方式，并签订了书面协议，那么这一新协议将取代原协议或判决，成为双方履行义务的依据。
总之，离婚时约定小孩抚养费由被告承担，几年后他起诉要求你给抚养费的情况是否成立，需根据具体情况来判断。如果你面临这样的纠纷，建议你及时咨询专业律师，以便更好地维护自己的权益。