结论：在一般情况下，如果孩子从小没有被父亲照顾，长大后父亲住院要求给住院费，孩子不可以直接拒绝支付，但具体是否需要支付以及支付多少，需根据实际情况和法律规定来判断。以下从不同角度进行分析：
一、法律义务角度
赡养义务：
- 根据《中华人民共和国民法典》的相关规定，子女对父母有赡养扶助的义务。这包括经济上的供养、生活上的照料和精神上的慰藉。赡养义务是法定的，不因父母是否曾经抚养过子女而免除。
- 因此，即使父亲从小没有照顾孩子，孩子仍然有义务在父亲需要时提供必要的经济支持，包括支付住院费等医疗费用。
特殊情况：
- 如果父亲存在严重虐待、遗弃等违法行为，导致子女身心受到严重伤害，且这种伤害持续存在或影响深远，子女在特定情况下可能可以主张免除部分或全部赡养义务。但这种情况需要严格的法律程序和证据支持，不是轻易可以主张的。
二、实际情况角度
经济能力：
- 子女是否需要支付住院费，还需考虑其自身的经济能力。如果子女经济困难，无法承担全部或部分费用，可以与父亲协商或寻求其他途径解决，如申请医疗救助、社会救助等。
父亲的经济状况：
- 如果父亲有足够的经济能力支付自己的医疗费用，子女可能无需承担过多费用。但如果父亲经济困难，子女则应根据自身经济状况，在合理范围内提供经济支持。
家庭关系：
- 家庭关系也是影响子女是否支付住院费的重要因素。如果父子关系紧张，子女可能不愿意支付费用。但从法律角度讲，赡养义务是法定的，不能因个人情感而免除。
三、建议与措施
沟通协商：
- 在面对这种情况时，建议子女首先与父亲进行沟通协商，了解父亲的具体需求和期望，以及自身的经济能力和意愿，寻求双方都能接受的解决方案。
寻求法律援助：
- 如果沟通协商无果，或者存在法律争议，子女可以寻求法律援助或咨询专业律师，了解自己的权利和义务，以及可能的法律后果和解决方案。
考虑社会救助：
- 如果父亲经济困难且无法承担医疗费用，子女可以考虑申请医疗救助、社会救助等途径，为父亲提供必要的经济支持。
总结与进一步思考：赡养义务是法定的，不因父母是否曾经抚养过子女而免除。但在实际操作中，还需考虑子女的经济能力、父亲的经济状况以及家庭关系等因素。因此，在面对这种情况时，建议子女首先与父亲进行沟通协商，寻求双方都能接受的解决方案；如果无法协商解决，可以寻求法律援助或咨询专业律师；同时，也可以考虑申请社会救助等途径为父亲提供必要的经济支持。如果你有进一步的法律问题或需要更具体的建议，可以直接向我咨询。