赌博被抓时，身上的钱并不都认定为赌资。具体分析如下：
一. 赌资的认定标准
- 直接关联的资金：如果证据能够表明身上的钱与赌博活动有直接关联，如准备用于赌博的本金、正在投注的资金或刚赢取未离场的收益，这些通常会被视为赌资。
- 合法来源的资金：若当事人能够合理说明钱款的合法来源，并与赌博活动无关，如日常开销工资等，这部分资金则不应被认定为赌资。
二. 相关法律依据
- 根据《关于办理赌博刑事案件具体应用法律若干问题的解释》，赌资数额的认定需结合具体证据，如计算机网络投注记录、现场收缴的金额等，且对于无法说明合法来源的资金，在特定情境下可认定为赌资。
三. 执法机关的判断
- 执法机关在实际操作中，会依据具体情况进行深入调查和严谨判断，综合考虑赌博方式、规模、当事人陈述及资金来源等多方面因素，以确保赌资认定的准确性和公正性。
四. 当事人的权益
- 如果当事人对执法机关关于赌资的认定有异议，可以通过合法途径维护自己的权益，如申请行政复议或提起行政诉讼。
我的观点：在赌博被抓的情境中，身上的钱是否全部认定为赌资并非一概而论，而是需根据具体证据和法律规定进行综合判断。因此，如果您或他人面临此类情况，建议积极配合执法机关的调查，同时保留好相关证据，以便在必要时维护自己的合法权益。如有进一步需要，您可以继续咨询我。