结论：仅凭“另外一个工人说过了年你不用来了”这一句话，不能直接判定其违法，但该行为可能涉及多种法律情形，下面为你详细分析。

从劳动关系解除的合法性角度分析

1. 若该工人有代表用人单位的权限
   • 在一些小型工地，可能存在实际管理较为松散的情况，如果这个工人被用人单位授权（比如是包工头或者工地负责人等），有权代表用人单位做出人员任免决定，并且其解除劳动关系的理由符合法律规定（例如劳动者存在严重违反用人单位规章制度、严重失职给用人单位造成重大损害等情形），那么这种解除行为可能是合法的。但用人单位需要承担举证责任，证明解除劳动关系的合法性，包括证明该工人有代表权限以及劳动者存在符合法定解除情形的行为。
   • 法律依据：根据《中华人民共和国劳动合同法》第三十九条规定，劳动者有下列情形之一的，用人单位可以解除劳动合同：（一）在试用期间被证明不符合录用条件的；（二）严重违反用人单位的规章制度的；（三）严重失职，营私舞弊，给用人单位造成重大损害的；（四）劳动者同时与其他用人单位建立劳动关系，对完成本单位的工作任务造成严重影响，或者经用人单位提出，拒不改正的；（五）因本法第二十六条第一款第一项规定的情形致使劳动合同无效的；（六）被依法追究刑事责任的。
2. 若该工人没有代表用人单位的权限
   • 如果该工人只是普通员工，没有得到用人单位的授权来解除与你的劳动关系，那么他的这种表述可能不具有法律效力。此时，用人单位与你之间的劳动关系依然存续，用人单位不能因为该工人的这句话就随意解除与你的劳动关系，否则可能构成违法解除。
   • 法律依据：根据《中华人民共和国劳动合同法》第四十八条规定，用人单位违反本法规定解除或者终止劳动合同，劳动者要求继续履行劳动合同的，用人单位应当继续履行；劳动者不要求继续履行劳动合同或者劳动合同已经不能继续履行的，用人单位应当依照本法第八十七条规定支付赔偿金。赔偿金的标准是按照经济补偿标准的二倍向劳动者支付，经济补偿按劳动者在本单位工作的年限，每满一年支付一个月工资的标准向劳动者支付。六个月以上不满一年的，按一年计算；不满六个月的，向劳动者支付半个月工资的经济补偿。

从侵权角度分析

如果该工人的这句话给你造成了名誉上的损害，例如在工地其他工人中传播，导致你的社会评价降低，并且给你带来了精神上的痛苦和经济上的损失，那么该工人的行为可能构成侵权。你可以要求其承担停止侵害、恢复名誉、消除影响、赔礼道歉以及赔偿损失等民事责任。

建议

1. 与用人单位沟通：你可以先与用人单位的管理人员或者负责人进行沟通，了解他们对于你继续工作的态度和安排，明确是否存在解除劳动关系的意图以及原因。
2. 收集证据：如果可能的话，收集该工人说这句话的相关证据，例如在场其他工人的证人证言、录音录像等，以备后续可能出现的纠纷。
3. 寻求法律帮助：如果用人单位确实存在违法解除劳动关系或者其他侵权行为，你可以向我进一步咨询，我会根据你的具体情况为你提供专业的法律建议和维权方案。